Googlebot — це бот Google для веб-сканування — автоматизоване програмне забезпечення, яке систематично відвідує веб-сторінки для збору даних. Він сканує веб-сайти, переходячи за посиланнями, читаючи вміст і оцінюючи структуру сайту. Після сканування сторінки дані надсилаються до систем індексування Google, де вони обробляються та, якщо вважаються корисними та унікальними, розглядаються для включення в Пошук Google.
Проте те, що сторінку було проскановано, не гарантує, що вона з’явиться в результатах пошуку. Це рішення приймається на етапах індексування та ранжування.