Googlebot
Googlebot — поисковый робот компании Google, используемый для сканирования мировой сети и пополнения поискового индекса системы Google. Робот начинает сканирование каждого отдельного сайта с получения списка URL-адресов веб-страниц, созданного по результатам предыдущих сеансов, и пополняет его данными из файлов Sitemap; просматривая страницы, робот ищет ссылки (SRC и HREF) и добавляет их в список страниц, подлежащих сканированию.

Веб-мастера могут управлять роботом с помощью команды в файле robots.txt или мета-тега codice_1; Google в списке своих инструментов для веб-мастеров даёт возможность проверить «видение» сайта роботом. IP-адреса бота время от времени меняются.<br>
При сканировании Googlebot указывает user-agent:
* codice_2
* codice_3
* codice_4
* codice_5 (паук, сканирующий изображения)
Q45842
поисковый робот
Concept
Q95
компании Google
ORG
Q75
мировой сети
Concept
Q2258979
поискового индекса
UNK
Q9366
Google
MEDIA
Q80776
robots.txt
UNK
Q11135
IP-адрес
Concept
Q1425771
Googlebot
MEDIA
Q1425771
Googlebot
MEDIA
+1^^http://www.w3.org/2001/XMLSchema#decimal
1
NUMBER
+2^^http://www.w3.org/2001/XMLSchema#decimal
2
NUMBER
+3^^http://www.w3.org/2001/XMLSchema#decimal
3
NUMBER
+4^^http://www.w3.org/2001/XMLSchema#decimal
4
NUMBER
+5^^http://www.w3.org/2001/XMLSchema#decimal
5
NUMBER
instance of
developer
manufacturer