Robots o arañas de Google

APIs-Google
AdSense: Este robot visita la página para conocer su contenido y poder proporcionar anuncios convenientes.
AdsBot para Web móvil El robot AdsBot hace comprobaciones de calidad de los anuncios situados en las páginas web en versión móvil. Existe un robot para Android y otro para iPhone.
AdsBot: Comprueba la calidad de los anuncios que hay en el sitio web que se muestran desde escritorio.
AdsBot-Google-Mobile-Apps: Revisa la calidad de anuncios situados en aplicaciones Android, sigue la misma regla que el robot de AdsBot.
Googlebot-Image
Googlebot-News
Googlebot-Video
Googlebot

Estos son todos los robots que usa el buscador de Google para rastrear un sitio web actualmente.