Muchas veces queremos saber que hace el robot de Google cuando entra en nuestro site, mi amigo @vipv me pasó hace un tiempo una línea de código que desde la consola permite filtrar al Googlebot en el fichero access_log y ver en tiempo real qué páginas está visitando:
tail -f access_log | grep Googlebot
