Si tu sitio esta en php te recomendaria que te instales una pequeña herramienta que hemos desarrollado.
Se llama Buchon y te avisa cuando una araña de buscador visita una pagina de tu sitio para posterior indexado, y te envia un email con esa info.
Podes bajarla desde Softonic:
http://www.softonic.com/ie/35622/Buchon_PHP
Espero te ayude en este tema.
Saludos