Muchas gracias por tu sorprendente respuesta.
Voy a buscar todo lo que me as comentado ya que no se como hacer para contar por navegadores como dices, ni otras cosas de las que as dicho.
Ni me ayudas un poco aportando un poco del código necesario seria de gran ayuda =P
Muchas gracias de nuevo por compartir tus conocimientos.
Edito: He leído sobre googlebot, en mi pagina web solo hay una pagina que es la index.php y después se va cambiando el contenido dependiendo de si tienes una session o si tiene una variable GET en la url, mi duda es, si encuentra un enlace que lleve a
http://url/?id=1273 ¿la indexa? ¿la visita el googlebot?, ya que no me importa que visite el index.php sin mas pero las demás no quiero que las visite, y si las visitas quisiera saber si se puede bloquear con el archivo robots.txt
De esta forma:
User-agent: *
Disallow: /*