Hola,
A estos metas google si tendria que hacerles caso ya que son los que pueden negarle el permiso a indexar y seguir los links de esa pagina. Con estos metas le das permiso. Creo que el valor del content deberia ser uno de los 3 valores, normalmente el "all", que tambien creo que es el por defecto si no se especifica el meta. Aunque para mas info mira en
http://www.robotstxt.org/wc/meta-user.html .
Suerte.