Duda con los robots

[ORPHEO]

Hola amigos:

Tengo un par de dudas respecto a los robots de los buscadores. La primera es:

Los robots leen el código php, o directamente leen el resultado de la página ya ejecutada? O sea, si creo unas metatags en php, por ejemplo :

<title><? echo $titulo; ?></title>

leen eso mismo, o leen:

<title>MI TITULO.</title>?


La otra duda es respecto al robots.txt. El * me sirve de comodín? Puedo poner:

Disallow: *.inc.php

para que no me indexe todos los archivos que acaben en inc.php?


Salu2.

[Cluster]

Según la filosofía de PHP como lenguaje del lado del servidor y como accede un robot a tu web .. este lo hace como si de un navegador cualquiera se tratase .. es decir .. llamando a tus páginas de tu sitio .. sean nose.html o nose.php .. Lo que va a interpretar tu robot será todo el HTML/etc que genere tu nose.php

Un saludo,

[claudiovega]

pasa lo mismo con los gestores de descarga?

[josemi]

Hola,

Todo lo que pongas en un servidor web (HTTP), si es accedido via HTTP, es recogido de la misma forma que cualquier navegador. Asi que tanto los navegadores, robots de buscadores, robots de gestores de descargas, lectores de RSS, usuarios de cURL, etc, siempre que se conecten por HTTP recibiran el HTML generado por el script PHP.

Saludos.

[ORPHEO]

En primer lugar, gracias por responder.

Pero, y si los metatags (y la página en general) la creo mediante php en funcion del idioma del navegador? Si tengo una página que se muestra en ingles o español dependiendo del idioma del navegador, el robot en que idioma la recoge?


Respecto a la otra duda, alguien sabe algo del tema?

Salu2.

[Cluster]

Pero .. esos metatags que mencionas . como lo creas .. desde PHP o desde javascript .. es decir, como obtienes el navegador que usa el cliente?

De todas formas .. una conexión HTTP se indican algunos datos como el tipo cliente que usa y algunos más .. Esos datos son enviados normalmente por un navegador .. pero, gestores de descargas, y robots las generan así que depende de que cabecera HTTP genere ese robot indentificandose como tal idioma así actuará tu código y le entregará lo que corresponda.

Hasta con PHP puedes hacer conoexiones HTTP a una página y "simular" que PHP es un navegador X tan sólo con usar las cabeceras adecuadas HTTP que describe su protocolo.

Un saludo,

[ORPHEO]

Ajá, o sea que si el robot genera una cabecera en inglés (que será lo más común en base al país de origen del programador del robot) la página la recogerá en inglés, no?

Salu2.

[ORPHEO]

Ajá, o sea que si el robot genera una cabecera en inglés (que será lo más común en base al país de origen del programador del robot) la página la recogerá en inglés, no?

Por cierto, el script es este:

Código PHP:

  <?php
 
// Procesar idioma
if (isset($_GET['lang'])) {
    $lang = $_GET['lang'];
}
 
if (isset($lang)
    && !strstr($lang, '/')
    && file_exists('lang/'.$lang.'.php')){
    $sitelang = strtr($lang, '$/\\:*?"\'<>|`', '____________');
 
} elseif ($_SERVER["HTTP_ACCEPT_LANGUAGE" ] != ''){
    $lang = explode(",", $_SERVER["HTTP_ACCEPT_LANGUAGE" ]);
    for ($i=0; $i<count($lang); $i++){
        if (!isset($userlang)){
           $idiomas=array('es'=>'spanish','en'=>'english');
           if (isset($idiomas[substr($lang[$i], 0, 2)])) $userlang=$idiomas[substr($lang[$i], 0, 2)];
        }
    }
    if(file_exists('lang/'.$userlang.'.php')) $sitelang = $userlang;
} else {
    unset($lang);
}
 
if (!isset($sitelang)){$sitelang = "english";}
require "lang/{$sitelang}.php";
 
?>   

La variable $sitelang es la que enviará un archivo de idioma u otro.

Salu2.

[ORPHEO]

Ya me he informado sobre mi segunda duda. El * no me sirve de comodín...

Respecto a la última pregunta que planteaba, sabéis algo?


Salu2.