Yoast SEO

[boryi]

Hola, buenos dias,

Aunque a algunas URL.s de mi pagina les he puesto "NOINDEX" con el plugin yoast SEO, he viso que google me las ha indexado, para evitar que cgooglr no me indexe algunas URL.s que yo quiera, no vasta con ponerle "NOINDEX" con el plugin yoast SEO?? o se lo tengo que poner tambien en el robots.txt??

Y para decirle a google que quie las urls de la busqueda que no queria que indexe como lo hago??, o al ponerle "NOINDEX" con el tiempo acabaran quitandose??

Gracias y salu2

[franciscomarin]

¿No es posible que Google ya tuviera esas páginas antes de que tu las marcaras como noindex?

[lauser]

Coincido con @franciscomarin.
En webmaster tools puedes eliminar dichas url's.

[boryi]

Gracias por vuestras respuestas,

Lo más seguro es que me las indexara antes de marcarlas como "noindex", porque no me di cuenta, pero necesito quitarlas, como lo hago en el webmastertools??

Gracias

[lauser]

Más vale una imagen que mil palabras....

[boryi]

Mil gracias Lauser

[lauser]

Iniciado por boryi

Mil gracias Lauser

[boryi]

En el webmatertools le pego un listado de todas las ULS.s que quiera que me quite??, porqu algunas ya no existen, son de la versión anterior de mi web.

Esto no me eliminará la indesación de mi pagina, no??, es decir, las url.s que no le especifique

[lauser]

Iniciado por boryi

En el webmatertools le pego un listado de todas las ULS.s que quiera que me quite??, porqu algunas ya no existen, son de la versión anterior de mi web.

Esto no me eliminará la indesación de mi pagina, no??, es decir, las url.s que no le especifique

Des-indexaras las url's que solicites, solo esas. Pero ten un poco de paciencia no creas que es instantáneo. Las que sigan vivas y las quieras quitar... recuerda bloquearlas igualmente en robots.txt (las que ya no existen tambien se pueden bloquear si quieres).

[boryi]

ok, gracias, y cuanto tarda + o -??

entonces todas las url.s que quiera quitar la bloqueo tambien en el robots. txt, asi, no??

Disallow: /http://www.midominio.com/mipagina.html/

y asi todas, esten vivas o no. En google me ha idexado la URL http://www.midominio.com/robots.txt, como hago para bloquear esta en el mismo robots.txt para que me la quite??

Por otro lado tengo muchas ULR.s no amiigable de la otra version, como por jemplo:

http://www.midominio.com/?pageNum_Sa..._Sacardatos=23

tambien las bloqueo en el robots.txt??

Gracias

[boryi]

Prmiteme una última pregunta, el archivo robots.txt lo subo a la raiz del servidor, no??, y estas URL.s que he restringido en el robots.txt, cuando las elimine google las quito, no??

Gracias

[lauser]

Lo tienes que colocar en la raiz de tu web, puede ser servidor, hosting, carpeta, etc... depende de como lo tengas.

cuando las elimine google las quito, no??

No solo indexa google.... déjalas un tiempo..largo..largo. No molestan ni influyen en la carga de tu web, no te preocupes.

[boryi]

Mil gracias Lauser, te lo agradezco mucho, de verdad.

Cuando quieras te invito a un café.

[boryi]

Hola:

He dejado un tiempo desde que solicité a google la eliminación de las URL.s, y en mi webmastertools me pone que han sido eliminadas, pero luego hago la búsqueda y no las ha eliminado. No se si me lo ha hecho mal, porque le introduzco a eliminar una URL, por ejemplo:

http://subdominio.midominio.com/subdominio/

y lo introduce poniendo el dominio general por delante:

http://www.midominio.com/http://subd...om/subdominio/

Como puedo hacer para que me lo deje como el primero??

Y en el robots.txt que pongo para restringir acceso al dominio, ahora lo tengo:

Disallow: http://subdominio.midominio.com/subdominio/

o lo tendria que poner:

User-agent: *
Disallow: /subdominio1/
Disallow: /subdominio2/
Disallow: /subdominio3/

Gracias

[lauser]

Robots txt no reconoce http://... debe comenzar por "/".
Ejemplo:

Código :

Disallow: /index.php?post/2014/07/29/Obtener-un-listado-completo-y-logos-de-tosad-las-Distribuciones-Linux
Disallow: /post/Instalar-y-desinstalar-aplicaciones-en-CenTos,Fedora-y-derivados
Disallow: /index.php?post/Manuales/%C2%BFQu%C3%A9-hacer-despu%C3%A9s-de-instalar-CentOS/RHEL-6.x
Disallow: /post/Soluci%C3%B3n
Disallow: /post/Potencial%20Regresi%C3%B3n
Disallow: /post/Informe%20original
Disallow: /post/Caso%20de%20prueba
Disallow: /post/Calexico2
Disallow: /post/ssh
Disallow: /post/--threads%20thread_num
 

[boryi]

Gracias Lauser,

Y como tengo que hacer para proteger desde el robots.txt una carpeta y Todo su contenido?

Y para evitar que google me la indexe?

Mil gracias

[franciscomarin]

Simplemente con /carpeta/ es suficiente.

Si la carpeta está en el robots.txt, Google no la pillará. Si ya la tiene en su BDD simplemente debes solicitar la eliminación desde el WMT.

[boryi]

Gracias Fernando Martín, eso ya lo he puesto, pero aunque me restringe el acceso a la carpeta bien, alccontenido si me deja acceder, en este caso es un vídeo.

Y como tendría que hacer para que si alguien intenta acceder a esta carpeta restringida por URL, en vez de salirle la típica pantalla de error 404 le salga la página de error.PHP?

Gra cias

[boryi]

He protegido la carpeta1 mediante el robots.txt poniendo en este:

Disallow: /carpeta1/

Y me la protege perfectamente, pero dentro de esta tengo un vídeo, y en el navegador pongo:

Mudominii.con/ carpeta 1/video1.mp4

Y me lo sigue reproduciendo, que tengo que hacer para que no me reproduzca el vídeo si ponen la dirección en el navegador??, porque necesitó que sea contenido restringido. Poniendo contraseña a la carpeta o algo así??

Gracias y salu2

[lauser]

Para evitar que indexe una carpeta y todo su contenido, no debes poner la barra final, ejemplo:

Código Apache:

Disallow: /carpeta1
 

El tema de proteger...
Proteger de que? especifica un poco más. Con robots no proteges ni contra descargas, ni contra visualizaciones, eso ya es otra cosa.... lo haríamos con apache, pero especifica mejor.... lo ideal sería un nuevo post en la sección de apache.

[boryi]

Hola Lauser, perdona si no me he explicado bien.

Te explico, en la carpeta "carpeta1" que he restringido el acceso con robots.txt, tengo unos videos que solo quiero que los puedan er usuarios registrados, estos videos los incluyo en mis post y el usuario con privilegios los podrá ver, hasta aqui bien, pero si yo (o algun suario) pongo en el navegador la ruta al video:

www.midominio.com/carpeta1/video1.mp4

entonces lo puede ver sin problemas, incluso descargarlo, y eso no me interesa, como puedo hacer para que no los puedan visualizar de esta forma, tecleando la ruta al video en el navegador??

Estoy un poco perdido con esto

Gracias y salu2

[lauser]

Te repito... una cosa es restringir que te indexen y otra bloquear el acceso, cosa que no se puede realizar con robots.txt. La opción mas factible seria mediante .htaccess de apache u otro tipo de formulas.

[boryi]

hola Lauser, gracias por tus respuestas, ya he probado a restringir la viualización de los videos con el htacces, poniendo un archivo .htacces dentro del directorio "carpeta1", y perfecto, no me deja visualizarlos si pongo la direccion al video en el navegador, pero tampoco me deja visualizarlos desde el post, y eso ya no me interesa, me interesa que desde el post si lo puedan visualizar. En el archivo .htacces pongo esto:

ErrorDocument 403 http://www.midominio.com/error
order deny,allow
deny from all

Se te ocurre como pueo arreglar esto??

Mil gracias

[franciscomarin]

Tendrás que utilizar algún lenguaje para que detecte si el usuario/a está logueado o no.

De todos modos esto ya se sale completamente del asunto de este hilo, lo mejor es que abras uno nuevo.

[boryi]

Ok, gracias franciscomarin,

Solo necesitaba una pista para saber por donde ir. Prmiteme la ultima pregunta, y si le digo al servidor que me proteja ese directorio con usuario y contraseña, valdria??

Gracias, y ya dejo el hilo

Salu2

[lauser]

si le digo al servidor que me proteja ese directorio con usuario y contraseña, valdria??

Si por supuesto, siempre que proporciones user y key a tus lectores.
Como te dijo franciscomarin.... abre otro hilo.

[boryi]

mil gracias!!, solo necesitaba saber por donde ir, ver una luz, jeje