Pues intentando optimizar una de las últimas cosas que puedo a mi foro, quiero darle una vuelta e tuerca más al robot.txt. Lo que he pensado es una cosa como esta, pero tengo alguna duda:
Código:
User-agent: *
Disallow: /phpbb/viewtopic.php
Disallow: /phpbb/viewforum.php
Disallow: /phpbb/index.php?
Disallow: /phpbb/posting.php
Disallow: /phpbb/search.php?
Disallow: /phpbb/ucp.php
Disallow: /phpbb/mcp.php
Disallow: /phpbb/post
Disallow: /phpbb/member
Disallow: /phpbb/memberlist.php
Disallow: /phpbb/faq.php
La cuestión es que por algún tipo de problema con la base de datos, el cual no me ha permitido instalar el SEO premod ni nada para reescribir los enlaces (había algunos hilos que se perdían), he tenido que dejar los enlaces por defecto. Algo tipo:
viewtopic.php?f=16&t=39
viewforum.php?f=16
Con ese robots.txt los bloquearía? Entiendo que no pero quiero estar completamente seguro...