Como ya he comentado antes estoy programando un spider en donde todos podeis acceder, pero tengo una duda:
¿Como interpreta Google estas Urls?
http://www.forosdelweb.com http://forosdelweb.com
Es la misma página, pero supongo que internamente Google normalizará
http://forosdelweb.com por
http://www.forosdelweb.com, ¿es asi?
¿y si son paginas diferentes?, es decir, ¿que hace Google en estos casos?
pos eso, ya me direis, a ver si puedo similarlo en el spider.