Pfff, quien te manda estar con telefónica
Si el router te lo dieron hace relativamente poco, podrás configurarlo por web o por telnet. Por web simplemente pon en el navegador de algún host la ip del router (típicamente 192.168.1.1) y en telnet tres cuartos de lo mismo, pero con un nombre de usuario y contraseña. Si el router es más viejo, había que andar con un cable, conectarlo al puerto serie del ordenador y andar haciendo virguerías con el hyperterminal.
En cuanto al password y demás, deberían habértelo dado en el contrato, pero ya conozco casos en que estos cabronazos de telefónica no te lo dan... :-p
Lo mejor casi es que busques por san Google algo con tu modelo de router específico, hay muchísimos tutoriales por ahí rulando.
Espero tengas suerte