Tienes dos soluciones a tu pregunta:
1ª.-Si tienes un hub o un switch solo tendrias que conectar ambos ordenadores y el modem o router adsl al hub y listo.
2ª.- Lo normal es utilizar un programa llamado proxy que permite desde un ordenador compartir el acceso a internet a mas equipos. Lo que tienes que hacer es instalar el programa en el equipo donde esta conectado el router o modem adsl. El resto de los equipos les tienes que configurar para que cuando generen una peticion para salir a internet, la manden al ordenador con proxy.
Leete este mensaje ya publicado en forosdelweb donde el maestro de Alfon indica un par de programas proxy que te pueden ser útiles:
<a href='ir.asp?http://www.forosdelweb.com/mensaje.asp?id=59038' target='_blank'>http://www.forosdelweb.com/mensaje.asp?i...</a>
Espero que te sea de ayuda y suerte.