Hola:
En tu caso solo es necesario un Switch o un Hub, ya que un Router es mas caro y pensado para redes grandes o LAN.
Personalmente te recomiendo un Switch, que te ayudara a evitar problemas de colisión.
Tengo los CCNA 1-2-3-4 en Pdf por si te interesa profundisar en el tema y saber los comandos para configurar los dispositivos (mandame tu mail por mensaje privado y los envio).
Suerte!