Mira amigo no necesitas configurar nada, si te funciono el internet con una sola maquienas no tienes de que preocuparte. Con ese adsl viene un cd con el manual, leelo pa que tengas una mejor idea de lo que estas haciendo; no sera necesario que lo entiendas del todo
Ahora en cuanto a tu problema, presumo , que solamente es un problema de ip. Elrouter tiene asignada una ip de red, esta sera la puerta de enlace en tu maquinas, las mismas que tienen que tener la misma ipa ecsepcion del ultimo numero; si tu router es 192.168.0.1 pues ponles a tus compuadoras 192.168.0.11, 192168.0.22, los ultimos numeros 11 y 22 pueden cambiar a tu antojo. Esto de las ip es porque si no te ha funcionado en modo de ip automatica asi que nimodo te tocara cambiarla, no sobra decir que todas las maquinas incluyendo el router deben estar en la misma mascara de sub red que en el caso de mi ejemplo seria 255.255.255.0.
No te desanimes, este router tine 4 puesrtos para que conectes si quieres 4 switch de 8 puertos es decir 32 maquinas yo lo he probado asi; y aunque la red se vuelve lenta pues funciona y es de lo que estamos hablando. En sintesis, busca la ip que tiene tu router y configura las computadoras, todo en Conecxiones de red, alli te saldra tu tarjeta e red dale un click derecho y te saldra luna ventanita, alli escojes protocolo tcpip y le das click en propiedades y listo pones las ip.....no olvides ir a opciones abansadas y poner la ip del router en el wins (pones agregar) y avilitas netbios, cuando estes alli sabras que hecer, si no pues estudia el tema de poner ip fijas en windows
Un saludo y espero que te sirva lo que te he dicho.
AAt. _Javier Benavides
Como conectar 2 maquinas en red