A ver:
Lo mas facil es que le pongas los datos de la conexion de internet al modem (Conectabox), y dejes los demas pc's con la ip automatica, y que cada uno obtenga la ip automaticamente, al igual que el router, lo tienes que configurar con ip automatica, asi te ahorras problemas...
Y para acceder al modem, normalmente es la direccion http://192.168.1.1
Saludos