1. если это действительно роутер, то должны быть несколько выходов под восьмижилку и соответственно подключить к каждому из ноутов по проводу и прописать в свойствах IP для каждого из них 192.168.1.2 и 192.168.1.3 (последняя цифра может быть любой до 254, но разная для каждого) и маску 255.255.255.0, тогда должно работать...
2. если роутер WIFI, то еще все проще - настраивать ничего не надо...
3. если выход один на роутере - купить точку доступа WIFI - она недорогая, и подключить в это отверстие, с настройками ТД отдельный разговор, но это легко.