и длинк и асус позволяют настраивать dhcp, там настраивается пул адресов (количество устройств, которые может адресовать маршрутизатор, начальный и конечный адрес пула), там же настраивается выдаваемый по умолчанию шлюз.
целевая сеть должна выглядеть следующим образом: модем стрим, далее по вану роутер асус, ноуты к нему по вафле, в лан порт для расширения подключаемых кабелем устройств подтыкаем 8-ми или 16-портовый (в зависимости от нужд) 100-мегабитный свитч. тогда не надо будет настраивать маршруты и dhcp, все по умолчанию, можно даже раздачу ip-шников сделать автоматом. ну и желательно чтобы компьютеры были в одной рабочей группе, для простоты настройки сетевых принтеров и общих папок.
свитч можно заменить тем же имеющимся длинком и воткнуть как советовали по лану, но могут быть проблемы с раздачей интернета и скорость локалки будет пониже, в силу низкой пропускной способности маршрутизатора д-линк. если хотите очень быструю сетку между компьютерами по локалке (часто приходится перекидывать большие объемы данных), можно подумать насчет гигабитного свича и подходящего кабеля, пишите в теме. можно взять свитч с одним гигабитный портом и соединить быстрой сеткой с сервером