Возможно, но неудобно.
Вот решили Вы пойти с ноутбуком на диван...
Правильно было бы подключить стационарный комп к роутеру проводом, а ноутбук по вафле.
Если настаиваете на своей схеме, то если Windows 7 и старше, её надо просто настроить. На более ранних ОС придется ставить программу-маршрутизатор.