А что конкретно будет крутиться на сервере? Ниже для примера htop с моего дебиановского рабочего сервака, который держит два сайта (с MySQL), почтовый сервер с антиспамом, NetAMS4 и является шлюзом в инет.
Машинка Intel Core i3-220 3.30 GHz. Памяти 4 гига: