40 градусов в простое для Атлон II - много. Они греются слабо.

А как поменять термопасту?

1) Для начала нужно "нагреть компьютер". Т.е поиграть, поработать чтобы процессор разогрелся, и термопаста стала немного мягче.
2) Затем снять кулер.
3) Очистить подошву кулера и крышку процессора спиртом от остатков старой термопасты.
4) Нанести тонкий слой термпоасты на крышку процессора
5) Надеть кулер.

Когда снимите кулер очистите радиатор от пыли (пылесосом и ватными палочками)

Поставьте копрусный кулер сзади на ввыдув, если таковой не имеется

Мага, 40 в простое для Атлона - норма. А критическая, если не ошибаюсь 76.

40 градусов это правда для атлона норма.
Все атлоны сильно греются.
Я вот всё грешу на БП. В нём может быть проблема?

Значит те Атлон II - которые мне попадались были исключениями.

Незнаю

Можно точную модель?

Так же не стоит исключать перегрев видеокарты и мамки

Нет мама греется на 30 градусов, а видюха на 26

В простое? Скачйе HWmonitor - и запустите, начните играть. Данная программа фиксирует максимальное значение температур всех элементов системника.