Еще раз - спасибо за советы и рекомендации, в итоге все получилось: и с громкостью кулера разобрался, и BIOS обновил, и глюк при перезагрузке убрал.

По поводу BIOS. У меня материнка поддерживает прошивку через Q-Flash Plus, так что BIOS можно обновить принудительно даже и без процессора. Вот тут в видео этот процесс показан, сделал все как ролике. Первый раз не сработало: после нажатия кнопки компьютер включился, но не мигала лампочка Q-Flash, что означало, что система не нашла файл прошивки. Тогда взял другую флешку, записал последнюю прошивку на нее, повторил - на этот раз все замигало, и где-то за 5-6 минут BIOS перепрошился. 

Теперь там вот такая красота.

Ну и с перепрошивкой исчез тот глюк с перезагрузкой, о котором я писал: теперь и перезагружается без проблем, и включается, так что глюк был именно с прошивкой.

А по поводу процессора и кулера - все настроил, как рекомендовали в данной статье, которую посоветовали в комментах: снизил напряжение для процессора, уменьшил температурный лимит, поставил PBO Enhancement "80 level 4".

Ну и все, красота, теперь обычная температура 50-57 градусов, кулер практически не слышно.

 

https://exler.ru/blog/kompyuter-chem-serdtse-uspokoilos.htm