Si no te ha hecho OC, entonces es que seguramente de haya desactivado el Q-FAN, o lo que es lo mismo, el control automático de la velocidad del ventilador del cooler.
Entra en la BIOS, y vete a Power -> Hardware Monitor (Esto suele ser en la mayoría de las BIOS actuales. Si no te aparece, mira a ver si lo encuentras en otr apestaña...), y si en la opción CPU Q-Fan control está desactivada (Disabled), prueba a activarla...
Mira a ver si con esto se resuelve, y si no, postea tu modelo de placa base, a ver si se nos ocurre algo más...
Un saludo,
The Great Chibero