Este pitido parece algún tipo de alarma, aunque las temperaturas no son alarmantes si son algo altas.
Mira en la BIOS si se hay alguna sección donde se pueda activar la alarma por temperatura por ejemplo.
A veces en la sección "Hardware monitor" o parecido se puede establecer un valor de temperatura máximo y te avisa con pitidos cuando se supera.
En todo caso para bajar temperatura lo más fácil es limpiar bien el ventilador + disipador y si no es suficiente ya se tendría que cambiar la pasta térmica.