Wenn du die Boxen ausschaltest (Stecker ziehn), ist dieses Brummen immer noch da?
Wenn ja,
dann könnte es das Netzteil sein. Besonders das "klicken" spricht für das Netzteil, das machen viele Netzteile unter anderem auch meines . Dieses "klicken" ist aber normalerweise relativ leise und der laufende PC übertönt es, man hört es gewöhnlich nur wenn der PC aus ist und das Netzteil noch läuft.
Ich hab auch davon gehört, dass die Kondensatoren auf dem Motherboard brummen können.

Wenn nein,
vielleicht hast du die Lautstärke im Windows voll aufgedreht, versuche dort mal die Lautstärke zu senken und bei den Boxen zu heben.

War das Problem eigentlich immer schon da oder trat es erst kürzlich auf?