Aparte del sistema que te indica Vaxx, yo me inclino por el compresor del figorifico que, cuando tiene varios años meten más ruido que una central trérmica. Prueba a desenchufar solo la nevera (frigorífico).
Otra fuente de donde puede proceder ese ruido, es el teléfono comunitario, ese de abrir la puerta del portal desde el piso.
Pero, donde más desconfío, es del alimentador del router pues, si como dices el zumbido apareció desde que te pasaron a 10Mb, si no busca cualquier otro aparato con alimentador propio.
Un salu2 de nexus47