Por poder, poder, puedes. Pero habría que ver si la instalación aguanta.

Una solución sería poner altavoces activos, con lo que sólo tendrías que pasar la señal de baja intensidad y el ampli integrado en el altavoz amplificaría.