Rousseaux nació en Halle el 19 de enero de 1826. [1] Se educó en Malinas y entró en el seminario mayor allí en 1846. Fue ordenado sacerdote el 8 de septiembre de 1849 y designado para enseñar en el seminario menor. Se convirtió en director de la escuela en 1868. Estuvo muy involucrado en la organización de los Congresos Católicos en Malinas en 1863, 1864 y 1867. [1]
Fue nombrado administrador apostólico de la diócesis de Tournai el 22 de noviembre de 1879 como obispo titular de Eumenia , y fue nombrado obispo de Tournai el 12 de noviembre de 1880. [1] Su principal preocupación como obispo era apaciguar el partidismo que dividía a los " liberales ". y el clero " ultramontano " de su diócesis. [1]
Jugó un papel decisivo en el nombramiento de Désiré-Joseph Mercier en 1882 para una nueva cátedra de Filosofía Tomista establecida en la Universidad Católica de Lovaina por breve papal del 25 de diciembre de 1880. [2]
Rousseaux celebró dos sínodos diocesanos, en 1882 y 1885. Aumentó el número de parroquias en las ciudades industriales de las minas de carbón. Su preocupación por los pobres y su denuncia de la condición de los trabajadores en una carta pastoral de 1886 le llevaron a ser apodado "el obispo de los trabajadores". [1]