Nació en Sint-Kornelis-Horebeke y se educó en el seminario de Gante . Debido a que resistió al obispo impuesto a la diócesis por Napoleón I , fue encarcelado en la fortaleza de Wesel con su hermano Joseph, que no sobrevivió.
Después de la caída del imperio de Napoleón, de la Croix reanudó sus estudios y fue ordenado en Gante por el obispo Dubourg de Luisiana, a quien más tarde siguió a los Estados Unidos junto con varios otros seminaristas y algunos obreros flamencos. En mayo de 1818, fue enviado al condado de Perry, Missouri , para supervisar la construcción de un seminario para la diócesis de Louisiana y comenzar sus deberes misioneros.
Después de la llegada del padre Rosati, presidente del nuevo seminario, de la Croix fue a Florissant, Missouri, el 3 de diciembre de 1818. Con la ayuda de la colonia recién llegada de la Sociedad del Sagrado Corazón , trabajó para preparar el camino para Pierre-Jean De Smet y los otros misioneros jesuitas, que llegaron a Florissant en 1823. Trabajó entre las familias católicas y la Nación Osage de las llanuras. Cuando el padre Van Quickenborne, SJ, llegó con sus ocho compañeros, de la Croix casi había terminado una iglesia de ladrillos, comenzó una granja y abrió un campo misionero para el trabajo de los jóvenes jesuitas .
Habiendo sido nombrado miembro de la parroquia de St. Michael en la Baja Luisiana , el padre de la Croix preparó un convento para la Sociedad del Sagrado Corazón, en el que abrieron un internado en 1828. Al año siguiente, regresó a Bélgica y utilizó los fondos que tenía. reunido allí para construir una iglesia en los Estados Unidos, que se completó en 1832. En 1833, regresó una vez más a Bélgica, donde se convirtió en canónigo de la catedral de Gante, cargo que ocupó hasta su muerte 36 años después.