Baldwin IV era hijo del conde Baldwin III de Hainaut y Yolande de Wassenberg. [1] También conocido como Balduino el Constructor, compró la propiedad de Ath en 1158 y construyó la torre Burbant. Cedió la localidad de Braine-la-Willotte, también conocida como Braine-le-Comte , al cabildo de Sainte-Waudru en 1158. En 1159 incorporó el señorío de Chimay y en 1160 las châtellenies de Valencians y de Ostrevent.