Enrique Felipe de Guzmán, 2º Conde-Duque de Olivares fue hijo ilegítimo de Gaspar de Guzmán, Conde-Duque de Olivares , quien fue legitimado en 1642 y que heredó el título de Conde-Duque de Olivares.
Su madre era la amante de su padre, Isabel de Anversa , y al principio se llamó Julián. En 1626 mueren Gaspar de Guzmán, la hija del conde-duque de Olivares, la marquesa de Heliche, y su sobrino favorito. En la corte se creía ampliamente que el heredero de Olivares sería el sobrino que le quedaba, Luis de Haro , pero en 1642, Olivares decidió legitimar a su hijo, que en consecuencia fue rebautizado como Enrique Felipe de Guzmán. Esta decisión enfureció a la reina de España, Isabel de Francia , que creía que el precedente de Olivares conducía a la decisión de Felipe IV de España de legitimar a su hijo bastardo, Juan de Austria el Joven .
Se casó con Juana Fernández de Velasco y juntos tuvieron un hijo, Gaspar Felipe de Guzmán .