Hijo de George FitzRoy, segundo barón de Southampton , sucedió a su padre en 1810. Era nieto de Charles FitzRoy, primer barón de Southampton y Anne Warren, hija y coheredera de Adml. Sir Peter Warren y descendiente de la familia Schuyler , la familia Van Cortlandt y la familia Delancey, todos de la Norteamérica británica .
El 23 de febrero de 1826 se casó con Harriet Stanhope, nieta de William Stanhope, segundo conde de Harrington ; no tenían hijos. Murió en 1860.
Southampton ocupó su escaño en la Cámara de los Lores el 10 de junio de 1828. [1] Originalmente era whig en la política pero, después de haber votado en contra de la Ley de Reforma de 1832 , se convirtió en conservador. [2] Fue Lord Teniente de Northamptonshire , desde 1867 hasta su muerte. Su asiento era Whittlebury Lodge, Towcester , Northamptonshire.
En 1842, después de ser (noveno) Maestro de Quorn Hunt de 1827 a 1831, asumió el Maestrazgo de Grafton Hunt de manos de George FitzRoy, cuarto duque de Grafton , primo de su padre, y siguió siendo su Maestro hasta 1862.
Al retirarse de la Maestría de Quorn Hunt , vendió ese paquete a Sir Harry Goodricke, 7th Bt. Para el Grafton compró sabuesos al magnate de la cervecería Harvey Combe, quien se los había comprado al renombrado deportista George Osbaldeston ; en 1847 se compraron más perros del empobrecido 4º conde de Shannon . Lord Southampton cazó la manada de Grafton enteramente a sus expensas, sin suscripción de ningún miembro de la Cacería.
Whittlebury fue fundamental para Grafton Hunt. Estaba en la finca FitzRoy del duque de Grafton, uno de cuyos asientos era Wakefield Lodge, cerca.