Después de servicio de varios años en El Cabo, FitzRoy volvió a Inglaterra, y en 1831 fue elegido como miembro de la Cámara de los Comunes, representando al distrito electoral de Saint Edmunds.