En 1604, Jacobo I regaló el castillo, por entonces en ruinas, a Sir Fulke Greville, el título de Conde de Warwick, sim embargo fue concedido a Lord Rich en 1618 y permaneció en su familia hasta 1759.