Trois châteaux ont été élevés au même emplacement. Le premier bâti au . En 1066, un seigneur de Chiffrevast pris part à la conquête de l'Angleterre.