Parece ser que se levantó el castillo, pero ya en el siglo XI, Las Hormazas pertenecía al alfoz de Villadiego.