La iniciativa marcada en el siglo XV por el señor de Cuéllar permitiendo edificar sobre la muralla, dio pie a que se comenzase a construir de forma masiva edificaciones adosadas a ella, y así en 1587 se autorizó a Juan de Ortelano a construir una casa junto a la muralla de San Pedro; otra autorización llegó a mediados del siglo XVII, para hacer lo mismo junto al arco de San Martín.