El ocaso de la Edad Media y el siglo XVI supusieron también un afán constructivo que repercutió en la explotación de las canteras de La Colilla, ya que se erigieron multitud de templos y palacios nuevos durante esa época.