Fue hijo de Rafael Tovar y Villa Gordoa y de Isabel de Teresa y Wiechers.