Nacido en el seno de una distinguida familia gallega, sus padres fueron Diego Felipe Gil de Taboada y Villamarín, señor de Dés, y María Josefa de Lemos y Rois.