Casado con Concepción de Arpe, también pintora, es padre del escritor y ATS Rafael Seco de Arpe, del compositor Manuel Seco de Arpe, y del pintor y restaurador Fernando Seco de Arpe.