El 2 de noviembre de 1854 fue asesinado su padre, el Marqués de Rafal José Casimiro, teniendo en ese momento Enrique poco más de dos años.