Aufgrund einer Epidemie und der französischen Invasion in Spanien 1823, kamen viele Spanier nach Bayonne; für diese empfand Henri Pyt grosses Mitleid, sodass er beschloss ihnen Trost zu spenden; hierzu erlernte er, gemeinsam mit seiner Ehefrau, die spanische Sprache und veranlasste unter anderem die Übersetzung des Neuen Testaments ins Spanische; diese wurde 1824 allerdings durch den Papst auf den Index gesetzt. In dieser Zeit bekehrte er auch den katholischen Priester Juan Calderón, der nach Bayonne geflohen war.