Im November 1922 reiste Letzel nochmals nach Japan und musste erleben, wie bei dem verheerenden Erdbeben vom 1. September 1923 zahlreiche seiner Gebäude zerstört wurden. Tief enttäuscht kehrte er Ende November des Jahres nach Prag zurück, wo er zwei Jahre später im Alter von nur 45 Jahren verstarb.