En 1773 Sailer sufrió un ataque de apoplejía y se retiró de su puesto de párroco en Dieterskirch, refugiándose en el monasterio de Obermarchtal.