На протяжении всей своей жизни Эрнест Иванович много путешествовал по европейской части Российской империи, многие его поездки были связаны с профессиональной деятельностью. В 1873 году он посетил Всемирную выставку в Вене. Интересовался древнерусской архитектурой, русским и византийским стилями, что повлияло на его творчество и особенно выразилось в спроектированных им храмах в Самаре и Житомире.