Trobec tilbrakte sin pensjonisttilværelse hos sine søstre i prestegården til i St. Stephen i Minnesota, hvor en av hans nevøer var sogneprest. Biskop James Trobec døde der den 14. desember 1921, 83 år gammel.