交响曲和1972年在曼彻斯特演出的《大地之歌》。在他生命的最后几年，霍伦斯坦还录制了的第三交响曲以及保罗·欣德米特和理查德·施特劳斯的音乐。他的歌剧录音包括尼尔森的《绍尔与大卫》（Saul og David）。1973年3月，他在英国科文特花园的皇家歌剧院演出了理查德·瓦格纳的《帕西法尔》，这是他最后一次歌剧演出。1971年在明尼阿波利斯演出尼尔森的第五交响曲时，霍伦斯坦心脏病突发，被乐团首席在半空中救下。虽然医生警告他要减少工作量，但他仍继续指挥。在他去世时，他正计划指挥马勒的第五、六、七交响曲。