当大萧条时代来临之际,莫顿的日子变得越发地难过,他逐渐走下坡路。和古典爵士乐其他的人物一样,他的音乐被认为是过时的东西。莫顿的命运似乎比许多早期爵士乐的大师更为不幸,在纽约,由于名声不佳,他没有几个真正的朋友。在艰难的时期无人肯为他伸出一支救援之手。而且,个性好强的莫顿不愿为别人作赔衬,为别人作伴奏对于他简直是一种耻辱。在他看来,荣耀比工作更为重要,于是他长期处于一种失业的状态中。在到1937年这段时间里,他唯一的一次录音竟是和一位三流的音乐家的合作。此时的他已经山穷水尽。最后结束自己的音乐生涯的演出地点是首都华盛顿特区一间低级的酒吧,他在那里担任钢琴手。在摇摆乐时代落得个穷困潦倒的莫顿,却作了最为著名的摇滚名曲。