加入高等法院时，聘用条款不设退休年龄，但他却决定在1979年4月退休，当时他还未满77岁，有舆论揣测他是因为不受个别传媒和派别的欢迎而被迫退休。退休前夕，他接受一个专访，当中问及他曾否因为受到批评而感到不快，他的回应是「我的很多同僚其实也只是患便秘的循道宗信徒」。史蒂文森退休当天，《卫报》记者科琳娜·亚当斯（Corinna Adams）作了相关报导，并对他作出以下评价：
晚年生涯.史蒂文森退休后倡议为所有谋杀罪行恢复死刑，另外还经常以嘉宾身份参与电视节目，当中包括由格拉纳达电视制作