Албрехт IV участва в Кръстоносния поход на бароните (1239 – 1241) на крал Теобалд I от Навара в Светите земи и умира от чума на 25 ноември 1239 г. по време на окрепяването на замък Аскалон в Йерусалимското кралство (днес в Ашкелон, Израел).