能立即征服南意大利，8月他将军队从那不勒斯撤走，回到伦巴第。对德意志的军队来说这次撤军差不多等同于逃亡，原本投降神圣罗马帝国的城市们重新归顺西西里，连被亨利留在萨莱诺宫殿作为自己很快会回来的信号的康斯坦丝皇后也遭到萨莱诺人的背叛落入坦克雷德的手中。但是在米兰，皇帝和法兰西国王腓力二世会面并重建了斯陶芬—卡佩联盟。然后他于1191年底带着满心的失望回到了德意志。坦克雷德趁机以释放康斯坦丝向亨利提出停火，塞莱斯廷也建议亨利和坦克雷德和解，但亨利不顾妻子仍被坦克雷德扣押，拒绝和解。坦克雷德也无意让亨利赎回康斯