维多利亚在位早期下议院对墨尔本的支持越来越弱，在1841年的大选中辉格党落败，皮尔继任首相，与白金汉宫女王闺密们关系密切的辉格党人的地位被取代。 1845年，爱尔兰遭遇马铃薯晚疫病， 其后四年逾百万的爱尔兰人死去，另有成百万举家逃亡，人们称之为大饥荒。因此维多利亚女王在爱尔兰被讥称为“饥荒女王”。其实女王个人捐献2000英镑的赈灾款，这个数字比其他任何个人捐赠都多。同时她不顾新教的反对，支持梅努斯·格兰特在爱尔兰建立罗马天主教神学院。有故事说她仅捐了5英镑赈灾，又在同一天给巴特西·道格斯·霍莫给了同