斯林，因此教会在他们开始入侵西西里岛后，便于1062年授予「阿普利亚、卡拉布里亚与西西里公爵」的头衔给罗伯特·吉斯卡尔，罗伯特与鲁杰罗因此获得征服西西里的大义名分。最初鲁杰罗与罗伯特·吉斯卡尔在1061年5月渡海进攻西西里时，很快地便夺下了东北角的墨西拿、特罗伊纳等要城。此时鲁杰罗的恋人茱迪斯来到义大利了，急于获得合法封地以作为聘礼的鲁杰罗因此与哥哥发生严重争执，甚至兵戎相见，因为没有封地意谓着无法结婚。1062年罗贝尔意外被效忠于鲁杰罗的西西里居民抓获并带到弟弟面前，鲁杰罗抱着哥哥大哭，两人因此和解定