命他为远征突尼斯的主将，1538年又任命其为米兰公国的总督，阿方索·阿瓦洛斯在任期内广为赞助当地的文学与音乐的发展，义大利战争(1542-1546)期间阿方索在切雷索莱之战被法军击败，但帝国军在随后的塞拉瓦莱之战取得决定性胜利。战争结束之后阿方索成为金羊毛骑士团骑士。阿方索·德·阿瓦洛斯1532年与玛丽亚·德·阿拉戈纳结婚并有5个孩子，其中他的儿子弗朗西斯·费迪南德·阿瓦洛斯日后也成为米兰公国的总督和哈布斯堡王室的将领。