Em 23 de maio de 1915, apenas algumas horas depois da Itália ter declarado guerra contra a Áustria-Hungria, o "Radetzky" e o resto da frota deixaram a base naval de Pola com o objetivo de bombardearem o litoral italiano. O couraçado foi separado da força principal à 1h15min da madrugada do dia seguinte na companhia do cruzadores "Admiral Spaun" e SMS "Helgoland" e mais quatro contratorpedeiros da Classe "Tátra"; eles seguiram para o sul com o objetivo de cobrir os navios que atacariam a cidade de Ancona. Como nenhuma embarcação inimiga foi encontrada, a força atacou as cidades de Vieste, Manfredonia e Barletta. Depois disso, eles encontraram dois contratorpedeiros italianos; um conseguiu escapar, porém o outro, "Turbine", foi seriamente danificado. Além disso, o "Radetzky" destruiu uma ponte ferroviária em Fermo. O couraçado e sua flotilha reencontraram com a força principal às 8h00min e chegaram de volta em Pola duas horas e meia depois. No total, 63 civis e militares italianos foram mortos na ação.