23 maja 1915 roku, pomiędzy dwoma a czterema godzinami po tym, jak deklaracja o wypowiedzeniu Austro-Węgrom wojny przez Włochy dotarła do głównej bazy morskiej w Puli, „Radetzky” razem z resztą floty wyruszył w celu ostrzelania włoskiego wybrzeża. Głównym celem była ważna baza morska w Ankonie, a następnie wybrzeże Czarnogóry. Bombardowanie Czarnogóry było częścią większej austro-węgierskiej kampanii przeciwko Królestwom Czarnogóry i Serbii, które w pierwszej połowie roku 1915 były członkami Ententy. O godzinie 1:15 „Radetzky” razem z krążownikami SMS „Admiral Spaun” i „Helgoland” oraz niszczycielami SMS „Orjen”, „Lika”, „Csepel”, „Tátra” odłączyły się od głównych sił, i wyruszyły na południe w celu osłony okrętów atakujących miasto. Jako że nie znaleziono w okolicy żadnych wrogich jednostek, okręty ostrzelały Wyspy Tremiti, Vieste, Manfredonię i Barlettę. Po wypłynięciu z Zatoki Manfredonia, zauważono dwa włoskie niszczyciele. W czasie walki jednemu z niszczycieli udało się uciec, ale drugi, „Turbine”, został ciężko uszkodzony. Dopiero po przybyciu większych włoskich sił, austriackie okręty przerwały próby przejęcia uszkodzonego niszczyciela. Poza starciem z „Turbine”, „Radetzky’emu” udało się zniszczyć most kolejowy w pobliżu Fermo, w stronę którego wystrzelił pięć pocisków kal. 305 mm, pięć kal. 240 mm i 17 kal. 100 mm. Zniszczenie mostu znacznie utrudniło ruchy wojsk i zaopatrzenia w tamtym rejonie. O godzinie 8:00 „Radetzky” dołączył do sił głównych i o 10:22 był już z nimi z powrotem w Puli. Zginęło 63 Włochów, żołnierzy i cywilów. Zanim włoskie okręty z Taranto i Brindisi przybyły do Ankony, austro-węgierska flota była już w bazie.