Jabarkan Kardinal dari Paus Benediktus XV

Adalah kebiasaan bahwa Uskup Agung Bologna akan dijadikan kardinal di salah satu konsistori yang akan datang. Di Bologna, tentu saja ini juga diharapkan dari della Chiesa, karena, pada tahun-tahun sebelumnya, kardinal disebut sebagai uskup agung, atau uskup agung sebagai kardinal segera sesudahnya. Pius X tidak mengikuti tradisi ini dan meninggalkan della Chiesa menunggu selama hampir tujuh tahun. Ketika sebuah delegasi dari Bologna mengunjunginya untuk meminta promosi della Chiesa ke College of Cardinals, dia bercanda menjawab dengan mengolok-olok nama keluarganya sendiri, Sarto (yang berarti "penjahit"), karena dia berkata, "Maaf, tapi seorang Sarto memiliki belum ditemukan untuk membuat jubah kardinal." Beberapa orang menduga bahwa Pius X atau orang-orang yang dekat dengannya tidak ingin memiliki dua Rampollas di College of Cardinals.

Kardinal Rampolla meninggal 16 Desember 1913. Pada 25 Mei 1914, della Chiesa diciptakan kardinal, menjadi Kardinal-Imam dari  titulus   Santi Quattro Coronati,  yang sebelumnya ditempati oleh Pietro Respighi. Ketika kardinal baru mencoba kembali ke Bologna setelah konsistori di Roma, sebuah pemberontakan sosialis, anti-monarkis dan anti-Katolik yang tidak terkait mulai terjadi di Italia Tengah. Hal ini disertai dengan pemogokan umum, penjarahan dan penghancuran gereja-gereja, koneksi telepon dan bangunan kereta api, dan proklamasi republik sekuler. Di Bologna sendiri, warga dan Gereja Katolik menentang perkembangan tersebut dengan sukses. Kaum Sosialis dengan luar biasa memenangkan pemilihan regional berikut dengan mayoritas besar.