È dunque grazie a questi nuovi lavori di munizione che il castello assunse probabilmente l'aspetto definitivo di una vera e propria fortezza, anche in virtù della volontà stessa dei Ghedesi di renderlo il più imponente e consistente possibile. Furono proprio gli abitanti del borgo, nel 1463, a chiedere un'esenzione fiscale dei dazi alla Serenissima, con la finalità di potenziare la capacità difensiva della struttura; l'anno successivo, infatti, il comune acquistò terra dalle Contrade "Piazza" e "Gazzolo" per ampliare la fossa e la strada del castello. Benché l'edificio militare nel corso del Quattrocento fosse stato migliorato e reso più ostico all'assedio, a poco ciò servì durante la rovinosa campagna militare della Guerra di Ferrara, combattuta tra la Serenissima e la Lega formata da Ludovico il Moro, da Lorenzo de' Medici, dai papalini di Papa Sisto IV e da Ferdinando d'Aragona, tutti intervenuti a difesa del marchese di Ferrara Ercole I d'Este. Il cronista Jacopo Melga riporta nelle sue cronache questo scontro che scosse certamente tutto il territorio del bresciano, specialmente per la veemenza e l'impeto dell'attacco condotto. Il duca di Calabria Alfonso d'Aragona, il giorno 21 agosto 1483: