Años más tarde, Peña defendió a su antiguo amigo Juan Bautista Alberdi de los ataques de los liberales (ante el deseo de imponerle su nombre a una calle) por parte de los mitristas.