Nacido en Bolonia, su padre fue un mercader de sedas que intentó instruir a su hijo en el negocio familiar; pero a la edad de doce años, el joven Albani se convirtió en aprendiz del manierista flamenco Denys Calvaert.