En los siglos XVIII y XIX el feudo de Venosa fue confiado a varias familias nobles, como los Ludovisi y los Caracciolo.