Während der Rosenkriege wurde der 9. Baron 1464 wegen Hochverrates hingerichtet und ihm der Titel aberkannt. Sein Sohn Edmund de Ros erreichte bei Kriegsende 1485 seine Wiedereinsetzung als 10. Baron. Als ebendieser 1508 kinderlos starb, erlosch die Familie de Ros im Mannesstamm, woraufhin der Titel nach kurzzeitiger Abeyance 1512 in weiblichen Erblinie an dessen Neffen George Manners als 11. Baron überging. Dessen Sohn, der 12. Baron, wurde 1525 auch zum Earl of Rutland erhoben. Beim Tod von dessen Enkel, dem 3. Earl, fiel das Earldom 1587 an dessen Bruder, die Baronie aber an dessen einzige Tochter Elisabeth Cecil als 15. Baroness. Beim Tod ihres Sohnes, des 16. Barons, fiel der Titel 1618 an dessen Onkel zweiten Grades, Francis Manners, 6. Earl of Rutland und bei dessen Tod 1632 an dessen Tochter Katherine als 18. Baroness, die mit dem 1. Duke of Buckingham verheiratet war. Beim Tod ihres Sohnes, George Villiers, 2. Duke of Buckingham, im Jahr 1687 fiel die Baronie in Abeyance. Diese wurde erst 1806 zugunsten von Lady Charlotte FitzGerald als 20. Baroness beendet. Von da an war der Titel, von kurzfristigen Abeyances abgesehen, besetzt. Der heutige Titelinhaber ist Peter Maxwell als 27. Baron.