Sein einziger Sohn, Howe Browne, 2. Marquess of Sligo, erbte das Anwesen 1809 im Alter von 21 Jahren. Er war extravagant und freigiebig und so erwarb er sich in jungen Jahren den Ruf eines „Regentenstutzers“. Er war ein Freund von Lord Byron, de Quincy und des Prinzregenten und reiste durch ganz Europa. Er führte Ausgrabungen in Mykene und fand die 3000 Jahre alten Säulen des Schatzes von Atreus. Um sie nach Westport zu bringen, heuerte er einige Seeleute von einem britischen Kriegsschiff ab und wurde dafür später zu vier Monaten Haft im Newgate-Gefängnis verurteilt. Er heiratete Lady Hester de Burgh, die Tochter des Earl of Clanricarde, hatte mit ihr 14 Kinder und ließ sich in Westport nieder. Der 2. Lord Sligo ließ an das Haus den Nord- und den Südflügel und die Bibliothek anbauen und beschaffte viele der Möbel, des Porzellangeschirrs, des Silbers und der Gemälde für das Haus. Er züchtete viele berühmte Rennpferde, sowohl in Westport als auch in Curragh. Eines dieser Pferde, „Waxy“, gewann das Derby. Ihm gehörten die letzten beiden irischen Wolfshunde. 1834 wurde er zum Gouverneur von Jamaika berufen und mit der schwierigen Aufgabe betraut, das „Apprenticeship System“ in einer Zeit vor der vollständigen Emanzipation der Sklaven zu überwachen. Er stieß auf großen Widerstand der Plantagenbesitzer und anderer wohlerworbener Interessen. Er war der erste, der den Sklaven auf den jamaikanischen Plantagen seiner Familie gleiche Rechte wie den Weißen gewährte. Das erste „frie“ Dorf auf der Welt, "Sligoville", wurde später nach ihm benannt. Er war liberal und war einer der wenigen irischen Angehörigen des Hochadels, die sich für die Gleichstellung der Katholiken einsetzten. Er starb 1845, als sich die Wolken der großen Hungersnot auf County Mayo senkten.