Бартоломью Бергерш принадлежал к рыцарскому роду из Кента. Он был вторым сыном Роберта Бергерша, 1-го барона Бергерш, и Мод Бэдлсмир и родился примерно в 1287/96 году. После смерти старшего брата, Стефана, Бартоломью унаследовал семейные владения в Кенте и Сассексе, а потом расширил их благодаря удачному браку: примерно в 1320 году его женой стала одна из четырёх наследниц Тибо де Вердена, 2-го барона Вердена. Бергершу пришлось вести борьбу за приданое жены, закончившуюся успехом к 1328 году. В свите своего дяди, Бартоломью Бэдлсмира, 1-го барона Бэдлсмира, Бергерш принял участие в шотландском походе 1317 года, а потом — в мятеже против короля Эдуарда II. Он находился в принадлежавшем дяде замке Лидс в Кенте, когда эту крепость взяла королевская армия (1321 год), и был отправлен в Тауэр. Это спасло Бергерша от более тяжёлой участи: Бэдлсмир после подавления мятежа был подвергнут жестокой казни.