Генри Фицрой
Элизабет была единственной дочерью Гилберта Тэлбойса, 1-го барона Тэлбойс из Кайма, и его жены Элизабет «Бесси» Блаунт. Помимо Элизабет в семье было по меньшей мере двое сыновей — и ; кроме того, от связи с английским королём Генрихом VIII у матери Элизабет был сын Генри Фицрой, герцог Ричмонд и Сомерсет, а от последующего брака с Эдвардом Клинтоном — три дочери. Точная дата рождения девочки неизвестна, однако случилось это примерно в 1520 году: на 1522 год приходится первое упоминание Бесси в качестве жены Тэлбойса, при этом Элизабет была примерно на год младше Генри Фицроя и примерно на два года старше своего брата Джорджа. Предположительный год рождения Элизабет дал некоторым исследователям основание полагать, что двое старших детей Бесси, Генри Фицрой и Элизабет, были полнородными братом и сестрой, и настоящим отцом Элизабет был король Генрих VIII. Кроме того, в , средневековой переписи владений, смертей и наследования, отмечено, что в июне 1542 года Элизабет было 22 года. Однако Элисон Уэйр считает, что брак родителей Элизабет был заключён не позднее конца 1519 года, и сама девочка была дочерью Гилберта Тэлбойса.