Родоначальником рода является ярославский князь Василий Васильевич Великий Шастун († 1495), служивший боярином у великого князя Ивана III Васильевича. Сын его Пётр Васильевич Великий окольничий (1509), дворецкий († 1513). Внук родоначальника, князь, воевода (1546-1555) Василий Андреевич Большой имел прозвание Гага, откуда и пошли Велико-Гагины. У князя Гаги было двое сыновей: Иван Большой (чернец в Сергиево-Троицком монастыре, бездетен) и Иван Меньшой, пожалованный царём Фёдором Ивановичем в окольничие († 22.04.1598), оставив двух сыновей: Петра и Степана, а также дочь Татьяну († 1601). Род пошёл только от Степана, который имел сына князя Даниила Степановича, имевшего также двух сыновей: Юрия (бездетен) и Ивана Даниловичей. Князь Великогагин Иван Данилович числился комнатным стольником у малолетнего царевича Петра I, участник Азовского похода (1696), убит шведами под Нарвой. От первого брака с Прасковьей Петровной Вердеревской († 1691), оставил единственного сына Николая, который утонул († 1722) во время купания. С его гибелью пресёкся род князей Великогагиных.