Произлиза от патрицианската фамилия Фабии. Син е на Марк Фабий Вибулан (консул 483 и 480 пр.н.е.). Единствено Квинт Вибулан от рода му остава жив след битката при Кремера през 477 пр.н.е., защото все още е малолетен и остава в Рим. След това става основател на по-късните Фабии.