В последующие годы Квинт находился в Африке, где постепенно собрались все вожди помпеянцев. Он примкнул к той же «партии», причём не играл в ней видной роли и не принимал активного участия в военных действиях: по словам Цицерона, он всего лишь «был застигнут войной». В апреле 46 года до н. э. Цезарь разгромил помпеянцев при Тапсе. Лигарий, командовавший вместе с Гаем Консидием Петом гарнизоном Гадрумета, тут же сдал этот город победителю без боя. Цезарь сохранил ему жизнь, но не разрешил вернуться в Рим: он не хотел сразу давать полное прощение тем своим врагам, которые продолжали борьбу после битвы при Фарсале. Квинту пришлось оставаться в изгнании. Тем временем в Риме за него активно хлопотали братья и Марк Туллий Цицерон. Последний написал Квинту в сентябре 46 года до н. э.: «Знай, весь труд, все усилия, заботы и рвение я трачу ради твоего восстановления в правах… Когда твои братья и близкие лежали у его ног, а я излагал всё то, чего требовало твое дело, …то не только из слов Цезаря, вполне благожелательных, но и по выражению его лица …я сделал вывод, что в твоём восстановлении в правах не может быть сомнений».