Юзаф Патоцкі пацярпеў паразу ў бітве пад Канецполем ў 1708 годзе. З 1709 года, пасля Палтаўскай бітвы, жыў у выгнанні ў Венгрыі і Турцыі. У 1714 годзе ён вярнуўся ў Рэч Паспалітую і разам з Тэадорам Патоцкім стаў лідарам апазіцыі да партыі магнатаў Чартарыйскіх, якая насіла назву «Фамілія».