Оттуда же, откуда Юсупов, Бадмаев и тд и тп. Фамилия может указывать на далёкого предка или на принадлежность  бывшего крепостного, дворового человека к хозяину.   Например Юсупов сын Юсуфа, а может быть дворовым человеком Юсупова.  Например Юсупов конюх.