宰相世系表》作杨悦，唐朝弘农华阴人。唐玄宗的驸马。杨说的六世祖为唐朝观国公、特进杨恭仁。高祖父右屯为将军杨思训，曾祖父左卫将军杨嘉本。祖父是杨慎交，祖母是唐中宗的女儿长宁公主。父亲是杨洄，母亲是唐玄宗和武惠妃的女儿咸宜公主。唐玄宗之女建平公主的丈夫豆卢建去世后，改嫁杨说，杨说拜驸马都尉。