Phụ Khuông quê ở quận Tương Dương hoặc quận Nam, Kinh Châu. Năm 211, theo Lưu Bị vào Thục, tham gia bình định Tây Xuyên.