母は嫡兄・通雄と同じ姉小路顕朝の娘か。