原則、有給休暇時に通勤手当を支払う必要はありませんが、就業規則等に「通勤手当は、実際に出勤した日についてのみ支給する。」と規定しておくと、よりよいでしょう。