いいえ。確定申告する必要があります。副業先は労働者に支払った給与を申告するため、たとえ支払いが手渡しでも税務署には副業をしたことがわかります。本業の合間の副業とはいえ、所得を申告しないことは脱税にあたります。