Date/TimePickerDialogの処理に入った時に見えるViewIDを勘違いしていたので、Listener側の処理をViewごとに分離。