OK, rozumiem. Możemy chyba tak zostawić. Może to jakieś wymaganie ViewPagera. Używałem ViewPagera z natywnymi fragmentami za pomocą adaptera z support lib v13 i tam nie widziałem takich problemów.