flvデータを読み込むときに先読みしようとする部分を1秒に変更したのと、余計なsleepは抜きました。
またvideoデータのコンバートスキップは、映像をjavaImage化するのに時間がかかる場合ではなく、audioの進行状況より、videoデータが遅れているときに変更しました。
これで某アニメの動画を再生しているときにでてくる音ずれに対処できるようになった。