そんなことはありません。その日に自分のやるべき仕事を全て終えていれば、定時で帰っても何の問題もありません。