Это мнение учителя классного руководителя, что он чистый математик? Вот в  5 классе что вы можете услышать от учителя математики? Вы ещё  не знаете, может он будет другого мнения. Если нет, то тогда и решите, будет видно по другим предметам , по успеваемости у других, и по той же математике, если математика  лучше всех будет, то  в  6 классе да даже в середине  5 смоете перевестись ( у нас так  мальчик  в середине года ушёл со школы (точнее родители увели, перешёл в ту где математика сильнее!