Remove BytesRefSorter.