Более менее стабильное обнаружение и удаление дублей

Нужны тесты