выберите оператор, чтобы найти дубликаты на определенных полях

<p>можете ли вы помочь мне с инструкциями sql, чтобы найти дубликаты в нескольких полях?</p><p>например, в псевдокоде:</p><pre><code>select count(field1,field2,field3) from table where the combination of field1, field2, field3 occurs multiple times </code></pre><p>и из приведенного выше утверждения <em>, если есть несколько вхождений</em>, я бы хотел выбрать <em>каждую запись, кроме первой</em>.</p>

<p>чтобы получить список полей, для которых есть несколько записей, вы можете использовать ..</p><pre><code>select field1,field2,field3, count(*) from table\_name group by field1,field2,field3 having count(*) > 1 </code></pre><p>проверьте эту ссылку для получения дополнительной информации о том, как удалить строки.</p><p> <a href="http://support.microsoft.com/kb/139444">http://support.microsoft.com/kb/139444</a> </p><p>правка: как уже упоминали другие пользователи, должен быть критерий для определения того, как вы определяете «первые строки», прежде чем использовать подход по ссылке выше. исходя из этого, вам нужно будет использовать заказ по предложению и подзапрос при необходимости. если вы можете опубликовать пример данных, это действительно поможет.</p>

<p>вы упоминаете «первый», поэтому я предполагаю, что у вас есть какой-то порядок в ваших данных. предположим, что ваши данные упорядочены по какому-то полю <code>id</code>.</p><p>этот sql должен получить дубликаты записей, кроме первой. он в основном выбирает все строки, для которых существует другая строка с (а) одинаковыми полями и (б) более низким идентификатором. производительность не будет хорошей, но она может решить вашу проблему.</p><pre><code>select a.id, a.field1, a.field2, a.field3 from mytable a where exists (select b.id from mytable b where b.field1 = a.field1 and b.field2 = a.field2 and b.field3 = a.field3 and b.id < a.id) </code></pre>

<p>это забавное решение с sql server 2005, которое мне нравится. я собираюсь предположить, что под «для каждой записи, кроме первой», вы подразумеваете, что есть еще один столбец «id», который мы можем использовать, чтобы определить, какая строка является «первой».</p><pre><code>select id , field1 , field2 , field3 from ( select id , field1 , field2 , field3 , rank() over (partition by field1, field2, field3 order by id asc) as [rank] from table\_name ) a where [rank] > 1 </code></pre>

<p>чтобы увидеть повторяющиеся значения</p><pre><code>with mycte as ( select row\_number() over ( partition by name order by name) rown, * from tmptest ) select * from mycte where rown <=1 </code></pre>

<p>если вы используете sql server 2005 или более позднюю версию (а теги для вашего вопроса указывают на sql server 2008), вы можете использовать функции ранжирования, чтобы возвращать дубликаты записей после первой, если использование объединений является менее желательным или нецелесообразным по какой-либо причине. следующий пример показывает это в действии, где он также работает с нулевыми значениями в исследованных столбцах.</p><pre><code>create table table1 ( field1 int, field2 int, field3 int, field4 int ) insert table1 values (1,1,1,1) , (1,1,1,2) , (1,1,1,3) , (2,2,2,1) , (3,3,3,1) , (3,3,3,2) , (null, null, 2, 1) , (null, null, 2, 3) select * from (select field1 , field2 , field3 , field4 , row\_number() over (partition by field1 , field2 , field3 order by field4) as occurrence from table1) x where occurrence > 1 </code></pre><p>обратите внимание после запуска этого примера, что первая запись из каждой «группы» исключена и что записи с нулевыми значениями обрабатываются правильно.</p><p>если у вас нет доступного столбца для упорядочения записей в группе, вы можете использовать столбцы с разделением по столбцам в качестве столбцов с упорядочением по.</p>

<pre><code>create table #tmp ( sizeid varchar(max) ) insert #tmp values ('44'), ('44,45,46'), ('44,45,46'), ('44,45,46'), ('44,45,46'), ('44,45,46'), ('44,45,46') select * from #tmp declare @sqlstr varchar(max) select @sqlstr = stuff((select ',' + sizeid from #tmp order by sizeid for xml path('')), 1, 1, '') select top 1 * from ( select items, count(*)as occurrence from dbo.split(@sqlstr,',') group by items having count(*) > 1 )k order by k.occurrence desc </code></pre>

<p>попробуйте этот запрос, чтобы иметь счетчик sepratley для каждого оператора select:</p><pre><code>select field1,count(field1) as field1count,field2,count(field2) as field2counts,field3, count(field3) as field3counts from table\_name group by field1,field2,field3 having count(*) > 1 </code></pre>