Выберите дубликаты с PHP и MySql для процесса слияния

Question

Я написал код для выбора дубликатов и группировки с использованием имени и фамилии. Я собираю их в многомерном массиве и дедуплируют/объединяют их, используя jQuery/Ajax на полученной странице. Я хотел бы спросить, есть ли лучший способ создания массива, чем то, как я это делаю. Вот мой код. Спасибо.

$dataArr=fetchDups($conn, 13, 5); // get a few at a time 

print '<div style="clear:both;"></div><pre>'; 
print_r($dataArr); 
print '</pre><div style="clear:both;"></div>'; 


    function fetchDups($conn, $client_id, $limit='') 
    { 

    $sql=' SELECT * FROM `contacts` WHERE `clientid`=\'13\' GROUP BY fname, lname '; 
    //$sql=' SELECT DISTICT fname, lname, * FROM `clients` WWHERE `clientid`=\'13\' '; 
    $res=mysql_query($sql, $conn)or die(mysql_error()); 
    $contactsRow=array(); 
    while($row=mysql_fetch_array($res)){ 
     echo $row['fname'].'<br>'; 
     $contactsRow[]=$row; 
    } 

    mysql_freeresult($res); 

    $dataArr=array(); 
    $i=0; 
    $limitNum=0; 
    //---------------------------------- 

    foreach($contactsRow AS $rowNew){ 

    $sql=' SELECT * FROM `contacts` WHERE `clientid`=\'13\' AND `id`!=\''.$rowNew['id'].'\' 
    AND (`fname` = \''.$rowNew['fname'].'\' OR `lname` = \''.$rowNew['lname'].'\') 
    '; 
    //echo $sql; 
    $res=mysql_query($sql, $conn)or die(mysql_error()); 
    $rowCountDup=mysql_num_rows($res); 

    if($rowCountDup>0){ 

    $d=0; 
    $dataArr[$i]=array(); 
    $dataArr[$i][$d]=$rowNew; 
    while($rowNew=mysql_fetch_array($res)){ 
    $dataArr[$i][($d+1)]=$rowNew; 
    $d++;  
    } 

    $i++; 
    $limitNum++;  

    } 

    // limit the results. too many crashes the browser 
    if($limitNum==$limit){ 
    break; 
    } 

    } 

    mysql_freeresult($res); 

    return $dataArr; 

    } 

Answer 1

Для такого рода вещей, вероятно, вы должны попробовать использовать:

SELECT * FROM contacts refC JOIN contacts allC USING (fname, lname) WHERE refC.clientid='13'

Это делает автообъединение на контактах на основе имени и фамилии, поэтому allC псевдонимов в список всех контактов, доля refC - фамилия и имя (включая самого себя).

Таким образом, вы получаете всю информацию, которую ищете, только в одном запросе SQL. Настройка может быть достигнута в запросе путем добавления индекса в столбцах fname и lname таблицы contacts, поэтому для объединения не нужно разбирать всю таблицу, чтобы она соответствовала.

--edit: Вы можете получить, чтобы определить более точно, как вы присоединиться к вашей таблицы, как, например:

SELECT * 
FROM contacts refC 
JOIN contacts allC ON (allC.fname LIKE CONCAT(refC.fname, '%') AND allC.lname LIKE CONCAT(refC.lname, '%')) 
WHERE refC.clientid='13' 

Который строго эквивалентен (но ИМО легче читать, чем), чтобы:

SELECT * 
FROM contacts refC,contacts allC 
WHERE allC.fname LIKE CONCAT(refC.fname, '%') 
AND allC.lname LIKE CONCAT(refC.lname, '%') 
AND refC.clientid='13' 

Answer 2

Если вы просто хотите, чтобы избежать отображения дубликатов и фактически не удаляя их из БД используйте DISTINCT SQL ключевое слово.

Answer 3

Или вы могли бы попробовать что-то вроде второго запроса здесь, который использует производную таблицу:

mysql> select * from contacts ; 
+----+--------+---------+ 
| id | fname | lname | 
+----+--------+---------+ 
| 1 | Annie | Haddock | 
| 2 | Annie | Haddock | 
| 3 | Ginger | Mole | 
| 4 | Ted | Ted  | 
| 5 | Ted | Ted  | 
+----+--------+---------+ 
5 rows in set (0.01 sec) 

mysql> select id, fname, lname, total from 
      (select *, count(*) as total 
       from contacts group by fname, lname) people 
     where total > 1; 
+-----------+--------------+--------------+--------------+ 
| people.id | people.fname | people.lname | people.total | 
+-----------+--------------+--------------+--------------+ 
| 1   | Annie  | Haddock  | 2   | 
| 4   | Ted   | Ted   | 2   | 
+-----------+--------------+--------------+--------------+ 
2 rows in set (0.01 sec) 

то просто итерации через него с помощью foreach. Обратите внимание, что «люди» выше - это псевдоним для производной таблицы, созданной внутренним выбором.