十年網(wǎng)站開發(fā)經(jīng)驗 + 多家企業(yè)客戶 + 靠譜的建站團隊
量身定制 + 運營維護+專業(yè)推廣+無憂售后,網(wǎng)站問題一站解決
這篇文章主要介紹了MySQL如何去重,具有一定借鑒價值,感興趣的朋友可以參考下,希望大家閱讀完這篇文章之后大有收獲,下面讓小編帶著大家一起了解一下。
茂名網(wǎng)站制作公司哪家好,找創(chuàng)新互聯(lián)建站!從網(wǎng)頁設(shè)計、網(wǎng)站建設(shè)、微信開發(fā)、APP開發(fā)、成都響應(yīng)式網(wǎng)站建設(shè)等網(wǎng)站項目制作,到程序開發(fā),運營維護。創(chuàng)新互聯(lián)建站于2013年創(chuàng)立到現(xiàn)在10年的時間,我們擁有了豐富的建站經(jīng)驗和運維經(jīng)驗,來保證我們的工作的順利進行。專注于網(wǎng)站建設(shè)就選創(chuàng)新互聯(lián)建站。
需求分析
數(shù)據(jù)庫中存在重復(fù)記錄,刪除保留其中一條(是否重復(fù)判斷基準(zhǔn)為多個字段)
解決方案
碰到這個需求的時候,心里大概是有思路的。最快想到的是可以通過一條sql語句來解決,無奈自己對于復(fù)雜sql語句的道行太淺,所以想找大佬幫忙。
找人幫忙
因為這個需求有點著急,所以最開始想到的是,可以找這方面的同行來解決,然后分享這個問題給同事,結(jié)果這貨隨便百度了一下,就甩給我一個從未用過的sql語句,讓我自己嘗試,心里萬匹那啥啥啥奔騰而過...
自己百度
找到了一條sql語句:
DELETE FROM vitae a WHERE (a.peopleId, a.seq) IN ( SELECT peopleId, seq FROM vitae GROUP BY peopleId, seq HAVING count(*) > 1 ) AND rowid NOT IN ( SELECT min(rowid) FROM vitae GROUP BY peopleId, seq HAVING count(*) > 1 )
這條語句是在 【MySQL中刪除重復(fù)數(shù)據(jù)只保留一條】 這篇文章里找到的。這條sql思路很明顯,有以下3步:
SELECT peopleId, seq FROM vitae GROUP BY peopleId, seq HAVING count(*) > 1
查詢出表中重復(fù)記錄作為條件
SELECT min(rowid) FROM vitae GROUP BY peopleId, seq HAVING count(*) > 1
查詢出表中重復(fù)記錄中ID最小的值為第二個條件
最后根據(jù)以上兩個條件,刪除 除重復(fù)記錄中最小ID的其余重復(fù)記錄
但是很無奈的是,運行這條語句出現(xiàn)了錯誤,大致報錯意思是,不能在查詢的時候同時更新這個表。
代碼解決
根據(jù)上面這個sql語句想到或許可以通過代碼的方式,兩步來達到同樣的目的:
先取出重復(fù)的數(shù)據(jù)集
根據(jù)查詢到的數(shù)據(jù)集,循環(huán)刪除其余的重復(fù)數(shù)據(jù)
想法是有了,寫出來也很快,但是一運行嚇我一跳,竟然需要 116s左右,然后自己就想一定要找到可以使用的sql語句,貼一下代碼和運行結(jié)果:
完美的【去重留一】SQL
最后在一個技術(shù)群里得到了完美的答案,看這條sql語句:
DELETE consum_record FROM consum_record, ( SELECT min(id) id, user_id, monetary, consume_time FROM consum_record GROUP BY user_id, monetary, consume_time HAVING count(*) > 1 ) t2 WHERE consum_record.user_id = t2.user_id and consum_record.monetary = t2.monetary and consum_record.consume_time = t2.consume_time AND consum_record.id > t2.id;
上面這條sql語句,仔細(xì)看一下,揣摩出思路也不難,大概也分為3步來理解:
(SELECT min(id) id, user_id, monetary, consume_time FROM consum_record GROUP BY user_id, monetary, consume_time HAVING count(*) > 1 ) t2
查詢出重復(fù)記錄形成一個集合(臨時表t2),集合里是每種重復(fù)記錄的最小ID
consum_record.user_id = t2.user_id and consum_record.monetary = t2.monetary and consum_record.consume_time = t2.consume_time
關(guān)聯(lián)判斷重復(fù)基準(zhǔn)的字段
根據(jù)條件,刪除原表中id大于t2中id的記錄
看到這個語句的時候,心里想這也太厲害了。這么一個簡單的sql語句,竟然可以解決這么復(fù)雜的問題,漲姿勢了~
運行起來也超級快,原先的代碼循環(huán)執(zhí)行,需要 116s左右,而這里 0.3s就可以了,厲害了~
感謝你能夠認(rèn)真閱讀完這篇文章,希望小編分享的“MySQL如何去重”這篇文章對大家有幫助,同時也希望大家多多支持創(chuàng)新互聯(lián),關(guān)注創(chuàng)新互聯(lián)行業(yè)資訊頻道,更多相關(guān)知識等著你來學(xué)習(xí)!