mysql中如何不重復插入滿足某些條件的重復的記錄的問題


最近在項目中遇到了這樣的一個問題“:

 在mysql數據庫中需要每次插入的時候不能插入三個字段都相同的記錄。在這里使用到了 insert into if not exists  和insert ignore into 這兩種方式,既然使用到了就在這里總結一下吧,畢竟mysql中的函數或者關鍵字太多了,使用到了就將相關的都總結一下。分享出來各位爺參考參考。

先說我自己項目中使用到的,然后將所有可用的方法總結一下.

 在項目中主要是用到了 在多個線程中需要循環的將數據插入,而且根據指定的幾個字段是可以唯一確定這條記錄的,這個時候如果不適用去重的邏輯就會產生很多很多的雜數據,但是如果是在代碼層級的判重,則需要每次插入的時候去查詢一下,這樣效率不好。因此就到網上找相關的,當然這個還是一個比較有經驗的人告訴的一個思路。下面就來看看mysql天生支持的幾種去重的操作,

1.insert ignore into 
當插入數據時,如出現錯誤時,如重復數據,將不返回錯誤,只以警告形式返回。所以使用ignore請確保語句本身沒有問題,否則也會被忽略掉。例如: 
INSERT IGNORE INTO books (name) VALUES ('MySQL Manual') 
這種方法很簡便,但是有一種可能,就是加入不是因為重復數據報錯,而是因為其他原因報錯的,也同樣被忽略了~

2.on duplicate key update 
當primary或者unique重復時,則執行update語句,如update后為無用語句,如id=id,則同1功能相同,但錯誤不會被忽略掉。例如,為了實現name重復的數據插入不報錯,可使用一下語句: 
INSERT INTO books (name) VALUES ('MySQL Manual') ON duplicate KEY UPDATE id = id 
這種方法有個前提條件,就是,需要插入的約束,需要是主鍵或者唯一約束(在你的業務中那個要作為唯一的判斷就將那個字段設置為唯一約束也就是unique key)。

3.insert … select … where not exist 
根據select的條件判斷是否插入,可以不光通過primary 和unique來判斷,也可通過其它條件。例如: 
INSERT INTO books (name) SELECT 'MySQL Manual' FROM dual WHERE NOT EXISTS (SELECT id FROM books WHERE id = 1) 
這種方法其實就是使用了mysql的一個臨時表的方式,但是里面使用到了子查詢,效率也會有一點點影響,如果能使用上面的就不使用這個。

4.replace into 
如果存在primary or unique相同的記錄,則先刪除掉。再插入新記錄。 
REPLACE INTO books SELECT 1, 'MySQL Manual' FROM books 
這種方法就是不管原來有沒有相同的記錄,都會先刪除掉然后再插入。

上面這幾種方式遇到的時候都學習學習,mysql還有很多的類似這樣的關鍵字,或者函數,慢慢的遇到一個學一個總有學完的時候。哈哈哈。


免責聲明!

本站轉載的文章為個人學習借鑒使用,本站對版權不負任何法律責任。如果侵犯了您的隱私權益,請聯系本站郵箱yoyou2525@163.com刪除。



 
粵ICP備18138465號   © 2018-2025 CODEPRJ.COM