記一次數據庫遷移的踩坑過程
本文摘自開源中國，原文：https://my.oschina.net/u/1581846/blog/4283365 業務場景 最近的一個項目最開始由於資源問題，mysql 數據庫是部署在一台雲服務器上的，這兩天客戶提供了雲數據庫，所以原來在部署在 ECS 服務器上的數據庫，需要遷移到雲數據 ...
原文：記一次數據遷移后的數據校驗
背景：由於公司新項目的上線，需要把老項目用戶數據整體遷移到新項目中，遷移並對部分用戶會員等級進行升級 升級后涉及用戶邀請關系 ，故需要對每一個用戶的在數據庫中關鍵字段進行自動化校驗，對數據異常用戶自動記錄下userid，進行統計和進一步排查。 步驟一： 單獨封裝一個方法，獲取所有用戶的userid，返回一個滿足條件的useid列表 步驟二： 寫一個主邏輯，遍歷整個useid列表，分別比較新項目數據 ...
2020-07-25 14:43 0 878 推薦指數：
相關推薦
記一次Hbase數據遷移和遇到的問題
因為集群不互通，所以采用手動方式遷移 1、下載目標集群數據 2、遠程復制數據，可以壓縮一下 scp *** 3、上傳數據到HDFS，一定要切換到hbase用戶，不然會有錯誤 4、修復元數據等 遇到的問題 ...
記一次H2數據遷移到mysql的過程
目錄 1 思路 2 導出h2數據為.sql文件 3 小結 1 思路 H2數據遷移到mysql，網上查找了一圈，沒有現成的工具。 有幾種方法，不過都可能出現各種bug，需要調試： H2導出為csv文件然后導入mysql. H2導出為sql文件 ...
[數據庫]記一次數據庫死鎖
業務新上了一個功能，在發布的過程中，系統報出了數據庫死鎖異常： 死鎖發生在一個事務中，事務對多個表進行了操作。在報錯日志中，死鎖發生在tableA與tableB。一開始懷疑此次發布的某個改動中對上面這兩張表新增了select或update操作。將注意力用在排查這個問題上。排查后發現沒有相關 ...
記一次gitlab遷移后，ssh連接不上git
由於是報密鑰問題，我又檢查了git上的密鑰，發現沒有問題 最后的解決辦法是發現sshd配置文件/etc/ssh/sshd_config,UsePAM沒開 ...
記一次數據庫查詢超時優化問題
問題發現 在七月份時，經常發現有幾個定時任務報錯，查看了下異常原因，大概定位是數據庫執行異常 查找原因 1 和 DBA 排查 mycat（公司使用 mycat ） 和 mysql 的錯誤日志。發現是應用服務這邊會給 MyCat 發送一個 KILL QUERY 命令 ...
記一次數據、邏輯、視圖分離的原生JS項目實踐
一切的開始源於這篇文章：一句話理解Vue核心內容。 在文章中，作者給出了這樣一個思考： 假設現在有一個這樣的需求，有一張圖片，在被點擊時，可以記錄下被點擊的次數。 這看起來很簡單吧， 按照上面提到到開發方式，應該很快就可以搞定。 那么接下來，需求稍微發生 ...
Redis一次數據丟失
一台Redis服務器，4核，16G內存且沒有任何硬件上的問題。持續高壓運行了大約3個月，保存了大約14G的數據，設置了比較完備的Save參數。而就是這台主機，在一次重起之后，丟失了大量的數據，14G的數據最終只恢復了幾百兆而已。 正常情況下，像Redis這樣定期回寫磁盤的內存數據庫，丟失幾個數據 ...