记一次数据库迁移的踩坑过程
本文摘自开源中国，原文：https://my.oschina.net/u/1581846/blog/4283365 业务场景 最近的一个项目最开始由于资源问题，mysql 数据库是部署在一台云服务器上的，这两天客户提供了云数据库，所以原来在部署在 ECS 服务器上的数据库，需要迁移到云数据 ...
原文：记一次数据迁移后的数据校验
背景：由于公司新项目的上线，需要把老项目用户数据整体迁移到新项目中，迁移并对部分用户会员等级进行升级 升级后涉及用户邀请关系 ，故需要对每一个用户的在数据库中关键字段进行自动化校验，对数据异常用户自动记录下userid，进行统计和进一步排查。 步骤一： 单独封装一个方法，获取所有用户的userid，返回一个满足条件的useid列表 步骤二： 写一个主逻辑，遍历整个useid列表，分别比较新项目数据 ...
2020-07-25 14:43 0 878 推荐指数：
相关推荐
记一次Hbase数据迁移和遇到的问题
因为集群不互通，所以采用手动方式迁移 1、下载目标集群数据 2、远程复制数据，可以压缩一下 scp *** 3、上传数据到HDFS，一定要切换到hbase用户，不然会有错误 4、修复元数据等 遇到的问题 ...
记一次H2数据迁移到mysql的过程
目录 1 思路 2 导出h2数据为.sql文件 3 小结 1 思路 H2数据迁移到mysql，网上查找了一圈，没有现成的工具。 有几种方法，不过都可能出现各种bug，需要调试： H2导出为csv文件然后导入mysql. H2导出为sql文件 ...
[数据库]记一次数据库死锁
业务新上了一个功能，在发布的过程中，系统报出了数据库死锁异常： 死锁发生在一个事务中，事务对多个表进行了操作。在报错日志中，死锁发生在tableA与tableB。一开始怀疑此次发布的某个改动中对上面这两张表新增了select或update操作。将注意力用在排查这个问题上。排查后发现没有相关 ...
记一次gitlab迁移后，ssh连接不上git
由于是报密钥问题，我又检查了git上的密钥，发现没有问题 最后的解决办法是发现sshd配置文件/etc/ssh/sshd_config,UsePAM没开 ...
记一次数据库查询超时优化问题
问题发现 在七月份时，经常发现有几个定时任务报错，查看了下异常原因，大概定位是数据库执行异常 查找原因 1 和 DBA 排查 mycat（公司使用 mycat ） 和 mysql 的错误日志。发现是应用服务这边会给 MyCat 发送一个 KILL QUERY 命令 ...
记一次数据、逻辑、视图分离的原生JS项目实践
一切的开始源于这篇文章：一句话理解Vue核心内容。 在文章中，作者给出了这样一个思考： 假设现在有一个这样的需求，有一张图片，在被点击时，可以记录下被点击的次数。 这看起来很简单吧， 按照上面提到到开发方式，应该很快就可以搞定。 那么接下来，需求稍微发生 ...
Redis一次数据丢失
一台Redis服务器，4核，16G内存且没有任何硬件上的问题。持续高压运行了大约3个月，保存了大约14G的数据，设置了比较完备的Save参数。而就是这台主机，在一次重起之后，丢失了大量的数据，14G的数据最终只恢复了几百兆而已。 正常情况下，像Redis这样定期回写磁盘的内存数据库，丢失几个数据 ...