利用 distinct :对需要处理的字段进行去重 select distinct 字段名 from 表名 去重以后 利用group by select * from 表名 group by 字段名 利用having select * from 表名 group ...

　　最近写爬虫的时候遇到了一个问题，爬一个专利网站，主要工作流是先把列表页下所有的专利包括专利号、专利名称、URL放到数据库的一个文档info中，再抽取info中的URL进行爬取详情页，爬取列表页的信息做了一个去重，爬一个就在数据库里查一个。。效率就不提了（另一种我能想到的方法是先用线程池爬取一遍 ...

查询： 删除： ...

shoes表结构 在此表中，shoes_name可能有重复，本篇博客记录如何去除重复数据。 1.首先要知道哪些数据是重复的, 可用group by 聚集函数找到: 注：having 一般和group连用，用来限制查到的结果，这里的意思是将shoes表 ...

现在，随着上网人数的激增，一些大型的网站开始使用数据库集群来提高数据库的可靠性和数据库的性能。那么在介绍数据库集群之前首先需要弄清楚几个问题。 1.为什么要用数据库集群 （1）通过使用数据库集群可以使读写分离，提高数据库的系统性能。 大家都知道，mysql ...

概要 该问讲述了我对数据库事务的一些理解，由于本人才疏学浅，无法保证这些内容的正确性望各位明鉴，希望能够误导你，哦是帮到你！文章后面列出了一些大牛的文章，供大家参考。 事务的定义 啥是数据库事务?事务就是….,(此处略去200字) 一个事务的典型例子(中西结合版) Mr张三 ...

本文主要讨论图数据库背后的设计思路、原理还有一些适用的场景，以及在生产环境中使用图数据库的具体案例。 从社交网络谈起 下面这张图是一个社交网络场景，每个用户可以发微博、分享微博或评论他人的微博。这些都是最基本的增删改查，也是大多数研发人员对数据库做的常见操作。而在研发人员的日常 ...

与往常一样，这不会太深入谈到技术点。数据库日志最好的学习是，读Oracle 8/9的日志原理。所有的系统都是程序员写出来的，因此，所有的IT系统，都是源于生活。我接触最早的是Dbase II，那时是单文件版本，单用户操作。到后来FoxPro 2 时结合NetWare386+DOS无盘站，就变成 ...