原文：shell取出多列文件中某一列重复的数据
文件内容的格式是： 张三 李四 张三 第二列有重复数据，去重的脚本如下： 首先将第二列进行排序：sort t t k File.txt 然后if VALUE 判断 第一列是否与变量 VALUE相等 不必要担心 VALUE变量的值 在初始化时 awk 为 VALUE赋值 为 ，如果相等什么多不做。 不打印着一行 如果不相等则打印着一行 从而起到去除重复数据的作用 ...
2012-09-25 19:51 2 4408 推荐指数：
相关推荐
答:cat file | awk '{$1=null;print $0}' (删除第一列) ...
转：http://blog.csdn.net/ewili/article/details/8605638 ...
假设有一个名为data的文本文件，内容如下（有两列）： 1 1.0 2 2.0 3 3.0 4 4.0 5 5.0 6 6.0 要取出第一列可用如下语句： awk -F" " '{print $1}' data >out 其中双引号中的表示的是两列之间的分隔符，这里是空格 ...
2.2，列 ...
Select 列名,COUNT(列名)FROM 表名GROUP BY 列名HAVING COUNT( 列名 ) 〉1 ...
SELECT 某一列, COUNT( 某一列 ) FROM 表 GROUP BY 某一列 HAVING COUNT( 某一列 ) 〉1 这样查询出来的结果， 就是 有重复， 而且 重复的数量。 ...
sql 对某一列去重 select distinct 列名 from 表名 查询重复的个数： SELECT 字段,COUNT(0) AS 重复次数 FROM 表名 GROUP BY 字段 HAVING COUNT(字段) > 1 ...