去除文件中重复数据的方法:
先使用sort指令将文件中的数据按照要求的索引进行排序,然后使用uniq指令将重复数据去掉得到想要的结果。
如文件a.txt中有重复行,需要去除重复行时执行如下指令:
#sort a.txt > b.txt;
#uniq b.txt > c.txt
c.txt文件就是所需数据了.
笑话军事旅游美容女性百态母婴家电游戏互联网财经美女干货家饰健康探索资源娱乐学院 数码美食景区养生手机购车首饰美妆装修情感篇厨房科普动物植物编程百科知道汽车珠宝 健康评测品位娱乐居家情感星座服饰美体奢侈品美容达人亲子图库折扣生活美食花嫁风景 | 首页 |
去除文件中重复数据的方法:
先使用sort指令将文件中的数据按照要求的索引进行排序,然后使用uniq指令将重复数据去掉得到想要的结果。
如文件a.txt中有重复行,需要去除重复行时执行如下指令:
#sort a.txt > b.txt;
#uniq b.txt > c.txt
c.txt文件就是所需数据了.