linux如何去重统计

  介绍

这篇文章给大家分享的是有关linux如何去重统计的内容。小编觉得挺实用的,因此分享给大家做个参考。一起跟随小编过来看看吧。

linux命令行提供了非常强大的文本处理功能,组合利用linux命令能实现好多强大的功能。本文这里举例说明如何利用linux命令行进行文本按行去重并按重复次数排序。主要用到的命令有排序,uniq和削减。其中,那种主要功能是排序,uniq主要功能是实现相邻文本行的去重,减少可以从文本行中提取相应的文本列(简单地说,就是按列操作文本行)。

<强>文本行去重并按重复次数排序

<强>例:

首先,对文本行进行去重并统计重复次数(uniq命令加- c选项可以实现对重复次数进行统计)。

美元测试。txt | uniq - c   2个苹果和诺基亚。   4 Hello World。   我想买一个苹果设备。   1我叫Friendfish。   2苹果公司的Iphone。

<强>对文本行按重复次数进行排序。

<强>排序- n可以识别每行开头的数字,并按其大小对文本行进行排序。默认是按升序排列,如果想要按降序要加- r选项(rn)。

美元测试。txt | uniq - c | rn排序   4 Hello World。   2苹果公司的Iphone。   2个苹果和诺基亚。   1我叫Friendfish。

<强>每行前面的删除重复次数。

<强>削减命令可以按列操作文本行。可以看出前面的重复次数占8个字符,因此,可以用命令削减- c 9 -取出每行第9个及其以后的字符。

美元测试。txt | uniq排序rn - c | | - c 9 -   你好,世界   苹果公司的Iphone。   苹果和诺基亚。   我的名字叫Friendfish。   我想买一个苹果设备。

感谢各位的阅读!关于linux如何去重统计就分享到这里了,希望以上内容可以对大家有一定的帮助,让大家可以学到更多知识。如果觉得文章不错,可以把它分享出去让更多的人看到吧!

linux如何去重统计