Ubuntu怎么实现词频统计

这篇文章主要介绍了Ubuntu怎么实现词频统计的相关知识,内容详细易懂,操作简单快捷,具有一定借鉴价值,相信大家阅读完这篇Ubuntu怎么实现词频统计文章都会有所收获,下面我们一起来看看吧。

创新互联公司从2013年成立,是专业互联网技术服务公司,拥有项目网站建设、成都做网站网站策划,项目实施与项目整合能力。我们以让每一个梦想脱颖而出为使命,1280元衡南做网站,已为上家服务,为衡南各地企业和个人服务,联系电话:028-86922220

Ubuntu实现词频统计的示例:

使用shell实现简单的词频统计,例如:统计如下中第二列单词出现的次数。

1,huabingood,100

2,haha,200

3,huabingood,300

4,haha,100

5,haha,200

实现代码命令:

cat a.txt | awk -F "," '{print $2}' | sort | uniq -c | sort -nrk 1

代码解释:

awk -F "," '{print $2}' # 将数据按照逗号进行分割,并取出第二列的内容

sort  # 将取出的内容进行排序。因为uniq统计时,如果重复的数据不连续,就会被认为时两个不同内容的行

uniq -c  # 统计重复行出现的次数

sort -nrk 1  # 按照第一列重复的次数,按照数字顺序进行降序排列

关于“Ubuntu怎么实现词频统计”这篇文章的内容就介绍到这里,感谢各位的阅读!相信大家对“Ubuntu怎么实现词频统计”知识都有一定的了解,大家如果还想学习更多知识,欢迎关注创新互联行业资讯频道。


文章标题:Ubuntu怎么实现词频统计
文章来源:http://scjbc.cn/article/gsigeg.html

其他资讯