mapreduce中wordcount的java实现是怎样的,很多新手对此不是很清楚,为了帮助大家解决这个难题,下面小编将为大家详细讲解,有这方面需求的人可以来学习下,希望你能有所收获。
用java模拟词频统计。
有3个文件:text1: hello world
text2:hello hadoop
text3:hello mapreduce
对上面的文件进行词频统计:结果应该是:hello:3; hadoop:1; world:1; mapreduce:1
代码实现如下:
package count;
import java.util.Hashtable;
import java.util.Iterator;
import java.util.StringTokenizer;
public class Count {
public static void main(String[] args) {
String [] text = new String[]{"hello world", "hello hadoop", "hello mapreduce"};
Hashtable ht = new Hashtable();
for(int i=0; i<3; i++){
StringTokenizer st = new StringTokenizer(text[i]);
while(st.hasMoreTokens()){
String word = st.nextToken();
if(!ht.containsKey(word))
ht.put(word, new Integer(1));
else{
int wc = ((Integer)ht.get(word)).intValue() + 1;
ht.put(word, new Integer(wc));
}
}
}
for(Iterator itr = ht.keySet().iterator(); itr.hasNext();){
String word = (String)itr.next();
System.out.print(word + ":" + (Integer)ht.get(word)+"; ");
}
}
}
看完上述内容是否对您有帮助呢?如果还想对相关知识有进一步的了解或阅读更多相关文章,请关注亿速云行业资讯频道,感谢您对亿速云的支持。
亿速云「云服务器」,即开即用、新一代英特尔至强铂金CPU、三副本存储NVMe SSD云盘,价格低至29元/月。点击查看>>
免责声明:本站发布的内容(图片、视频和文字)以原创、转载和分享为主,文章观点不代表本网站立场,如果涉及侵权请联系站长邮箱:is@yisu.com进行举报,并提供相关证据,一经查实,将立刻删除涉嫌侵权内容。
原文链接:https://my.oschina.net/liuxinquan/blog/413410