mapreduce中wordcount的java实现是怎样的

mapreduce中wordcount的java实现是怎样的,很多新手对此不是很清楚,为了帮助大家解决这个难题,下面小编将为大家详细讲解,有这方面需求的人可以来学习下,希望你能有所收获。

创新互联专注为客户提供全方位的互联网综合服务,包含不限于成都网站设计、成都做网站、可克达拉网络推广、小程序定制开发、可克达拉网络营销、可克达拉企业策划、可克达拉品牌公关、搜索引擎seo、人物专访、企业宣传片、企业代运营等,从售前售中售后,我们都将竭诚为您服务,您的肯定,是我们最大的嘉奖;创新互联为所有大学生创业者提供可克达拉建站搭建服务,24小时服务热线:18980820575,官方网址:www.cdcxhl.com

用java模拟词频统计。

有3个文件:text1: hello world

                    text2:hello hadoop

                    text3:hello mapreduce

对上面的文件进行词频统计:结果应该是:hello:3;    hadoop:1;    world:1;    mapreduce:1

代码实现如下:

package count;

import java.util.Hashtable;
import java.util.Iterator;
import java.util.StringTokenizer;

public class Count {

    public static void main(String[] args) {
        String [] text = new String[]{"hello world", "hello hadoop", "hello mapreduce"};
        Hashtable ht = new Hashtable();
        for(int i=0; i<3; i++){
            StringTokenizer st = new StringTokenizer(text[i]);
            while(st.hasMoreTokens()){
                String word = st.nextToken();
                if(!ht.containsKey(word))
                    ht.put(word, new Integer(1));
                else{
                    int wc = ((Integer)ht.get(word)).intValue() + 1;
                    ht.put(word, new Integer(wc));
                }
            }
            
        }
        for(Iterator itr = ht.keySet().iterator(); itr.hasNext();){
            String word = (String)itr.next();
            System.out.print(word + ":" + (Integer)ht.get(word)+"; ");
        }
            
    }

}

mapreduce中wordcount的java实现是怎样的

看完上述内容是否对您有帮助呢?如果还想对相关知识有进一步的了解或阅读更多相关文章,请关注创新互联行业资讯频道,感谢您对创新互联的支持。


新闻标题:mapreduce中wordcount的java实现是怎样的
标题网址:http://azwzsj.com/article/godhgi.html