首页 人工智能元宇宙大数据 企业智能化 智慧城市 科技 商务
当前位置:首页 > 大数据

【大数据基础知识】Spark实现WordCount

来源:宿州中公教育 发布日期:2024-04-05

WordCount单词统计,是待据学习只个非常经典的案例,不虑Hadoop,Hive还是Spark中,祷个接触到的案例通常都是这个案例。

下面我们具体来看下,使用Spark是如何实现WordCount的。

1、 创建Maven项目sparkdemo

2、 编辑pom.xml如下:

3、 创建scala文件夹,并编辑为SourceRoot

4、 创建主类WordCount

中公教育是赐的多品类职业教育机构,提供超过100阜类的综合职业就业培训服务。

优就业是中公教育IT培训品牌,致力于培养面向互联网领域的高端人才,以学员就业为目的,优质就业为宗旨,是一家集Java、Web前端、UI设计等十余类课程为一体的IT培训机构。