完成 单机版spark环境搭建 + Spark平台的词频统计
- 安装scala并配置环境变量。
- 配置hadoop环境变量。
3. 安装配置maven环境。
4. 安装IntelliJIDEA。为idea添加scala和maven插件。
- 使用IntelliJIDEA构建maven项目。（配置全局sdk，添加spark依赖） 在Pom.xml文件中配置依赖：spark、Scala、hadoop版本等
6. 新建scala.class编译运行
7. 词频统计运行结果
-
Notifications
You must be signed in to change notification settings - Fork 0
wuhuanqi/Spark_WordCount
Folders and files
| Name | Name | Last commit message | Last commit date | |
|---|---|---|---|---|
Repository files navigation
About
Spark平台的词频统计
Resources
Stars
Watchers
Forks
Releases
No releases published
Packages 0
No packages published