1.在Hadoop中安装配置maven环境

mvn -v查看是否配置成功

2.下载ssh拓展,建立远程连接

3.安装了核Maven有关的6个插件

在已经安装好Single Node工作模式的Hadoop节点上,要在CODE上构建Java编程环境,需要安装Extension Pack For Java 插件包,主要安装了核Maven有关的6个插件:点在“SSH: 192.168.10.100”中安装

如果本地客户机下载速度慢

可以采用VSIX安装。先去vscode的扩展下载市场:https://marketplace.visualstudio.com/search?target=VSCode&category=All%20categories&sortBy=Installs该市场中搜索到你想下载的插件

 点击这个选项下载,并修改好下载路径,方便后边vscode安装时寻找。

 选择VSIX安装。(把下载完的拓展可以直接上传到Linux)

出现拓展安装完成即可

4.配置成功之后,在hadoop-mapreduce中创建项目    

选择maven-archetype-quickstart构建一个Java框架

在弹出的版本选择中,选最高版本

取个自己的组织名字(比如com.example)

给生成的框架起个名字,框架会在demo工作目录下生成一个目录,并存放生成的App文件及测试文件。

然后等待Maven在执行框架生成任务:

转到进入交互式模式的时候,Maven会询问一些配置选择,不停的回车就可以了

点开工作空间中demo的目录,会发现其下src目录下,有main、test两个子目录,我们主要在main下面进行操作

5.创建wordcount.java

6.进入到放wordcount.java的目录下面

用命令mvn clean package生成jar包生成在了target下

8.然后用命令运行jar包

Hadoop jar /root/hadoop-mapreduce/demo0/target/hello-1.0-SNAPSHOT.jar com.example.WordCount /email_log.txt /output03

 

 

Logo

2万人民币佣金等你来拿,中德社区发起者X.Lab,联合德国优秀企业对接开发项目,领取项目得佣金!!!

更多推荐