本机如何访问搭建在云服务器上hadoop

作者:国际小甜 | 创建时间: 2023-03-27
在本机代码层次上访问服务器上的hadoop教程,相关说明以及代码如下...
本机如何访问搭建在云服务器上hadoop

操作方法

新建好一个maven或java项目,利用maven或者手动引入Hadoop的相关操作jar包,创建运行类,操作如下图。

开始编程,在代码指定好hadoop的相关配置信息,尤其是用户名,一定要注意,否则会有权限问题,导致无法进行连接。

获取到hadoop的连接,得到其文件系统fs,如下图代码所示,当前本人只是简单的获取到了hadoop下的所有节点信息以及根目录下的文件信息,他还有很多其他的方法,这里就不多做展示了。写好这些方法后,为了方便查看,将查询到的信息打印出来,如果有值,且与hadoop上值对应,那么就证明已经正确获取到了Hadoop的连接,并成功得到了hadoop上的信息。

这里是调用的主函数,也就是他的入口函数。这里要注意他的端口,我这里ip用的是主机名,没配置服务器映射的这里要写具体ip。

下面就是我运行产生的结果了,浏览器登陆到hadoop的界面进行查看验证是否正确,如图所示,获取正确,到这里就已经完成了本机对服务器上的hadoop进行访问的所有步骤了。

温馨提示

权限认证问题,一定要指定好对应用户
点击展开全文

更多推荐