您的位置:首页 > 其它

【Spark亚太研究院系列】Spark道路的真正的主人-第一章 构建Spark星团(第五步)(6)

2015-09-01 21:49 281 查看
结束historyserver例如,下面的命令可以看到:



第四步:验证Hadoop分布式集群

首先在hdfs文件系统上创建两个文件夹。创建步骤例如以下所看到的:



Hdfs中的/data/wordcount用来存放Hadoop自带的WordCount样例的数据文件,程序执行的结果输出到/output/wordcount文件夹中。透过Web控制能够发现我们成功创建了两个文件夹:



接下来将本地文件的数据上传到HDFS目录中:



透过Web控制能够发现我们成功上传了文件:



也可通过hadoop的hdfs命令在控制命令终端查看信息:



执行Hadoop自带的WordCount样例。执行例如以下命令:



执行步骤例如以下:





内容来自用户分享和网络整理,不保证内容的准确性,如有侵权内容,可联系管理员处理 点击这里给我发消息
标签: