如何通过Spark的shell测试Spark的工作
1、启动Spark集群,启动后的WebUI如下
2、启动Spark Shell
3、Web控制台查看shell的情况
4、把Spark安装目录“README.md”拷贝到HDFS系统上在Master节点上新启动一个命令终端,并进入到Spark安装目录下
5、把文件拷贝到HDFS的root文件夹下
6、观察一下Web控制台,会发现该文件已经成功上传到HDFS上
7、在Spark shell之下操作编写代码,操作我们上传的“README.md”
声明:本网站引用、摘录或转载内容仅供网站访问者交流或参考,不代表本站立场,如存在版权或非法内容,请联系站长删除,联系邮箱:site.kefu@qq.com。
阅读量:60
阅读量:60
阅读量:58
阅读量:61
阅读量:53