如何通过Spark的shell测试Spark的工作

 时间:2024-10-12 14:47:57

1、启动Spark集群,启动后的WebUI如下

如何通过Spark的shell测试Spark的工作如何通过Spark的shell测试Spark的工作

2、启动Spark Shell

如何通过Spark的shell测试Spark的工作

3、Web控制台查看shell的情况

如何通过Spark的shell测试Spark的工作

4、把Spark安装目录“README.md”拷贝到HDFS系统上在Master节点上新启动一个命令终端,并进入到Spark安装目录下

如何通过Spark的shell测试Spark的工作

5、把文件拷贝到HDFS的root文件夹下

如何通过Spark的shell测试Spark的工作

6、观察一下Web控制台,会发现该文件已经成功上传到HDFS上

如何通过Spark的shell测试Spark的工作

7、在Spark shell之下操作编写代码,操作我们上传的“README.md”

如何通过Spark的shell测试Spark的工作
  • 图解RoadFlow快速入门之设计流程
  • 卧龙推广平台后台显示不宜推广如何解决?
  • 智能卡包如何制定还款计划
  • 治愈系书单|生活其实很可爱
  • 录音机怎么才能只用听筒播放录音
  • 热门搜索
    动物手抄报 肺炎手抄报 师恩难忘手抄报 缅怀先烈的手抄报图片 端午节手抄报怎么画 致敬抗美援朝争做时代新人手抄报 国防手抄报简单又字少 关于环境的手抄报 清明节手抄报内容50字 小学英语手抄报图片