大数据应用技术模块b常用命令及流程

  1. 在做模块b时常用指令注释

在做模块b时常用指令注释

  • 上传文件到hdfs
docker cp /home/local/桌面/shujuchuli/target/shujuchuli-1.0-SNAPSHOT.jar  master:/opt/software/
  • 启动容器
docker start master
docker start slave1
docker start slave2
  • 启动集群hadoop
start-all.sh
  • 启动spark
./sbin/start-all.sh
  • spark提交任务
spark-submit --class "要执行的main的类名" /opt/software/shujuchuli-1.0-SNAPSHOT.jar
  • 查看ubuntu 虚拟机ip方便xshell连接
ip addr

欢迎指出任何有错误或不够清晰的表达。可以在下面评论区评论,也可以邮件至 1701220998@qq.com
导航页 GitHub