这是一篇新手笔记
在提交spark任务的时候,若 --class参数类名指定错误会让任务无法运行
那么如果不会看文件路径的话,如何精准找出自己打包的类名呢?
可以使用此条命令找到自己的类:
jar tf
找到自己需要运行的任务,就可以直接使用spark-submit命令上传任务了
spark-submit --master yarn --driver-memory 2G --driver-cores 2 --num-executors 2 --executor-memory 3g --executor-cores 4 --class spark.spark_hive1 /opt/demo2.jar
成功运行!
猜你喜欢
- 16天前梦见左门牙脱落预示什么
- 13天前梦中被追逐的奔跑与心理隐喻
- 13天前梦中被追逐的恐惧心理分析
- 13天前女性梦境解析:蟒蛇食人的心理象征
- 13天前梦中遇袭却幸免于难
- 13天前梦中遇袭的心理分析与应对
- 13天前梦见顺产顺利预示美好征兆
- 13天前梦中拾得红色百元钞票的寓意解析
- 13天前孕妇梦见棺材与逝者的心理解析
- 13天前梦见狗咬手出血预示什么征兆
网友评论
- 搜索
- 最新文章
- 热门文章