查看spark on yarn的日志和程序状态的方法

矫情吗；* 2022-07-12 03:55 170阅读 0赞

[查看spark on yarn的日志和程序状态的方法][spark on yarn]

转载原文：

# http://blog.csdn.net/high2011/article/details/52132646    #

# **一、在命令行使用命令查看**  **(1)查看日志：yarn logs -applicationId application\_1469094096026\_26612**  **(2)查看状态：yarn applicaiton -status application\_1469094096026\_26612**  **红色字体代表appID：在UI界面中寻找该id**       **![Center][]**          **二、通过[Spark][] UI查询**       **![Center 1][]**          **![Center 2][]**          **![Center 3][]**          **![Center 4][]**              #

#     #

[spark on yarn]: http://blog.csdn.net/high2011/article/details/52132646
[Center]: https://img-blog.csdn.net/20160805211256656?watermark/2/text/aHR0cDovL2Jsb2cuY3Nkbi5uZXQv/font/5a6L5L2T/fontsize/400/fill/I0JBQkFCMA==/dissolve/70/gravity/Center
[Spark]: http://lib.csdn.net/base/spark
[Center 1]: https://img-blog.csdn.net/20160805220334148?watermark/2/text/aHR0cDovL2Jsb2cuY3Nkbi5uZXQv/font/5a6L5L2T/fontsize/400/fill/I0JBQkFCMA==/dissolve/70/gravity/Center
[Center 2]: https://img-blog.csdn.net/20160805220339414?watermark/2/text/aHR0cDovL2Jsb2cuY3Nkbi5uZXQv/font/5a6L5L2T/fontsize/400/fill/I0JBQkFCMA==/dissolve/70/gravity/Center
[Center 3]: https://img-blog.csdn.net/20160805220342898?watermark/2/text/aHR0cDovL2Jsb2cuY3Nkbi5uZXQv/font/5a6L5L2T/fontsize/400/fill/I0JBQkFCMA==/dissolve/70/gravity/Center
[Center 4]: /images/20220711/f377082a9a99415a8ed06f11bfcd1b87.png

发表评论取消回复

表情：

评论列表（有 0 条评论，170人围观）

还没有评论，来说两句吧...

相关阅读

相关 Spark on Yarn查看删除日志

一直以来都是在UI界面上查看Spark日志的，但有时想在终端里面查看某个job的日志该怎么看呢？今天特地查了下资料，找到如下命令： 1、查看某个job的日志 yarn lo

你的名字/ 2024年02月19日 15:09/ 0 赞/ 111 阅读

相关 Spark on YARN ：yarn-cluster模式如何查看日志

Spark on YARN 两种模式yarn-cluster yarn-client 一：yarn-client 在运行时是可以看到日志的而yarn-cluster是

「爱情、让人受尽委屈。」/ 2024年02月19日 15:08/ 0 赞/ 131 阅读

相关 Spark on yarn

Spark-on-YARN 1. 官方文档 [http://spark.apache.org/docs/latest/running-on-yarn.html][h

淩亂°似流年/ 2023年08月17日 15:55/ 0 赞/ 229 阅读

相关 MR和SPARK ON YARN 区别

MapReduce 多进程模型：MapReduce 应用程序是让每个Task 动态申请资源，且运行完后马上释放资源 ![20170715153726463][]

谁借莪１个温暖的怀抱￠/ 2023年08月17日 15:19/ 0 赞/ 179 阅读

相关 YARN查看和切换ResourceManager的状态

当YARN开启了HA之后，我们想要知道两个ResourceManager中哪台是ACTIVE，哪台是STANDBY状态，可以通过下面的方式来获取或切换它们的状态。 YARN的

àì夳堔傛蜴生んèń/ 2022年12月04日 08:49/ 0 赞/ 561 阅读

相关查看spark on yarn的日志和程序状态的方法

[查看spark on yarn的日志和程序状态的方法][spark on yarn] 转载原文： http://blog.csdn.net/high2011/artic

矫情吗；*/ 2022年07月12日 03:55/ 0 赞/ 171 阅读

相关 Spark ON Yarn

![Center][] ![Center 1][] ![Center 2][] [Center]: /images/20220615/16e07676c89

超、凢脫俗/ 2022年06月15日 07:14/ 0 赞/ 310 阅读

相关 spark on yarn 配置

系统：centos7 软件： 1. hadoop-2.7.2.tar.gz，请勿选择src版本，否则需要自行编译 2. jdk-7u79-linux-x64.t

╰+攻爆jí腚メ/ 2022年06月03日 09:44/ 0 赞/ 333 阅读

相关 Spark on Yarn的运行原理

一、YARN是集群的资源管理系统 1、ResourceManager：负责整个集群的资源管理和分配。 2、ApplicationMaster：YARN中每个Applic

喜欢ヅ旅行/ 2022年05月29日 11:47/ 0 赞/ 345 阅读

相关 spark on yarn

Spark on yarn的两种运行模式和运行原理一回顾—spark和mapreduce区别在MapReduce中，计算的最上层单元是是job，系统加载数据，执行一

- 日理万妓/ 2022年03月29日 13:43/ 0 赞/ 358 阅读