一个 hive sql 使用 mapreduce 引擎， 运行生成 1 个或者多个 yarn 任务
想对这条 sql 使用的资源进行统计，需要获取下这条 sql 生成的 job id
请问下 v 友可以通过哪些方式获取?
This topic created in 1464 days ago, the information mentioned may be changed or developed.
 |
1
scalaer OP sql 是通过 jdbc 客户端方式提交的
|
 |
2
vverr Jun 20, 2022
应该通过 spark 的 applicationId 就可以通过接口拿到应用运行的那些信息了吧
|
 |
3
greengreengo Jun 21, 2022
访问 yarn 的默认 19888 端口，查看 yarn 历史任务，里面有 job id
|
|
4
scalaer OP @greengreengo 想实现通过客户端提交的方式，获取到 job id ，然后调用 job history server 接口
|
Select Language