IntelliJ IDEA 2025.2 Help

Hadoop YARN

使用 IntelliJ IDEA,您可以监控您的 Hadoop YARN 指标。

典型工作流程:

  1. 建立与 Hadoop 服务器的连接

  2. 调整预览布局

  3. 筛选出要监控的参数

连接到 Hadoop 服务器

  1. Big Data Tools 窗口中,点击 添加连接 并选择 Hadoop YARN

  2. 在打开的 Big Data Tools 对话框中,指定连接参数:

    配置 Hadoop 连接
    • 名称 :用于区分其他连接的连接名称。

    • URL :Hadoop 服务器的 URL。

    此外,您可以设置:

    • 按项目 :选择仅对当前项目启用这些连接设置。 如果希望此连接在其他项目中可见,请取消选中复选框。

    • 启用连接 :如果希望禁用此连接,请取消选中复选框。 默认情况下,新建的连接是启用的。

    • 启用隧道. 此选项会创建到远程主机的 SSH 隧道。 如果目标服务器在私有网络中,但可以通过 SSH 连接到网络中的主机,这可能会很有用。

      选中复选框并指定 SSH 连接的配置(点击 创建新的 SSH 配置)。

    • 启用 HTTP 基本身份验证 :与使用指定用户名和密码的 HTTP 认证连接。

    • 代理 :选择您是想使用 IDE 代理设置还是想指定自定义的代理设置。

    • 您还可以重复使用任何现有的 Spark 连接。 只需从 Spark 监控 列表中选择即可。

  3. 填写设置后,点击 测试连接 以确保所有配置参数正确。 然后点击 OK

随时,您可以通过以下其中一种方式打开连接设置:

  • 转到 工具 | 大数据工具 设置页面  Ctrl+Alt+S

  • 请点击 settings 工具窗口工具栏上的 Hadoop YARN

一旦您与 Hadoop 服务器建立连接, Hadoop YARN 工具窗口就会出现。 它包含多个区域来监控数据:

资源管理器提供的有关集群指标和资源的详细信息。

Hadoop YARN:集群信息

介绍负责任务执行的节点信息。

Hadoop YARN:备注

提供有关选定数据节点的详细信息,包括节点资源分配。

Hadoop YARN:节点标签

用户应用程序的详细概述,包括应用程序指标和执行尝试。

Hadoop YARN:应用程序

监控工具,例如连接设置、日志信息、服务器堆栈详情以及服务器指标。

Hadoop YARN:工具

如需了解有关数据类型的更多信息,请参阅 Hadoop 文档

调整布局

  • 在应用程序列表中,选择一个进行学习。

  • 要管理监控区域的可见性,请使用以下按钮:

    条目

    描述

    预览尝试

    显示执行尝试的列表。

    预览详情

    显示应用程序详情。

    显示应用程序详情
  • 要专注于某个特定应用程序,请点击 在单独的标签页中打开 链接 应用程序详细信息 监控区域。

    点击以在单独的选项卡中预览

    应用程序详细信息将显示在单独的选项卡中。

    在单独的选项卡中查看应用程序
  • 点击 网页预览 以在浏览器中预览任何监视数据。

一旦您设置好监控窗口的布局,打开或关闭一些预览区域,您可以筛选监控数据以预览特定参数。

过滤监控数据

  • 在监控选项卡中使用筛选按钮(筛选应用状态 ),显示具有特定状态的应用程序的详细信息。 选择您想要监控的特定应用状态。

    您还可以按用户名、开始时间和结束时间筛选应用程序列表。 此外,您可以指定筛选列表中项目的限制。

    Hadoop YARN:应用程序
  • 在表格中管理内容:

    • 点击列标题以更改列中数据的顺序。

    • 点击 显示/隐藏列 在工具栏上以选择要在表格中显示的列:

      选择在表格中显示的列

您可以随时点击 刷新 工具窗口中的 Hadoop YARN 来手动刷新监控数据。 或者,您可以在 刷新 按钮旁边的列表中配置在特定时间间隔内的自动更新。 您可以选择 5、10 或 30 秒。

最后修改日期: 2025年 9月 22日