添加 Hadoop 监视器

自动发现和监控您的整个 Hadoop 集群,查看性能指标,包括使用的 DFS、YARN 指标、内存和日志统计信息;并在您的 DataNode、NameNode 或 YARN 发生任何故障时收到通知。 

先决条件

  • 确保在 NameNode 中安装最新版本的 Linux 代理 (17.5.0及更高版本)以监控整个 Hadoop 集群。Site24x7 Hadoop 监控使用 Linux 监控代理从您的 Hadoop 集群收集性能数据。
  • 确保在设置页面(管理>服务器监视器>设置)中将选项 自动发现服务器上的应用程序设置为true

添加 Hadoop 监视器

请按照以下步骤操作:

  1. 登录到 Site24x7 并转到服务器HadoopHadoop Clusters (+)。 
  2. 使用切换按钮以 root 或非 root 身份安装代理,并在安装后以 root 或非 root 身份运行代理。
    例如:要以 root 用户身份安装代理并在启用代理的情况下以非 root 身份运行代理,请执行以下命令:
    bash -c "$(curl -sL https://staticdownloads.site24x7.com/server/Site24x7InstallScript.sh)" readlink -i -key=<device_key> -proxy=user:password@proxyhost:proxyport -s24x7-agent
  3. 复制粘贴(单击复制到剪切板)并在特定 NameNode 中执行命令以下载并安装 Linux 代理。

在您的 Hadoop NameNode 中成功执行命令后,将安装 Linux 代理,并且该代理将自动发现并为 Site24x7 Web 客户端中的每个 NameNode、DataNode 和 YARN 添加一个监视器。您将能够在服务器Hadoop> 单击 Hadoop 集群名称 > NameNodesDataNodesYARN下看到监视器。 

添加阈值和可用性配置文件

将 Hadoop 监视器成功添加到您的 Site24x7 帐户后,添加阈值和可用性配置文件以帮助告警引擎决定是否必须将特定资源声明为危急或停止。了解更多

许可

每个 Hadoop 监视器都是一个基本监视器。每个 NameNode、DataNode 和 YARN 将使用一个基本监视器许可。

相关文章