告警解释

操作系统环境文件句柄不足时，产生该告警。

告警属性

告警参数

对系统的影响

发生文件句柄不足时，部分实例可能无法启动，集群将无法正常启动。

可能原因

操作系统文件句柄不足。

处理步骤

• 在FusionInsight Manager界面，选择“运维 > 告警 > 告警”，在实时告警列表中，单击此告警所在行的。从“定位信息”中查看“HostName”值，获取产生该告警的节点主机名称。
• 使用omm用户登录告警上报的节点。

• 初始化环境变量。

  source ${BIGDATA_HOME}/mppdb/.mppdbgs_profile

• 执行以下命令连接数据库。

  gsql -d postgres -p 25308

• 执行以下命令，查询“max_files_per_process”参数的取值是否小于默认值3000。

  SHOW max_files_per_process;

  回显如下类似信息。

   max_files_per_process 
  -----------------------
   2000
  (1 row)

  • 是，执行6。
  • 否，执行8。

• 执行以下命令修改“max_files_per_process”参数取值为“3000”。

  \q

  gs_guc set -Z coordinator -Z datanode -N all -I all -c 'max_files_per_process=3000'

• 执行以下命令重启集群生效。

  gs_om -t stop

  gs_om -t start

• 检查操作系统文件句柄，关闭占用文件句柄资源较多的与数据库无关的进程。
  说明：

  可通过如下命令检查操作系统文件句柄配置数目以及各个进程占用的句柄数目。其中第二个命令中第一列显示的是占用的句柄数，第二列显示的为进程PID。可以关闭一些占用文件句柄较多的不重要的进程。

  #cat /proc/sys/fs/file-max
  782799
  
  #lsof -n|awk '{print $2"\t"$1}'|sort|uniq -c|sort -nr|more
  
  131    24204    gaussdb
  
  57     24244　　 cleanup
  
  57     24231    cm_agent

• 等待一段时间，查看告警是否仍然存在。
  • 是，执行10。
  • 否，处理完毕。