易操作、可观测、可扩展，EMQX 如何简化物联网应用开发

本文将从可操作性、可观测性、扩展性三个方面，与大家分享 EMQX 5.0 在运维监测、问题排查以及功能扩展中的功能优化，共同探索如何更快地利用这些优化搭建运维监控体系，为物联网业务带来更多助力。

4.x 配置文件使用类似 properties 的键值格式，对类似数组的配置项缺乏表达能力，为了让配置项层级更加清晰，5.0 配置采用标准的 HOCON（ Human-Optimized Config Object Notation ）格式：

node {
  name = "emqx@127.0.0.1"
  cookie = "emqxsecretcookie"
  data_dir = "data"
}
listeners.ssl.default {
  bind = "0.0.0.0:8883"
  max_connections = 512000
  ssl_options {
    keyfile = "etc/certs/key.pem"
    certfile = "etc/certs/cert.pem"
    cacertfile = "etc/certs/cacert.pem"
  }
}

另一方面，为灵活应对不同场景下用户对功能参数的要求，EMQX 提供了非常丰富的配置项，但大部分配置使用默认值即可。在 EMQX 4.x 中，单个配置文件包含了所有配置项以及每个配置项的注释，对于新手用户来说，快速找到并修改常用配置具有一定难度。

针对此问题，EMQX 5.0 精简了默认配置文件 emqx.conf
：只保留最常修改的配置，缩减配置文件在 100 行以内。如果用户需要修改其它的默认配置，可以参照 emqx-example.conf
文件，把对应的配置复制到 emqx.conf
中覆盖即可。

可热更新配置都可以通过 HTTP API 修改成功后立即生效，同时保证集群间配置同步更新成功。基本流程如下：

通过 HTTP API 更新的配置会持久化到配置文件中，以确保 EMQX 重启后配置不丢失。比如在 Dashboard 访问控制 → 认证 页面创建 HTTP 认证器后，EMQX 会在 data/configs/cluster-override.conf
文件中持久化如下内容：

listeners {
   ...
   tcp {
    my_listener {
      acceptors = 16
      bind = "0.0.0.0:1884"
      limiter {}
      max_connections = 102400
      proxy_protocol = false
      proxy_protocol_timeout = "15s"
      tcp_options {
        active_n = 100
        buffer = "4KB"
        nodelay = false
        reuseaddr = true
        send_timeout = "15s"
        send_timeout_close = true
      }
      zone = "default"
    }
  }
}

cluster-override.conf
会由 EMQX 内部机制保证集群内所有节点的一致性。

为了让 EMQX 内部可以更新本节点独立的配置，EMQX 还引入了 local-override.conf
。我们可以通过以下配置结构来理解其工作原理：优先级从高到低，依次是 emqx.conf < ENV < cluster-override.conf < local-override.conf
，比如：当某个配置已经在 Dashboard 上被修改过（即写入了 cluster-override.conf
）, 那么用户再次在 emqx.conf
手动更新它，则手动更新并不会生效。因为在 emqx.conf
中的修改值会被更高优先级的 cluster-override.conf
所覆盖。

上图为了说明原理，列出了配置存放的所有（4个）地方。由于 data 下的 xxx-override.conf
文件都是给 EMQX 自身做持久化的，原则上是禁止用户手动修改的。它们对用户应该是透明的。因此，对于用户而言，只有 ENV 和 emqx.conf
可手动更新，总结最佳实践为：

*推荐使用 Dashboard 上修改配置，因为这样可以保证集群内的配置都是一致的。且无需重启节点。

EMQX 提供了插件扩展机制，4.x 版本中用户使用插件时需要将插件与 EMQX 源码一同编译以解决插件与EMQX 的代码依赖问题，一定程度上限制了插件的分发与使用。

EMQX 5.0 经过改进，允许通过插件包的的形式编译、分发、安装插件，当用户需要扩展功能时，可以下载独立的插件安装包，在 Web 界面完成上传即可进行安装，整个过程甚至不需要重启 EMQX 集群。

同时，一个规范的插件将会随身附带使用说明、插件主页地址等信息，普通用户可以依照说明快速将插件用起来，也为插件开发者提供了与用户沟通的渠道。

EMQX 5.0 插件模板可见：https://github.com/emqx/emqx-plugin-template

ExHook（多语言扩展钩子）基于 gRPC 框架， 允许用户使用其他编程语言（如 Python、Java、Node.js 等）直接向 EMQX 系统挂载钩子，以接收并处理 EMQX 系统的钩子事件，达到扩展和定制 EMQX 的目的。

ExHook 基于 gPRC 通信，理论上支持任意语言平台和微服务，通过 ExHook 可以实现客户端认证、权限检查、数据存储与改写消息流程等业务的集成。

在 EMQX 5.0 中我们允许创建多个 ExHook 实例，并为每个实例提供了详细的使用情况统计信息：

同时还可以查看每个 Exhook 实例注册的钩子以及钩子参数，能够更好地感知 Exhook 扩展负载情况。

EMQX 5.0 Exhooks 接口参数及数据结构详情请参考：https://github.com/emqx/emqx/blob/master/apps/emqx_exhook/priv/protos/exhook.proto

作为自发布以来最重要的里程碑版本之一，EMQX 5.0 为用户带来了足以保障各类数据需求的高性能，以及从实际应用出发、可快速上手的各类实用功能。如前文提到，可操作性与可观测性的提升将使 EMQX 集群的运维工作变得更加轻松与高效，扩展性的增强则为用户定制更加符合自身需求的 EMQX 提供了便利。