Kuiper REST api 允许您管理插件,例如创建、删除和列出插件。 请注意,删除插件将需要重新启动 kuiper 才能生效。 要更新插件,请执行以下操作:

  1. 删除插件。
  2. 重新启动 Kuiper。
  3. 使用新配置创建插件。

创建插件

该API接受JSON内容以创建新的插件。 每种插件类型都有一个独立的端点。 支持的类型为 ["源", "目标", "函数"]。 插件由名称标识。 名称必须唯一。

  1. POST http://localhost:9081/plugins/sources
  2. POST http://localhost:9081/plugins/sinks
  3. POST http://localhost:9081/plugins/functions

文件在http服务器上时的请求示例:

  1. {
  2. "name":"random",
  3. "file":"http://127.0.0.1/plugins/sources/random.zip"
  4. }

文件在Kuiper所在服务器上时的请求示例:

  1. {
  2. "name":"random",
  3. "file":"file:///var/plugins/sources/random.zip"
  4. }

参数

  1. name:插件的唯一名称。 名称必须采用首字母小写的驼峰命名法。 例如,如果导出的插件名称为 Random,则此插件的名称为 random
  2. file:插件文件的 URL。URL 支持 http 和 https 以及 file 模式。当使用 file 模式时,该文件必须在 Kuiper 服务器所在的机器上。它必须是一个 zip 文件,其中包含:编译后的 so 文件和yaml 文件(仅源必需)。 如果插件依赖于某些外部依赖项,则可以提供一个名为install.sh 的 bash 脚本来进行依赖项安装。 文件名称必须与插件名称匹配。 请参考 扩展 了解命名规则。

插件文件格式

名为 random.zip 的源的示例 zip 文件

  1. Random@v1.0.0.so
  2. random.yaml
  3. install.sh
  4. install.sh 的各种依赖文件/文件夹
    • mysdk.zip
    • myconfig.conf
  5. etc 目录:插件的运行时配置文件或依赖文件。插件安装后,该目录将重名为插件名并复制到 /etc/ 目录下。

请注意,将在系统可能已经具有库或软件包的情况下运行 install.sh。 确保在运行之前检查路径。 下面是一个示例 install.sh,用于安装示例 sdk 库。

  1. #!/bin/sh
  2. dir=/usr/local/mysdk
  3. cur=$(dirname "$0")
  4. echo "Base path $cur"
  5. if [ -d "$dir" ]; then
  6. echo "SDK path $dir exists."
  7. else
  8. echo "Creating SDK path $dir"
  9. mkdir -p $dir
  10. echo "Created SDK path $dir"
  11. fi
  12. apt install --no-upgrade unzip
  13. if [ -d "$dir/lib" ]; then
  14. echo "SDK lib path $dir/lib exists."
  15. else
  16. echo "Unzip SDK lib to path $dir"
  17. unzip $cur/mysdk.zip -d $dir
  18. echo "Unzipped SDK lib to path $dir"
  19. fi
  20. if [ -f "/etc/ld.so.conf.d/myconfig.conf" ]; then
  21. echo "/etc/ld.so.conf.d/myconfig.conf exists"
  22. else
  23. echo "Copy conf file"
  24. cp $cur/myconfig.conf /etc/ld.so.conf.d/
  25. echo "Copied conf file"
  26. fi
  27. ldconfig
  28. echo "Done"

显示插件

该 API 用于显示服务器中为插件类型定义的所有插件。

  1. GET http://localhost:9081/plugins/sources
  2. GET http://localhost:9081/plugins/sinks
  3. GET http://localhost:9081/plugins/functions

响应示例:

  1. ["plugin1","plugin2"]

描述插件

该 API 用于打印插件的详细定义。

  1. GET http://localhost:9081/plugins/sources/{name}
  2. GET http://localhost:9081/plugins/sinks/{name}
  3. GET http://localhost:9081/plugins/functions/{name}

路径参数 name 是插件的名称。

响应示例:

  1. {
  2. "name": "plugin1",
  3. "version": "1.0.0"
  4. }

删除插件

该 API 用于删除插件。 需要重启 kuiper 服务器才能生效。

  1. DELETE http://localhost:9081/plugins/sources/{name}
  2. DELETE http://localhost:9081/plugins/sinks/{name}
  3. DELETE http://localhost:9081/plugins/functions/{name}

用户可以传递查询参数来决定是否应在删除后停止 Kuiper,以使删除生效。 参数是restart,只有当值是1时,Kuiper 才停止。 用户必须手动重新启动它。

  1. DELETE http://localhost:9081/plugins/sources/{name}?restart=1

用于导出多函数的函数插件的相关 API

与 source 和 sink 插件不同,函数插件可以在一个插件里导出多个函数。导出的函数名必须全局唯一,不能与其他插件导出的函数同名。插件和函数是一对多的关系。因此,我们提供了 show udf (用户定义的函数) 接口用于查询所有已定义的函数名以便用户避免重复名字。我们也提供了 describe udf 接口,以便查询出定义该函数的插件名称。另外,我们提供了函数注册接口,用于给自动载入的函数注册导出的多个函数。

显示用户自定义函数列表

该 API 用于展示所有自定义的函数的名称。

  1. GET http://localhost:9081/plugins/udfs

结果样例:

  1. ["func1","func2"]

描述用户自定义函数

该 API 用于展示定义此用户自定义函数的插件名称。

  1. GET http://localhost:9081/plugins/udfs/{name}

结果样例:

  1. {
  2. "name": "funcName",
  3. "plugin": "pluginName"
  4. }

register functions

该 API 用于给自动载入的函数插件注册其导出的所有函数或者用于更改插件导出的函数列表。如果插件是经由命令行的创建命令或者 REST API 创建,且创建时提供了 functions 参数,则无需再执行此命令除非用于更改导出函数。此命令将会持久化到 KV 中。因此,除非需要更改导出函数列表,用户仅需执行注册函数一次。

  1. POST http://{{host}}/plugins/functions/{plugin_name}/register
  2. {"functions":["func1","func2"]}

获取可安装的插件

根据在 etc/kuiper.yaml 文件中 pluginHosts 的配置,获取适合本 Kuiper 实例运行的插件列表,缺省会从 https://packages.emqx.io 上去获取。

  1. GET http://localhost:9081/plugins/sources/prebuild
  2. GET http://localhost:9081/plugins/sinks/prebuild
  3. GET http://localhost:9081/plugins/functions/prebuild

样例返回内容如下,其中键值为插件名称,值是插件的下载地址。

  1. {
  2. "file": "http://127.0.0.1:63767/kuiper-plugins/0.9.1/sinks/alpine/file_arm64.zip",
  3. "influx": "http://127.0.0.1:63767/kuiper-plugins/0.9.1/sinks/alpine/influx_arm64.zip",
  4. "zmq": "http://127.0.0.1:63768/kuiper-plugins/0.9.1/sinks/alpine/zmq_arm64.zip"
  5. }