保存数据到 OpenTSDB

搭建 OpenTSDB 数据库环境,以 MaxOS X 为例:

  1. $ docker pull petergrace/opentsdb-docker
  2. $ docker run -d --name opentsdb -p 4242:4242 petergrace/opentsdb-docker

创建规则:

打开 emqx dashboard,选择左侧的 “规则” 选项卡。

选择触发事件 “消息发布”,然后填写规则 SQL:

  1. SELECT
  2. payload as p,
  3. p.metric as metric, p.tags as tags, p.value as value
  4. FROM
  5. "#"

image

关联动作:

在 “响应动作” 界面选择 “添加”,然后在 “动作” 下拉框里选择 “保存数据到 OpenTSDB”。

image

填写动作参数:

“保存数据到 OpenTSDB” 动作需要六个参数:

1). 详细信息。是否需要 OpenTSDB Server 返回存储失败的 data point 及其原因的列表,默认为 false。

2). 摘要信息。是否需要 OpenTSDB Server 返回 data point 存储成功与失败的数量,默认为 true。

3). 最大批处理数量。消息请求频繁时允许 OpenTSDB 驱动将多少个 Data Points 合并为一次请求,默认为 20。

4). 是否同步调用。指定 OpenTSDB Server 是否等待所有数据都被写入后才返回结果,默认为 false。

5). 同步调用超时时间。同步调用最大等待时间,默认为 0。

6). 关联资源。现在资源下拉框为空,可以点击右上角的 “新建资源” 来创建一个 OpenTSDB 资源:

image

选择 “OpenTSDB 资源”:

image

填写资源配置:

本示例中所有配置保持默认值即可,点击 “测试连接” 按钮,确保连接测试成功。

最后点击 “新建” 按钮。

image

返回响应动作界面,点击 “确认”。

image

返回规则创建界面,点击 “新建”。

image

规则已经创建完成,现在发一条消息:

  1. Topic: "t/1"
  2. QoS: 0
  3. Retained: false
  4. Payload: "{"metric":"cpu","tags":{"host":"serverA"},"value":12}"

我们通过 Postman 或者 curl 命令,向 OpenTSDB Server 发送以下请求:

  1. POST /api/query HTTP/1.1
  2. Host: 127.0.0.1:4242
  3. Content-Type: application/json
  4. cache-control: no-cache
  5. Postman-Token: 69af0565-27f8-41e5-b0cd-d7c7f5b7a037
  6. {
  7. "start": 1560409825000,
  8. "queries": [
  9. {
  10. "aggregator": "last",
  11. "metric": "cpu",
  12. "tags": {
  13. "host": "*"
  14. }
  15. }
  16. ],
  17. "showTSUIDs": "true",
  18. "showQuery": "true",
  19. "delete": "false"
  20. }
  21. ------WebKitFormBoundary7MA4YWxkTrZu0gW--

如果 data point 存储成功,将会得到以下应答:

  1. [
  2. {
  3. "metric": "cpu",
  4. "tags": {
  5. "host": "serverA"
  6. },
  7. "aggregateTags": [],
  8. "query": {
  9. "aggregator": "last",
  10. "metric": "cpu",
  11. "tsuids": null,
  12. "downsample": null,
  13. "rate": false,
  14. "filters": [
  15. {
  16. "tagk": "host",
  17. "filter": "*",
  18. "group_by": true,
  19. "type": "wildcard"
  20. }
  21. ],
  22. "index": 0,
  23. "tags": {
  24. "host": "wildcard(*)"
  25. },
  26. "rateOptions": null,
  27. "filterTagKs": [
  28. "AAAC"
  29. ],
  30. "explicitTags": false
  31. },
  32. "tsuids": [
  33. "000002000002000007"
  34. ],
  35. "dps": {
  36. "1561532453": 12
  37. }
  38. }
  39. ]

在规则列表里,可以看到刚才创建的规则的命中次数已经增加了 1:

image