file-logger

描述

file-logger 插件可用于将日志数据存储到指定位置。

file-logger - 图1提示

file-logger 插件特点如下:

  • 可将指定路由的日志发送到指定位置,方便你在本地统计各个路由的请求和响应数据。在使用 debug mode 时,你可以很轻松地将出现问题的路由的日志输出到指定文件中,从而更方便地排查问题。
  • 可以获取 APISIX 变量NGINX 变量,而 access.log 仅能使用 NGINX 变量。
  • 支持热加载,你可以在路由中随时更改其配置并立即生效。而修改 access.log 相关配置,则需要重新加载 APISIX。
  • 支持以 JSON 格式保存日志数据。
  • 可以在 log phase 阶段修改 file-logger 执行的函数来收集你所需要的信息。

属性

名称类型必选项描述
pathstring自定义输出文件路径。例如:logs/file.log
log_formatobject以 JSON 格式的键值对来声明日志格式。对于值部分,仅支持字符串。如果是以 $ 开头,则表明是要获取 APISIX 变量NGINX 内置变量
include_req_bodyboolean当设置为 true 时,日志中将包含请求体。如果请求体太大而无法在内存中保存,则由于 Nginx 的限制,无法记录请求体。
include_req_body_exprarrayinclude_req_body 属性设置为 true 时的过滤器。只有当此处设置的表达式求值为 true 时,才会记录请求体。有关更多信息,请参阅 lua-resty-expr
include_resp_bodyboolean当设置为 true 时,生成的文件包含响应体。
include_resp_body_exprarrayinclude_resp_body 属性设置为 true 时,使用该属性并基于 lua-resty-expr 进行过滤。如果存在,则仅在表达式计算结果为 true 时记录响应。
matcharray[]当设置了这个选项后,只有匹配规则的日志才会被记录。match 是一个表达式列表,具体请参考 lua-resty-expr

默认日志格式示例

  1. {
  2. "service_id": "",
  3. "apisix_latency": 100.99999809265,
  4. "start_time": 1703907485819,
  5. "latency": 101.99999809265,
  6. "upstream_latency": 1,
  7. "client_ip": "127.0.0.1",
  8. "route_id": "1",
  9. "server": {
  10. "version": "3.7.0",
  11. "hostname": "localhost"
  12. },
  13. "request": {
  14. "headers": {
  15. "host": "127.0.0.1:1984",
  16. "content-type": "application/x-www-form-urlencoded",
  17. "user-agent": "lua-resty-http/0.16.1 (Lua) ngx_lua/10025",
  18. "content-length": "12"
  19. },
  20. "method": "POST",
  21. "size": 194,
  22. "url": "http://127.0.0.1:1984/hello?log_body=no",
  23. "uri": "/hello?log_body=no",
  24. "querystring": {
  25. "log_body": "no"
  26. }
  27. },
  28. "response": {
  29. "headers": {
  30. "content-type": "text/plain",
  31. "connection": "close",
  32. "content-length": "12",
  33. "server": "APISIX/3.7.0"
  34. },
  35. "status": 200,
  36. "size": 123
  37. },
  38. "upstream": "127.0.0.1:1982"
  39. }

插件元数据设置

名称类型必选项默认值有效值描述
log_formatobject可选以 JSON 格式的键值对来声明日志格式。对于值部分,仅支持字符串。如果是以 $ 开头,则表明是要获取 APISIX 变量NGINX 内置变量
file-logger - 图2注意

该设置全局生效。如果指定了 log_format,则所有绑定 file-logger 的路由或服务都将使用该日志格式。

以下示例展示了如何通过 Admin API 配置插件元数据:

  1. curl http://127.0.0.1:9180/apisix/admin/plugin_metadata/file-logger \
  2. -H 'X-API-KEY: edd1c9f034335f136f87ad84b625c8f1' -X PUT -d '
  3. {
  4. "log_format": {
  5. "host": "$host",
  6. "@timestamp": "$time_iso8601",
  7. "client_ip": "$remote_addr"
  8. }
  9. }'

配置完成后,你可以在日志系统中看到如下类似日志:

  1. {"host":"localhost","@timestamp":"2020-09-23T19:05:05-04:00","client_ip":"127.0.0.1","route_id":"1"}
  2. {"host":"localhost","@timestamp":"2020-09-23T19:05:05-04:00","client_ip":"127.0.0.1","route_id":"1"}

启用插件

你可以通过以下命令在指定路由中启用该插件:

  1. curl http://127.0.0.1:9180/apisix/admin/routes/1 \
  2. -H 'X-API-KEY: edd1c9f034335f136f87ad84b625c8f1' -X PUT -d '
  3. {
  4. "plugins": {
  5. "file-logger": {
  6. "path": "logs/file.log"
  7. }
  8. },
  9. "upstream": {
  10. "type": "roundrobin",
  11. "nodes": {
  12. "127.0.0.1:9001": 1
  13. }
  14. },
  15. "uri": "/hello"
  16. }'

测试插件

你可以通过以下命令向 APISIX 发出请求:

  1. curl -i http://127.0.0.1:9080/hello
  1. HTTP/1.1 200 OK
  2. ...
  3. hello, world

访问成功后,你可以在对应的 logs 目录下找到 file.log 文件。

过滤日志

  1. curl http://127.0.0.1:9180/apisix/admin/routes/1 \
  2. -H 'X-API-KEY: edd1c9f034335f136f87ad84b625c8f1' -X PUT -d '
  3. {
  4. "plugins": {
  5. "file-logger": {
  6. "path": "logs/file.log",
  7. "match": {
  8. {
  9. { "arg_name","==","jack" }
  10. }
  11. }
  12. }
  13. },
  14. "upstream": {
  15. "type": "roundrobin",
  16. "nodes": {
  17. "127.0.0.1:9001": 1
  18. }
  19. },
  20. "uri": "/hello"
  21. }'

测试:

  1. curl -i http://127.0.0.1:9080/hello?name=jack

logs/file.log 中可以看到日志记录

  1. curl -i http://127.0.0.1:9080/hello?name=rose

logs/file.log 中看不到日志记录

删除插件

当你需要删除该插件时,可以通过如下命令删除相应的 JSON 配置,APISIX 将会自动重新加载相关配置,无需重启服务:

  1. curl http://127.0.0.1:9180/apisix/admin/routes/1 \
  2. -H 'X-API-KEY: edd1c9f034335f136f87ad84b625c8f1' -X PUT -d '
  3. {
  4. "methods": ["GET"],
  5. "uri": "/hello",
  6. "plugins": {},
  7. "upstream": {
  8. "type": "roundrobin",
  9. "nodes": {
  10. "127.0.0.1:9001": 1
  11. }
  12. }
  13. }'