☰

包含 Influx 的 json 資料的 Telegraf Tail 文件

tag-icon • tag-icon json telegraf
包含 Influx 的 json 資料的 Telegraf Tail 文件

如何透過尾隨包含 JSON 資料的檔案將 json 資料提取到 influx 中？

例如：

我的日誌是這樣的：

2020-12-01T18:34:06+02:00 10.132.90.194 {"wfd_successful_hits_sec": "0", "sql_hits_sec_max": "0", "timestamp": "2020/12/01 18:34:01", "connection_sec_max": "1922", "http_hits_sec_max": "1106", "http_hits_sec": "106", "wfd_successful_hits_sec_max": "0", "sql_hits_sec": "0", "sql_audit_phase2_events_sec_max": "0", "hdfs_hits_sec": "0", "connection_sec": "26"}

有沒有辦法只提取 JSON 部分並將其發送到 influx？

我知道 grok 模式(\{.*\})$會提取 JSON 部分。

我的配置如下：

[global_tags]
[agent]
  interval = "10s"
  round_interval = true
  metric_batch_size = 1000
  metric_buffer_limit = 10000
  collection_jitter = "0s"
  flush_interval = "10s"
  flush_jitter = "0s"
  precision = ""
  hostname = ""
  omit_hostname = false
[[inputs.tail]]
  files = ["/opt/share/host*log"]
  data_format = "json"
[[outputs.influxdb_v2]]
  urls = ["http://localhost:8086"]
  token = "TOKEN"
  organization = "ORG"
  bucket = "performance_stats

答案1

由於我的 JSON 輸出包含時間戳字段。

我修改了 rsyslog 配置以保存 syslograwmsg並從開始的第一場比賽開始保存{

$Template tpl,"%rawmsg:R,ERE,0,DFLT:(\{.*)--end%\n"

相關內容