Prometheus-exporter-collector

作为Nightingale的插件，用于收集prometheus的指标

prometheus作为优秀的开源监控产品，本身不仅完整的指标体系，还拥有丰富的指标采集解决方案。通过各种exporter可以覆盖中间件，操作系统，开发语言等等方面的监控指标采集

Prometheus-exporter-collector以插件形式集成在collector中，通过Nightingale插件采集，collector采集目标exporter指标并上报

快速构建

$ mkdir -p $GOPATH/src/github.com/n9e
$ cd $GOPATH/src/github.com/n9e
$ git clone https://github.com/n9e/prometheus-exporter-collector.git
$ cd prometheus-exporter-collector
$ export GO111MODULE=on
$ export GOPROXY=https://goproxy.cn
$ go build
$ cat plugin.test.json | ./prometheus-exporter-collector 

编译好的二进制

http://116.85.64.82/prometheus-exporter-collector-bin-20201218.tar.gz

配置参数

Name	type	Description
exporter_urls	array	Address to collect metric for prometheus exporter.
append_tags	array	Append tags for n9e metric default empty
endpoint	string	Field endpoint for n9e metric default empty
ignore_metrics_prefix	array	Ignore metric prefix default empty
timeout	int	Timeout for access a exporter url default 500ms
metric_prefix	string	append metric prefix when push to n9e. e.g. 'xx_exporter.'
metric_type	map	specify metric type
default_mapping_metric_type	string	Default conversion rule for Prometheus cumulative metrics. support COUNTER and SUBTRACT. default SUBTRACT

---

对于在使用 open-falcon 的用户，你也可以通过 prometheus-exporter-collector 将收集到的数据发送给 open-falcon。

./prometheus-exporter-collector -h
Usage: ./prometheus-exporter-collector [-h] [-b backend] [-s step]

Options: 
  -b string
        send metrics to backend: n9e, falcon (default "n9e")
  -h    help
  -s int
        set default step of falcon metrics (default 60)

• -b falcon： 以 open-falcon 作为数据接收方
• -s 60: metric 的 step 设置为60s

下面是一个具体的例子：通过 prometheus-exporter-collector， 获取 redis-exporter 的metrics，并发送给 open-falcon。

1. 下载和编译 redis_exporter

git clone https://github.com/oliver006/redis_exporter.git
cd redis_exporter
go build .
./redis_exporter --version
./redis_exporter -redis.addr redis://127.0.0.1:6379

//注意，请先确保 redis 已成功运行在127.0.0.1:6379 上。

这样，就可以看到 redis_exporter 已经成功运行，并监听在 :9121/metrics 。

2. 运行 prometheus-exporter-collector 并发送数据给 open-falcon

• 检查prometheus-exporter-collector的配置文件，确保 exporter_urls 设置为 http://127.0.0.1:9121/metrics

$ cat plugin.test.json

{
  "exporter_urls": [
    "http://127.0.0.1:9121/metrics"
  ],
  "append_tags": ["region=bj", "dept=cloud"],
  "endpoint": "127.0.0.100",
  "ignore_metrics_prefix": ["go_"],
  "metric_prefix": "",
  "metric_type": {},
  "default_mapping_metric_type": "COUNTER",
  "timeout": 500
}

• 运行prometheus-exporter-collector，将输出发送给本机的 falcon-agent

cat plugin.test.json | ./prometheus-exporter-collector -b falcon -s 60 | curl -X POST -d @- http://127.0.0.1:1988/v1/push