prometheus 怎么导出和加载监控的数据呢?

2019-10-12 20:04:47 +08:00
 stevenbipt

公司部署测试的时候,需要把 prometheus 的监控数据从云服务器上打包到本地工作环境然后在本地加载方便配合 log 进行调试,但是打包数据出了点问题,目前的做法是备份 metrics 文件夹内的数据,但是 prometheus 设置storage.tsdb.path以后在该目录下只有一个wal文件夹和lock文件,打包这个文件节要到本地,在本地 mac 启动时选择设置storage.tsdb.path为打包解压的文件夹,结果启动后傻眼了,数据都没有,有一次打包的时候找到了官方文档上的存储结构的文档,数据文件夹内的文件结构大致如下:

./data
├── 01BKGV7JBM69T2G1BGBGM6KB12
│   └── meta.json
├── 01BKGTZQ1SYQJTR4PB43C8PD98
│   ├── chunks
│   │   └── 000001
│   ├── tombstones
│   ├── index
│   └── meta.json
├── 01BKGTZQ1HHWHV8FBJXW1Y3W0K
│   └── meta.json
├── 01BKGV7JC0RY8A6MACW02A2PJD
│   ├── chunks
│   │   └── 000001
│   ├── tombstones
│   ├── index
│   └── meta.json
└── wal
    ├── 00000002
    └── checkpoint.000001

有一次测试的时候,发现并打包了这些文件,发现就能够顺利加载 metrics 数据,并在 grafana 上显示出来,目前在ubuntu18上使用apt直接安装运行和下载带有二进制的压缩包解压运行都没有找到这个存储结构。

现在想问问:

  1. 这些文件怎么样才能找到?
  2. prometheus 怎么打包才能完美做到数据导出和加载?
5206 次点击
所在节点    问与答
2 条回复
kebyn
2019-10-13 09:50:06 +08:00
刚好也做了这个,但是我们的数据迁移后不强制要求保留的
参考这个文档,总共有三种办法
https://medium.com/@valyala/analyzing-prometheus-data-with-external-tools-5f3e5e147639
`Exporting raw data via tsdb command-line tool`方案是手动迁移本地数据库
`Exporting raw data via remote storage`基本上是官方提供的通用方案
stevenbipt
2019-10-13 11:58:41 +08:00
@kebyn 太感谢了,我去看一下,似乎第一个方法的网址打不开

这是一个专为移动设备优化的页面(即为了让你能够在 Google 搜索结果里秒开这个页面),如果你希望参与 V2EX 社区的讨论,你可以继续到 V2EX 上打开本讨论主题的完整版本。

https://www.v2ex.com/t/608746

V2EX 是创意工作者们的社区,是一个分享自己正在做的有趣事物、交流想法,可以遇见新朋友甚至新机会的地方。

V2EX is a community of developers, designers and creative people.

© 2021 V2EX