- Prometheus是由SoundCloud开发的开源监控告警系统。
- 基于Go语言开发，是Google BorgMon监控系统的开源版本。
- 2016年由Google发起的Linux基金会旗下的原生云基金会CNCF将其纳入第二大开源项目。
- 提供多维度数据模型
- 灵活的查询方式
- 支持服务器节a点的本地存储和远程存储
- 定义了开放的指标数据标准
- 基于HTTP的Pull方式采集数据
- 支持通过静态文件和动态发现机制发现监控对象
- 易于维护
- 支持数据的分区采样和联邦部署
- Server： 负责定时在目标上抓取metrics(指标)数据。
- Target： 暴露一个HTTP服务接口用户Server抓取数据。
- AlertManager ： 接收server推送的告警信息，并触发告警。
- Grafana： 监控数据展示。
- Exporters: 用于暴露已有的第三方服务的 metrics 给 Prometheus。
<metric name>{<label name>=<label value>, ...},
- 指标名称（metric name）:用于说明指标的含义,指标名称必须有字母、数字、下划线或者冒号组成 符合正则表达式 [a-zA-Z:][a-zA-Z0-9:],冒号不能用于exporter。
- 标签（label）: 体现指标的维度特性，用于过滤和聚合。通过标签名和标签值组成，键值对形式形成多种维度
指标1 http_request_total{status="200",method="POST"}
指标2{__name__="http_request_total",status="200",method="POST"}
- 以上两个指标是一样，下划线开头的标签是系统内部使用的
- 指标名称： httprequesttotal 代表HTTP请求的总数
- 标签1： status 值 200， 代表状态码为200
- 标签2： method 值 POST，代表请求类型为POST
- 计数器类型，只增不减，适用于机器启动时间、HTTP访问量
- 具有很好的不相关性，不会因为机器重启而置0
- 通常会结合rate()方法获取该指标在某个时间段的变化率
- 仪表盘，表征指标的实时变化情况。
- 可增可减，CPU和内存使用量。
- 大部分监控数据类型都是Gauge类型的
- 高级指标，用于凸显数据的分布情况
- 某个时间段内请求的响应时间
- 可以与Histogram相互转化
- 采样点分位图统计，用于得到数据的分布情况
- 无需消耗服务端资源
- 与histogram相比消耗系统资源更多
- 计算的指标不能再获取平均数等其他指标
- 一般只适用于独立的监控指标，如垃圾回收时间等
- 反映了某个区间内的样本个数，通过{le="上边界"}指定这个范围内的样本数。
- Prometheus会将所有采集到的样本数据以时间序列（time-series）的方式保存在内存数据库中，并且定时保存到硬盘上。
- time-series是按照时间戳和值的序列顺序存放的，我们称之为向量(vector). 每条time-series通过指标名称(metrics name)和一组标签集(labelset)命名。
- 指标(metric)：metric name和描述当前样本特征的labelsets;
- 时间戳(timestamp)：一个精确到毫秒的时间戳;
- 样本值(value)： 一个folat64的浮点型数据表示当前样本的值。
和采用Push方式采集监控数据不通，Prometheus可采用Pull方式采集监控数据。
- 通过周期性采集，设置采集时间。实时性不如Push方式。
- target需要数据存储能力，server只负责数据拉取。
- server可以做到无状态。
- server更加主动，控制采集的内容和采集频率。
- 通过批量配置或者自动发现来获取所有采集点。
- 相对简单，可以做到target充分解耦，无须感知server存在。
- 相对较好，可以采集数据立即上报到监控中心。
- 在采集完成后立即上报，本地不会保存采集数据。
- target本身无状态，server需要维护各种target状态。
- 控制方为target，target上报的数据决定了上报的周期和内容。
- 每个target都需要配置server的地址。
- 静态文件配置是一种传统的服务发现方式。
- 适用于有固定的监控环境、IP地址和统一的服务接口的场景。
- 需要在配置中指定采集的目标信息。
- 例如： “target”: [“10.10.10.10:8080”]
- 比较适用在云环境下，动态伸缩、迅速配置。
- 容器管理系统、各种云管平台、各种服务发现组件。
- kubernetes为例：
- 需要配置API的地址和认证凭据
- prometheus一直监听集群的变化
- 获取新增/删除集群中机器的信息，并更新采集对象列表。
- 通过自带的时序数据库将数据保存到本地的磁盘。
- 适用于存储大量的监控数据
- 支持OpenTSDB、InfluxDB、ElasticSearch等后端存储
- 通过适配器实现存储的远程读写接口，便可以监控
- Prometheus 通过PromQL和其他API可视化地展示收集的数据。
- Prometheus支持多种方式的图表可视化
- Grafana
- 自动的PromDash和自身提供的模板引擎等
- Prometheus 还提供了HTTP API查询方式，自定义所需输出。