Huaweicloud CCE helm部署Prometheus
一、需求（requirement） 华为云CCE提供了prometheus插件，可以很方便的进行安装，不过其没有提供grafana的安装插件。同时一些情况下，想通过自定义的方式安装，这篇内容就记录下如何使用 helm 在k8s CCE上进行prometheus + grafana的安装。 HUAWEI CLOUD CCE provides the……
包含标签 prometheus articles
单pod里多prometheus exporter端口监控
一、背景 一同事遇到客户在使用华为云CCE时，在一个pod里运行有多个进程，分别需要使用对应的prometheus exporter监控对应的数据。如：pod里同时运行的有nginx、mysql、php，三者都需要配置prometheus监控，在ECS虚拟机上部署是比较简单的，直接运……
K8S中使用自定义指标进行HPA扩缩容
k8s的默认扩缩容使用的是metrics-server来实现的，一般自指义指标（custom HPA）通过prometheus和prometheus-adapter来实现的。Prometheus 用于监控应用的负载和集群本身的各种指标，Prometheus Adapter 可以帮我们使用 Prometheus 收集的指标……
如何重载Prometheus配置
Reloading Prometheus’ Configuration A common question from new users is if they need to restart Prometheus every time they change the configuration. The good news is that you don’t, allowing your monitoring to continue uninterrupted as your system changes. There are two ways to ask Prometheus to reload it’s configuration, a SIGHUP and the POSTing to the /-/reload handler. To send a SIGHUP, first determine the process id of Prometheus. This may be in a file such as /var/run/prometheus.pid, or you can use tools such as pgrep to find it. Then use the kill command to send the signal: 1kill -HUP 1234 Alternatively, you can send a HTTP POST to the Prometheus web server: 1curl -X POST :9090/-/reload Note that as of……
Prometheus之increase、rate、irate
Counter（计数器） 是 Prometheus 四种指标类型（metric type）之一，该指标特点是值会一直增加，代表积累的数量。应对诸如此类的问题：一共有多少请求处理过？花了多长时间处理请求？对于 Counter，由于是单调递增的积累量，直接使用是没有太大的意义，我们更关心 Counter 指标在一段时间内的变化……
Blackbox Exporter监控HTTP健康度
Blackbox Exporter是Prometheus社区提供的官方黑盒监控解决方案，其允许用户通过：HTTP、HTTPS、DNS、TCP以及ICMP的方式对网络进行探测。刚好因为要从事SRE工作，这里就以站点的可用性为例，来结合Blackbox Exporter设定下SLO值。 一、Blackb……
Prometheus 的四种数据类型
Prometheus 的四种数据类型分别是：Counter、Gauge、Histogram和Summary。这里分别做下介绍。 Counter Counter数据类型的特点： Counter 用于累计值，例如 记录 请求次数、任务完成数、错误发生次数。 一直增加，不会减少。 重启进程后，会被重置。 1例如：http_response_tot……
Prometheus之Exporter小结
广义上讲所有可以向Prometheus提供监控样本数据的程序都可以被称为一个Exporter。而Exporter的一个实例称为target，如下所示，Prometheus通过轮询的方式定期从这些target中获取样本数据: prometheus-exporter 一、Exporter分类 社区提供了很多要用的Export……
Prometheus+grafana监控配置
一、Prometheus架构 Prometheus （中文名：普罗米修斯）是由 SoundCloud 开发的开源监控报警系统和时序列数据库(TSDB)。Prometheus 在2016加入 CNCF ( Cloud Native Computing Foundation )，作为在 kubernetes 之后的第二个由基金会主持的项目。 而这里的Prometheus是广义的概念，其包含了一系列组件，如下表： 1prometheus 2alertmanager //配置……
prometheus解决no datapoints found
prometheus进行接口查询时报no datapoints found的错误，排查步骤如下： 1、先直接选取执行的对象看下是否有数据 no-datapoints-found 发现有数据可以显示，证明数据采集入库不存在问题。所就可能是条件表达式写的有问题，通过排查发现条件表达式写的也不存在问题 2、时间同步问题 通过查询官方问题记录，发现有人也……