news 2026/6/12 1:21:27

k8s kube-prometheus-stack kube-state-metrics 指标时断时续 kube-state-metrics - write: broken pipe

作者头像

张小明

前端开发工程师

1.2k 24
文章封面图
k8s kube-prometheus-stack kube-state-metrics 指标时断时续 kube-state-metrics - write: broken pipe

问题描述

k8s 环境有天主机故障关机了很长时间,但是没有执行 kubectl delete node 【nodename】剔除节点,过了一段时间发现KubeNodeNotReadyKubeNodeUnreachable这两个告警在恢复和告警之间切换,这明显不正常,因为节点都已经关机,怎么可能恢复。

排查步骤

经过排查才发现是kube_node_status_condition{node="nodename"}这个指标时断时续(偶尔指标缺失),问题就是指标缺失造成的(指标缺失就认定为告警恢复)。

然后查看kube-state-metrics pod的日志发现如下错误,prometheus pod未发现错误日志。

E122007:28:28.0369131metrics_handler.go
版权声明: 本文来自互联网用户投稿,该文观点仅代表作者本人,不代表本站立场。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如若内容造成侵权/违法违规/事实不符,请联系邮箱:809451989@qq.com进行投诉反馈,一经查实,立即删除!
网站建设 2026/6/10 15:53:07

Linly-Talker在健身房会员管理系统中的集成应用

Linly-Talker在健身房会员管理系统中的集成应用 在现代健身房运营中,一个常见的尴尬场景是:清晨或傍晚的高峰时段,前台被团课咨询、储物柜使用问题和私教预约围得水泄不通。工作人员一边手动翻查排课表,一边重复回答“今天的瑜伽几…

作者头像 李华
网站建设 2026/6/10 12:38:33

Linly-Talker如何防止敏感话题触发不当回应?

Linly-Talker如何防止敏感话题触发不当回应? 在虚拟主播24小时不间断直播、AI客服随时响应咨询的今天,数字人正以前所未有的速度融入我们的日常生活。但你有没有想过:当用户突然问出一句“教我制作危险物品”时,那个面带微笑的数字…

作者头像 李华
网站建设 2026/6/9 17:47:11

Linly-Talker支持Markdown格式输入渲染吗?

Linly-Talker 支持 Markdown 格式输入吗?技术实现路径解析 在内容创作日益依赖结构化文本的今天,Markdown 已成为技术文档、讲稿撰写和知识沉淀的事实标准。它的简洁语法让创作者能够专注于内容本身,而非排版细节。当这类内容需要被转化为数字…

作者头像 李华
网站建设 2026/6/11 9:23:40

Linly-Talker如何防止重复回答相同问题?去重机制说明

Linly-Talker 如何防止重复回答相同问题?去重机制深度解析 在构建实时数字人对话系统时,一个常被忽视却直接影响用户体验的关键挑战是:如何避免对重复或高度相似的问题做出冗余回应。设想这样一个场景——用户因网络延迟未收到反馈&#xff0…

作者头像 李华
网站建设 2026/6/10 11:36:56

模块化多电平换流阀模块级等效运行试验研究

模块化多电平换流阀模块级等效运行试验研究 本文针对模块化多电平换流器(MMC)在高压大容量应用中的测试难题,提出了一种等效运行试验方法。通过分析MMC功率模块的工作原理,设计了主动充电策略和功率对推控制策略,构建了简化试验电路。该方法能有效模拟实际运行中的电压、…

作者头像 李华
网站建设 2026/6/11 14:16:48

Linly-Talker支持多国语言切换界面吗?

Linly-Talker 的多语言能力:从技术内核看全球化交互的实现可能 在数字人技术加速落地的今天,一个现实问题摆在开发者面前:如何让虚拟助手跨越语言障碍,真正服务于全球用户?这不仅是界面文字的翻译,更是一整…

作者头像 李华