暂无搜索历史
如果你的备份依赖同一个云账号、同一个身份系统、同一个网络、同一个 DNS、同一个 KMS……
CPU 直接干到 100%,数据库连接池耗尽,Redis 开始抖,消息队列堆积,接口响应时间从 200ms 变成 20 秒。
谁批准?什么时候做?影响哪些服务?实验失败怎么办?谁负责回滚?实验结束后有没有恢复?结果有没有留下证据?下次还能不能复现?
做运维这些年,我越来越觉得一件事挺有意思:有些系统,平时监控面板漂亮得很,CPU 不高,内存不满,接口响应也很快。可一旦 Redis 出点问题、下游接口卡上几秒...
做运维这些年,我发现一个挺有意思的现象:有些团队平时把高可用挂在嘴边,架构图上画着多副本、负载均衡、自动故障转移,监控面板也挺漂亮。可真到了某个 Pod 挂掉、...
做运维这些年,我越来越觉得一件事:很多团队不是不知道系统需要稳定,而是不知道,为了稳定到底应该牺牲多少业务速度。
做运维这些年,我越来越觉得一件事:生产环境里的变更,最怕的不是审批少,而是审批流程看起来很严谨,真正出事的时候却没人知道该怎么办。
做运维这些年,我越来越觉得一件事:系统真正的可靠,不是永远不出错,而是出了错以后,你知道哪里出了问题、哪些数据受到了影响,以及怎样把它安全地恢复回来。
做运维这些年,我越来越觉得一件事:判断一个系统靠不靠谱,不是看它平时跑得有多快,而是看流量突然翻几倍时,它能不能有条不紊地活下来。
CPU 100%、接口 502、数据库连接池耗尽、消息堆积……值班同学第一反应往往是:先把服务重启了再说。
接口 P99 从 200ms 飙到 5s,错误率一路上涨。值班同学冲进群里,开始查日志、重启服务、扩容、回滚。
最后大家发现:真正的问题不是没人知道怎么处理,而是知道的东西根本没有变成可以执行的东西。
很多公司都知道 SLO 很重要,但真正让他定 SLO 的时候,最后往往变成一句话:
你以为自己是在排查故障,实际上可能顺手把手机号、身份证号、邮箱、Token、Cookie、用户地址、订单信息、支付信息,甚至整个请求体,都复制到了自己的电脑、群...
我是 Echo_Wish,关注我,聊点真正落地的 AI、Python、云原生、DevOps 和数据平台实战。
很多公司一看到 Spark、Flink、Hive、Trino 作业跑得慢,第一反应是什么?
Kafka、Flink、Spark、Hive、ClickHouse、Doris、Elasticsearch、对象存储……一个个都接进来了。
今天我们就聊聊,时序数据库到底在监控系统里干什么,以及 Prometheus TSDB 到底是怎么通过压缩,让几十亿个监控数据点不至于把你的硬盘吃光。
所以生产环境更推荐使用 Vitess Operator 或官方生态提供的 Kubernetes 管理方式。
暂未填写公司和职称
暂未填写学校和专业