19时25分00秒之后,断崖式下降。
抖海、头条、洋柿子小说以及公司其他国内业务中,来源地被IP地理库、运营商接入信息和客户端定位共同识别为西安的在线请求量,在短短两秒内同时归零。
赵宝明脸上的困意瞬间消失,一下子清醒了,
“可可,把时间窗口拉到一分钟。”
陈可已经在操作。
一分钟粒度展开成秒级数据。
19时24分58秒,正常。
19时24分59秒,正常。
19时25分00秒,大规模连接断开。
19时25分01秒,QUIC会话数量骤降。
19时25分02秒,TCP存量连接快速清空。
19时25分03秒,西安区域新建连接数接近零。
19时25分05秒以后,只剩下极少量因IP地理库误差被标记为“西安”的请求,还在零星跳动。
陈可皱起眉,“啥情况,看着不像机房故障啊。”
赵宝明把咖啡放到一边。
如果只是字节某个边缘节点发生故障,流量应该按照调度策略迁移到邻近节点。DNS调度、AnyCaSt路由以及运营商侧的流量工程都会让业务出现时延升高、回源比例上升或者局部丢包,却很难让一个千万级别人口城市的终端请求同时消失。
更何况消失的不只有视频业务。
后台统一可观测平台已经开始连续报警。
陕西西安区域活跃设备数异常。
西安区域边缘缓存节点可用性异。
一条接一条。
几十秒后,报警被自动聚合,严重等级开始上调。
坐在另一排的网络工程师宋文泽突然叫了一声。
“赵哥,过来看这个。”
赵宝明走过去。
宋文泽屏幕上打开的是网络侧数据。
移动、电信、联通。西安区域全部出现异常。
宋文泽把BGP监控页面调出来。
“陕西相关公网前缀大部分还在路由表里,没有发生大面积撤销。上游AS也正常。也就是说,从互联网的路由控制平面看,这些地址很多仍然‘存在’。”
陈可站在两人后面,接了一句,“可没人用了。”
办公室安静了下来。
19时26分11秒,周启明拿起内部电话。
“值班经理呢?”
“会议室。”
“叫顾航过来。”
不到一分钟,基础设施值班经理顾航推开门。
相邻推荐:金娘娘的旧手机和那本免费小说 秘密情书[GB] 百鸟朝凤 疯了吧!你管这叫反派? 我的姑母是马皇后 旧书扉页上的金花瓶楷梅花2陈圆圆小说 柚昕 夜明珠小说最新章节列表_孟欣然著:凌晨刷新页面的人 青沫 挽红楼之玉亦狂(奇幻)_全文阅读:玉裂那夜黛玉簪尖带血 隔间星海:awm于炀和祁醉厕所补肉怎么样_佚名奇幻 邪恶数字四十九 玻璃尾巴by听鹿笔趣阁无删减 七宗罪 夜班第七十三页:陆故之与《为医消得人憔悴》 占座占出个男朋友?这大学校园1V1甜宠文太上头 罪夜 钟楼换卡那一夜:《缔造者卡能量》最新更新读来手心发凉 在抹布文里当漂亮炮灰[穿书]奇幻 - 在抹布文里当 LOL:这个打野有亿点强 绝对利维坦 大雾by颜凉雨笔趣阁无弹窗 《每天醒来多一亿,我却快秃了》 小宁旅行记 BOSS她一心想死 意外成名之后结局_棺棺_无弹窗——棺棺没死,他锁了正版最后一章 全民异能 潮囚暗律:暗潮源起 经典游纪 诡异e学园 末世狼行天下