【TiDBer 唠嗑茶话会 60 】研发写了个 SQL 查询 OLAP 库,放到首页上了,因为早高峰登录的并发把 OLAP 库压死了,怎么措辞给领导汇报这件事?

事故情况:早高峰首页查询功能大量白屏
事故原因:未考虑SQL查询性能和并发对OLAP库影响,并发量过高导致雪崩
事故等级:P0
临时处理方案:由于使用TiDB,迅速扩容TiFlash节点,抗住并发 or 功能有下线开关临时下线
后续整顿方案:所有上线 SQL 均需经过审计平台审核,评估 SQL 性能及上线后并发

1 个赞