API加速的业务逻辑实例分析

　　一天清晨，我被一个客户电话惊醒，客户异常焦急，寻问CDN能不能帮助他们解决“秒杀”的问题，他们昨天刚刚进行了“整点秒杀活动”，结果并发量过大，导致服务宕机，用户投诉。

　　为了理清思路，我问了对方三个问题：

　　（1）服务宕机的表现是什么？

　　（2）业务的基本架构什么样？

　　（3）秒杀的峰值并发到多少？

　　顺着这些线索，我们先一起还原了应用场景：

　　某电商业务架构图

　　该公司是一家P2P理财网站，常有用户在整点抢购高利率理财产品的“整点秒杀活动”。如上图所示，终端用户请求先通过前端负载均衡，然后到达运行实际电商逻辑的Web Server；再下层是运行在VM上的8台Redis，负责存储与业务相关的Cache数据，如用户Profile、理财产品信息、用户账单信息等。实际落地数据存储在MySQL中，该MySQL只进行了简单的分库分表及读写分离。

　　进行“秒杀”时，先由风控和运营人员选好理财产品，然后标记到数据库中；活动开始由产品人员放开，终端用户抢购。

　　该公司的业务主要来自移动端，平时流量较少，但“秒杀”活动时会瞬间产生大量流量，峰值并发达到10万以上（其中可能包括bot），如此大的并发主要是集中在以下两类接口：

　　对于理财产品的刷新接口，类似GET /get_fprod.php？uid={$1}&pid={$2}&sid={$3}，此类接口的请求量最多，占比90%。

　　对于理财产品的下单接口，类似 GET /order_fprod？uid={$1}&pid={$2}&oid={$3}&sid={$4}，此类接口的请求量较少，占比不到1%，但存在大量504超时。

　　其中uid是用户ID，pid是理财产品ID，oid是订单号，sid是随着客户端用户变化的随机token标识。

　　场景解读

　　根据与客户沟通得到的场景，初步得到了以下结论：

　　（1）客户以移动业务为主，产品通过API在客户端渲染UI，产品中几乎没有静态资源，带宽流量不高，传统CDN无法达到卸载压力的作用；

　　（2）秒杀时，产生大量502/504超时请求，说明此时用户请求已超过服务端的业务承载能力，急需扩容。

　　基于以上两点，我没有建议该公司采购CDN服务，而是推荐服务扩容，但随着我方对于业务更深层次的分析，逐渐发现了一些诡异的事情。

　　“诡异”现象

　　（1） 数据库主从负载极不均衡，通过MySQL管理工具，发现主库的Query量高达80%；

　　（2）Redis Cache节点负载极不均衡，通过查看redis info发现，秒杀时，其中一台Redis请求量极大，占比达90%以上，其他Redis请求量却很低。

　　上述反常现象激起了双方技术人员的兴趣，这也许就是问题的关键！随着分析深入，第一个现象的原因浮出水面：该公司在使用数据库时，并未如某些大型电商平台一样使用数据库中间件层进行MySQL请求的路由分发，而是在业务代码端，使用语言层面的框架完成读写分离工作。这带来了两个弊端：

　　程序员绕过语言层框架开发，并未真正实施读写分离；

　　产品人员要求展现效果实时，倒逼开发人员修改业务逻辑，会牺牲读写分离，使数据都在主库读写。