天猫双11压测现场直击工程师说比往年轻松

2019年05月15日 来源:

双 11 这个关于购物的狂欢节,到今年已是第九年。从 2009 年的 5000 万元到去年(2016)的 1207 亿元销售额,不到十年时间,它见证了中国人消费习惯的迁移。这背后,是移动互联崛起、消费升级、服务业转变等多层面的巨大变化。

这一场几近是全民参与的规模的络盛会背后,紧贴的是和我们生活近的场景之一购物。如果你参与过多年双 11,或许会对曾的服务器拥堵、环节不流畅印象深刻,而现如今,这样阻碍「买买买」的情况却越来越少。这背后让人好奇的就是,双 11 是怎么变成现在这样的?

带着这个疑问,双 11 前夕,极客公园前往宁波海关、保税区仓库和阿里巴巴技术部等重要环节,采访到在双 11 前进行「压测」的工作者,听他们聊了聊在大家纵情买买买背后的秘密。

看不见的争分夺秒

压测,全称压力测试,是对系统进行针对性测试,以此发现和解决问题,为正式活动做好准备。通俗点说,就是实战演练,「磨刀不误砍柴工」。

极客公园来到的站是宁波海关,这里是目前全国跨境物流包裹量的进口口岸之一。在历年双 11 中,这里承担了全国将近 50% 的跨境包裹量。面对当今日益完善的跨境电商业务,今年双 11 能否处理更海量的包裹单量申报,就成为其压测的目的。

「现在日平均处理单量大约是 10 到 20 万单,如果依照综合预测今年双 11 真的有 700 万单,就是平时的 30 多倍。」宁波海关技术处刘阳科长介绍,相比去年 双 11 不到三百万单的量,今年压力的确很大。

有海淘购经历的用户应当比较清楚,在购买海外商品后,海关要对入境货物进行审核,完成备案,这一环节中,地方海关要在初次审核后进一步上报至海关总署,经过总署审核后才能够进行下一步动作。因此在面对双 11 这样的大型线上交易活动时,对于系统的考验更加巨大。而对于电商企业来讲,要想让境外商品更快更高效送到用户手中,也需要和海关默契配合。

从九月份开始,宁波海关就和阿里巴巴对接,阿里巴巴会生成上百万份虚拟申报单,以测试海关系统能否在短时间内处理通关,并且顶住峰值压力。这1进程可以发现系统需要多长时间处理完大量数据、哪些环节比较慢等问题。经过十月份的轮准备,目前宁波海关已经可以在 24 小时内处理 700 万左右的单量,这意味着双 11 当天,即使大家都从海外买买买,海关处理起来也不会慢。

从海关采访结束,我们来到宁波保税东区的跨境电商专用仓库。虽然还有二十多天才到双 11,但这里 30 多个保税仓库很多都已经堆满货物,货车进进出出,工人们忙着理货、贴码、上架、包装等工作。

宁波保税区海关物流监控科科长孙长伟告知极客公园,再有一个多星期,这些仓库应该就能完成所有备货上架,预包装工作也将基本完成。根据预测,今年宁波关区 700 万单的包裹量中,保税区将达 560 万单以上,这些货物预计可以在 10 天内全部完成发货。

但仓库的压测和别处不同,仓库管理人员告知我们,在双 11 来临前,仓库也会进行实战演练来测试短时间内处理货物的能力。白天先将货物积累起来,到晚上十二点再集中处理,并预测包裹处理能力,发现其中可能出现的问题,包括人员效力,也包括机器是否正常运转等。

这和平常有所不同,平时用户白天的订单包裹,会在下午四点前发出,四点以后的包裹会在第二天早上发出,到双 11 这天,所有包裹都是晚上十二点下单之后就开始上线发货,所以考验的就是十二点以后的处理能力。

仓库管理人员告知极客公园,用户下单以后,仓库在半小时以内就会接到物流信息,而宁波保税区的海外商品提早已经准备就绪,所以相比过去,如今即便是在双 11 期间人们大量购买的海外商品,出货时间也和国内商品基本相同,到收货点不会超过 10 天。

人变少,压力却变小了

每年双 11 这一天的零点,大量用户会进入阿里平台,选购商品。这里包括的不但仅是不同地区用户复杂的使用习惯,同时也需要电商/海关/银行/物流等各方面的快速协作,从这一层面来讲,即便双 11 已到第九个年头,也依然会有挑战。

「当流量大的时候机器性能会达到一个瓶颈,突破这个瓶颈就会影响用户体验,引发一系列异常。」

经历过八年双 11 的天猫双 11 技术大队长霜波告诉极客公园,系统要处理几亿用户同时下单,要保障这一点是很难的,所以压测这件事从次双 11 开始做到现在。但初几年的压测是下,之后发现线下压测很难找到线上的问题,因为线下压测要另外搭一套系统,这套系统里的机器/容量都和线上很难匹配,所以到 2013 年,阿里做了线上全链路压测,技术人员会模拟双 11 当天用户所有行为,直接上机器去下单。和线下压测相比,线上压测依照链路走,这个链路可以很深很深。

「比如你在淘宝下一个单,然后可以马上支付,可以发出物流单,然后商家就可以立即操作发货,这就可以看作一个完全链路,我们可以把这个链路完全走完。」天猫双 11 稳定性负责人叔同表示,之前压测时,要对系统一个一个压测,以后会知道哪一个部分该加服务器,哪个该扩容。但这种分而治之的策略像堆积木一样,不牢靠。如果一个运用和后面三个有关系,那联系起来就会出很多问题。

「全链路就是把一整套串起来压测,把支付宝/菜鸟这些也都串起来,打通消息交互和服务调用,都可以直接测试。这样能够达到跟双 11 类似的压力环境。我们年做全链路压测发现五百多个问题,后来分析过,如果这里面有两三个问题爆发,整个双 11 就是失败的,但通过这样的机制,能让它把问题提前暴露提前解决。」

从 2013 年开始,全链路测试为双 11 当天解决了很多问题以后,到今年,阿里开始尝试的,是如何能在效率提升的基础上,让更少的人,投入更少精力去参与双 11 测试,所以就有了「尖兵计划」,让机器代替人去解决一部分压测问题。

「我们上,白天会有百分之五十的量跑真实用户,另外隔离出百分之五十的量去跑压测数据,这样就能自动去跑压测数据,也不会对线上造成影响,今年尖兵计划中,我们提早发现了一些系统 bug 还有硬件资源 bug,所以到晚上压测时压力就更小一些。」

霜波表示,之前的压测都在晚上进行,为了不影响用户使用,去年双 11 前工程师对系统进行了 8 次压测,而今年通过模型上新的算法,加上大数据的分析,压测实际上在白天就自动完成了一部分,而另外一部分也帮工程师解决了很多问题。10 月 20 日晚上,一轮新的压力测试开始,当屏幕上的数据突破某一峰值后,曲线出现了一次小幅度的下跌,几分钟后,数字又恢复了安稳,看似普通的压测,却和往年有所不同。

「刚才我们的1台机器就出现了过载,分配到这台服务器的订单都出现了交易失败的情况。如果是去年,就能听到有人说,要把这台机器下线,但是今年你会发现这个进程是自动的,系统自动发现了这台服务器的问题,自动把它下线,修复问题之后会自动把这台服务器重新上线。」霜波表示,像这样的人工决策点,今年有一半都交给了机器,压测的次数也从 8 次减少到了 3 次,「工程师的工作量减少了 30%,轻松很多。」这不仅仅是减少工程师熬夜,也是自动化算法的优势。

压测不断改进也在提升着双 11 当天的峰值处理能力,叔同表示,在 2015 年双 11,系统峰值处理能力是 8.6 万次/秒,到 2016 年就达到 17.5 万次/秒,虽然今年双 11 具体情况尚不可知,但至少在压测当中,系统的自动调配处理能力在不断增强。

在我们能够感知的维度,大多数人看到的双 11 仅仅是一次普普通通的购,可当互联用户群愈来愈大,上购物的行动越来越普遍时,要怎样连接各个环节,让所有人都能感知到体验升级,怎样确保大量用户参与也不至于出现问题,这里面不仅仅是不同领域的协作,也是技术的进步。而当你再下单参加双 11 狂欢时,也许会有更进一步的体会。

月经量多会造成什么后果
来月经有血块肚子痛
月经量多有什么影响
相关文章
  • 香煎杏鲍菇的做法
    香煎杏鲍菇的做法

    香煎杏鲍菇的做法当菜 零食 佐粥小食都相当不错 感觉是一个吃出了肉味的菜 这菜为什么会出现在减肥食谱我也不清楚 总之我从没说过这能减肥瘦身 想减肥瘦身的亲们略过吧难度:切墩(初级) 时间:10~30分钟主料杏鲍菇鸡蛋面粉盐椒盐 香煎杏鲍菇的做...

  • 高校按BMI指数分派床位190斤门生不消担忧梯子塌了
    高校按BMI指数分派床位190斤门生不消担忧梯子塌了

    高校按BMI指数分派床位 190斤门生:不消担忧梯子塌了央广北京9月2日动静 据中国之声《消息晚岑岭》报导,本年新学期,河海大学常州校区的大一重生将依照BMI指数分派床位,BMI指数就是身材质量指数,体重轻的孩子睡上铺。身高1米73、体重靠近190斤的张同窗,得知...

  • 周五晚间私募传闻集锦大牛股初现端倪
    周五晚间私募传闻集锦大牛股初现端倪

    今日私募传闻双汇发展:明年将会重点培育次新产品老板电器:智能产品将在明年上市现代投资:正积极开拓土壤治理业务岭南园林:暂无进军高科技产品的意愿ST生化:对双林老厂区暂无处置计划顺络电子:目前磁片产能正常塔牌集团:新型材料等项目在推进中先...

  • 四川渠县10天内遭3次特大洪峰袭击58万
    四川渠县10天内遭3次特大洪峰袭击58万

    四川渠县10天内遭3次特大洪峰袭击 58万人受灾新华成都7月11日电(黄毅)11日17时从四川省达州市有关部门获悉,达州市渠县11日再次遭遇渠江特大洪峰袭击,渠江渠县城区段超警戒水位3.7米,县城及40个乡镇场镇部分街道进水,全县紧急疏散、转移安置22.68万人。  ...

  • 八旬老人走失两日众人助送他安全回家
    八旬老人走失两日众人助送他安全回家

    闽南10月10日讯 前日下午4点多,泉州鲤城区展览城外的台阶上,熊女士发现一位迷路的老人,因为语言沟通不畅,只好向警方求助。为了让老人尽快回家,民警连夜帮其寻亲。昨日上午10点,老人终于被女儿接回。“8日上午8点的时候,我看到老人坐在那里,以为是在...

  • 武汉南宁均传限购松绑或取消政府救市的开始
    武汉南宁均传限购松绑或取消政府救市的开始

    不过,上述微博在发布半小时后即被删除。随后21点27分,央视财经官微博做出更正声明,称经上海房管局副局长庞元证实松绑限购消息为谣传,上海限购松绑并未官方发文,目前上海市相关调控政策并无变化。同日下午,武汉亦再次传出取消限购的消息,据消息人士...