图片-稻子网
图片-稻子网
图片-稻子网
图片-稻子网

淘宝服务器被攻击-异地多活 自研数据库 阿里双11的黑科技

【环球科技报道】2015天猫双11全球嘉年华拉开帷幕,阿里巴巴工程师又开始忙碌起来。在努力保障全球“剁手”顺利购物的同时,他们还将在双11上验证多项突破性技术,向世界展示阿里巴巴的整体技术实力。

阿里巴巴双11技术总指挥刘振飞表示:“双11不仅是全球消费者的狂欢,也是对中国互联网技术体系实力的考验。顿时数以千万计的人蜂拥而至,买买买。业务场景全球仅一年一次。阿里巴巴的技术人员非常幸运,能够用世界一流的技术创新来支持世界一流的经济现象。”

异地多活:1000公里外换飞机引擎

去年双11,阿里巴巴打造了全球首个“远程直播”交易系统,但今年又取得了更大的突破:在支付宝等高度复杂严密的金融体系中,可以实现“远程直播”。 1000多公里的主动”能力。

“多活动异地”已经超越了传统的两地三中心等容灾理念。可以实现多地数据中心像一个数据中心一样工作。即使数据中心出现故障,双11在线服务仍能快速恢复正常运行。.

“数据中心的切换必须在用户没有感知的情况下进行,就像更换正在飞行的波音747飞机的发动机一样,不仅不能影响飞行,而且飞机上的乘客也感受不到。” ” 目前淘宝服务器被攻击,阿里巴巴支持双11的多地数据中心最长距离已超过1000公里,这意味着阿里巴巴具备在全国任意节点部署系统的能力。

公开资料显示,全球仅有少数几家互联网巨头能够实现异地多种直播技术,例如。但是,两者的搜索和社交场景对数据同步的要求远低于交易和支付场景。“如果你账户里的钱无缘无故有一个零或一个零,后果很严重。”

图片[1]-淘宝服务器被攻击-异地多活 自研数据库 阿里双11的黑科技-稻子网

与此同时,阿里巴巴也在逐步开放这个过程中积累的技术。例如,通过阿里云数据传输产品()对外开放了解决多点长延时数据同步的技术,让云用户轻松实现远距离、毫秒级的异步数据传输。

: 双11背后的中国自研数据库

今年双11核心交易流量将100%由金融级海量数据库承载。这一事件将对全球IT行业格局产生深远影响。

由阿里巴巴自主研发,是中国第一个拥有自主知识产权的数据库,也是全球第一个用于金融服务的分布式关系数据库。

2010年诞生,2014年支持10%双11交易流量。 今年6月,互联网商业银行开通,底层数据库全部采用,成为首家彻底摆脱商业数据库的金融机构. 在等待美国金融机构的同时,他们仍然主要依靠等待。

与传统数据库相比,系统维护不需要昂贵的共享存储设备和高性能服务器,还可以节省数据库软件许可费用。与常用的商业数据库相比,成本不到一半。同时,分布式系统可以更好的应对双11:弹性等大流量的冲击,可以保证大促前一键扩容,大促后一键收缩。

图片[2]-淘宝服务器被攻击-异地多活 自研数据库 阿里双11的黑科技-稻子网

同样,明年也计划通过阿里云的公有云计算平台对外开放。

一键建站:90分钟重建淘宝天猫

每年双11,为了应对巨大的流量冲击,阿里巴巴需要搭建淘宝、天猫交易单元,与原有系统“合作”,疏散流量,减轻系统负担。

过去,一套交易单元的重新部署,至少需要提前一个月的准备。今年的双11,由于采用了“一键建站”技术,这个耗时费力的庞大工程可以在90分钟内自动完成。

一键建站是指在基础设施具备的情况下,通过阿里巴巴自主研发的自动化软件,部署上百个中间件、数据库、商品交易系统、商品展示系统等电子商务核心系统。. 整个过程一键完成,基本无需人工干预,所需时间不到90分钟。

算力输出:商户每天可处理400万个订单

图片[3]-淘宝服务器被攻击-异地多活 自研数据库 阿里双11的黑科技-稻子网

今年,阿里云将继续通过聚食为双11商家提供充足的算力。基于阿里云平台打造的聚食,预计今年双11订单处理率将超过99%,可支持单个天猫商户日处理订单超过400万笔。

从2012年开始,聚食推出了基于阿里云的一整套解决方案,服务于天猫和淘宝平台的服务商和商家。巨石塔部署在阿里云的远程数据中心。安全条件、稳定性、性能远超商业环境和传统IDC。它有针对设备故障、网络和停电的应急计划。

传统模式下,商家在做促销时需要扩展服务器。小卖家得去电脑城买几台机器带回家。大卖家需要临时寻找IDC资源。处理好推广节点后,业务量下降淘宝服务器被攻击,服务器再次闲置无用,造成大量浪费。有了,商家可以随时在线扩展自己的服务器资源,想用就用几天,用完再收回,低碳、环保、省钱。

2014年,聚下达处理了96%的双11订单,没有任何失败或遗漏的订单。2015年,通过云计算系统的优化和中间件能力的运用,服务商应用系统整体性能较上年提升62%,可支持单个商户日常订单处理能力更多超过 400 万。

金融云架构:日支付处理能力达10亿

据介绍,支付宝已在技术上升级为金融云架构,可支持日均超过10亿的支付处理能力,具备金融级“异地多行”容灾能力。

图片[4]-淘宝服务器被攻击-异地多活 自研数据库 阿里双11的黑科技-稻子网

与支付宝合作的200多家银行一直是双11支付保障的主力军。今年各银行的系统容量在去年双11的基础上翻了一番。从8月份开始,各家银行逐步对扩容系统进行模拟实战的高强度压力测试。压力测试涵盖从用户初次购物到创建交易、接入收银台到最终支付的整个环节,确保包括基础设施、业务系统、银行渠道在内的整个系统能够稳定支持惊人的支付双11高峰。

ODPS:数据狂欢背后的超级计算引擎

“整个天猫双11,几乎你看到的一切都是由算法决定的。” 在数据科学家眼中,双11是无数“0和1”和上千套算法的叠加。这是一场以机器和数学公式为主导的全球购物狂潮。

今年双11,无线交易将占据主导地位。如何利用阿里巴巴存储的数百PB数据,在小手机屏幕上为用户打造更智能的购物体验?这一切都将通过阿里云自主研发的大数据处理平台ODPS进行计算。

今年双11,淘宝、天猫、支付宝、菜鸟等所有大数据处理任务都将由阿里云ODPS完成。在刚刚结束的2015世界排序大赛中,阿里云ODPS用377秒完成了100TB的数据排序,打破了Spark之前1406秒的记录,一举刷新了4项世界纪录。

此外,ODPS的实时计算系统有望在双11当天处理数万亿条消息,并且正在通过阿里云逐步开放这一能力。

图片[5]-淘宝服务器被攻击-异地多活 自研数据库 阿里双11的黑科技-稻子网

借助ODPS的大数据和实时计算能力,淘宝和天猫正在尝试让商家根据消费者的实时位置推荐产品。比如,外国游客来西湖游玩时,不妨推荐一些杭州的特产。

dataV:实时触摸数据世界的脉搏

面对阿里巴巴的海量日常交易,如何准确把握数据脉搏带来的趋势也成为一大挑战。对此,阿里巴巴开发了dataV数据可视化引擎,完全基于Web技术,可以快速、低成本地部署。用于内部商品、交易、支付、数据中心等的可视化呈现和管理,帮助实现更精准的控制。

2013年以来,双11交易数据大屏成为嘉年华直播的重要窗口,而在2015年全球嘉年华上,这块巨大的数据屏也将以实时动态可视化的方式移植到水立方双11的数据魅力将向全球用户现场直播。

据悉,在水立方数据大屏上,数据可视化引擎可以利用技术从宏观角度全方位展示双十一平台整体交易订单的实时流向,或可以通过便捷的交互方式深入到城市层面,进行微观人群的引导。肖像分析。

目前,该技术已计划通过阿里云进行输出,即将推出标准化产品。

© 版权声明
THE END
喜欢就支持一下吧
点赞0 分享
评论 抢沙发
头像
欢迎您留下宝贵的见解!
提交
头像

昵称

取消
昵称表情代码图片