集团站切换校区
图标

业界新闻

当前位置:首页 > >业界新闻 > >

提前揭秘阿里巴巴双11零点之战的关键技术

发布时间: 2017-11-09 14:40:07

  前言:在距离今年双11已经不到2天的这个时刻,一场看不见硝烟的战争早已打响。随着一年一度购物狂欢的即将到来,网络上出现了很多阿里技术应对双11的段子。“阿里工程师拜关公求服务器不宕机”,“技术人员围着被子敲代码”等传闻也被消费者们所津津乐道。那么,针对双11期间极为严苛的技术压力,阿里巴巴究竟是用怎样的方式进行解决的呢?在接下来的文段中,就让我们一起来对阿里巴巴在2017双11背后的技术进行一次细致的了解和探访。

大数据培训


  容器服务:云上资源助力亟速扩容

  在阿里云双11访谈容器服务专场中,阿里云容器服务高级专家戒空为大家介绍了阿里云容器服务以及容器镜像服务的基本情况和各自的优势所在,并且针对“双11”这样大流量的场景分享了容器技术和容器镜像技术的最佳实践。


  容器服务是阿里云在2015年推出的容器应用管理服务,对一千多家企业客户同时进行支持。其主要支持Docker应用的全生命周期的管理。在公有云上面整合了阿里云的虚拟化、存储以及网络等方面的能力,简化了用户在容器应用运维上的复杂性。不仅同时支持Swarm和Kubernetes。还提供了公有云和专有云两个版本,允许用户通过专有云的方式在自己的数据中里面构建一个完整的容器运维能力。


  双11期间,针对过于汹涌的流量冲击导致资源量不足的情况,容器服务可以做到最大化方便企业将原来部署在自己机房中的应用部署到云上,无需准备物理机器,也无需安装操作系统和依赖,只要拉下镜像直接运行即可,就这么简单。


  视频云:人工智能同视频产品迸发火花

  在阿里云双11访谈之视频云中,阿里云视频云产品经理沐暄和阿里云视频云产品经理王利军跟大家一起探讨如何更轻松的构建视频的全面能力。他们从视频生产、分发、消费三个环节来分享开发者更关注哪些技术点,以及阿里云能够为开发者提供怎样的计算能力。


  视频云是阿里云提供的一站式大视频解决方案。能够一站式的提供“海量存储、高效分发、极速网络”等优质而强大的服务,让用户轻松获得极高量级的传播能力。其广泛应用于游戏直播、娱乐直播、泛生活直播、教育类、远程医疗、企业远程视频会议等典型场景。


  针对视频生产环节,阿里云点播服务能够提供从视频的导入到短视频的拍摄、录制、图片处理、在线编辑、视频审核等全链路服务。窄带高清2.0的转码则可以令端到端的转码时效达到最高,同时也就确保了信息传播的最高时效。


  在视频直播场景下,针对内容解析、人脸识别、语音识别,视频大数据分析的探索能对客户的优化运营提供场景、端口、数据分析方面的全面支撑。


  在视频点播场景中,利用阿里云拥有强大的AI技术和海量资源支撑,视频云很好的实现了以视频为入口的智能化处理。稳定成熟的内容分析,兼顾美学和关键性的封面选图,精准的视频指纹分析和深度学习带来的高效审核都极大的提高了工作效率,从而令对大规模视频的无人化处理变成现实。


  中间件:为企业架构创造价值

  阿里云中间件对外服务已有很多年的历程了,也由此发展推出了很多的产品。在阿里云双11访谈之中间件专场中,阿里云中间件产品运营雁溪和阿里云中间件产品专家银时跟大家介绍一些中间件产品,分享中间件在企业架构中的价值。


  中间件最初是用于支撑阿里云自身的一系列系统,为了服务客户而对外开放。包括恢复框架、消息队列、实时监控、性能测试等一系列互联网中间件产品。在EADS平台的基础上提供了快速构建微服架构、应用开发、服务治理、高可用管控、限流降级等一系列功能。通过可视化平台,帮助用户分批次、可中断、有发布单的呈现方式,使用户能够快速进行大批量应用的部署。


  对于消息队列(MQ)的中间件,削峰填谷的功能也将在双11时期全力投入使用。这一组件的引入能够帮助在阿里云在流量高峰时平缓峰值、减轻压力,再将任务置于流量低峰的时段进行消费。为了确保其足够稳定,阿里云对每条消息都进行了三次备份,并完善了对持续消息、顺序消息、事物消息、定时消息等一系列消息类型的支撑。


  针对分布式里最关键的像数据库领域,阿里云DRDS分布式数据库产品一定是绕不开的。在整个中间件团队,对外推出了分布式关联数据库DRDS。该产品专注于解决分布式领域读写分离、分库分表、无线水平扩容等一系列分布式数据库问题和流量高峰期分布式上存在的问题。对业务透明友好,并能对特定业务提供个性化支持。


  最后,PTS压力测试也同样是一项优秀的性能测试领域产品。其将整个压测服务spss化。客户在公共云上不需要部署任何组件,只需提供整个应用的入口就能快速使用压测服务。并具备指令测试丰富,流程进展快速,模型自动化分配等特有的优势。


  云存储:面向对象,面向文件

  在阿里云双11访谈云存储专场中,阿里云对象存储OSS产品经理周皓、阿里云文件存储NAS产品经理王登宇共同为大家介绍了以对象存储OSS和文件存储NAS为代表的阿里云存储系列产品的优势以及各个产品的适用场景。


  在阿里云的存储业务中,对象存储OSS和文件储存NAS可以说是自家内部的当家花旦。其中,对象存储以面向互联网,数据海量,高安全性、经济性、数据可靠等特点为人称道,文件存储则因其强大的性能和对大容量、多协议的支持而受到用户的广泛好评。


  OSS的应用场景主要有三:针对图片和视频的多媒体存储、大大简化的数据备份归档过程、结合计算平台从而挖掘数据价值。对多媒体从业者来说,OSS的上下行具备的弹性伸缩能力可以让他们对业务高峰的大量并发请求进行有效的处理, 其自带的签名机制不仅确保了数据的安全性,同时也减轻了用户服务器的负担。


  NAS则有所区别,作为针对分布式的文件存储业务,其可以利用计算和文件存储的弹性解决特殊行业大数据量计算的痛点,并给予用户短时间训练AI模型的能力,做到高性能存储和文件可共享访问的并行不悖。


  ECS:弹性即是计算的特性

  在阿里云双11访谈之ECS弹性计算专场中,阿里云ECS弹性产品专家藏晖和阿里云ECS弹性计算产品运营专家夏能为大家简单介绍了阿里云新近发布的ECS新产品以及新产品的形态特点。


  2017年,阿里云不仅完成了ECS企业级产品的发布,而且完成了一次软件和硬件的数据迭代,推出了新一代硬件架构和软件架构产品,通过对现有功能和产品形态优势的持续优化和挖掘,将弹性发挥到了极致。


  简单来说,弹性是整个弹性计算产品中一个最大的亮点。它体现在两个方面,一是资源唾手可得、二是按量付费。用户无论什么时候想要计算资源都能拿到,时间上是很弹性的。同时,由于完全根据使用量来计费的,所以付费方式也是很弹性的。对用户来说,无论在业务承载能力上还是在成本构成上,这都是一项极大的提升和优化。


  数据智能:我就是智能城市的大脑

  在阿里云双11访谈之数据智能专场中,阿里云交互设计师梓铭、阿里云人工智能资深产品运营席嘉和阿里云DataV资深产品运营苇如为大家简单分享了数据智能的应用,介绍了阿里云新近发布的产品ET城市大脑以及它所用到的技术支撑和在其他领域的应用。


  ET城市大脑可谓是阿里云展示的众多黑科技中耀眼的一项。杭州大脑的上线使高架道路出行时间节省了四点六分钟,解决了高峰时段的城市拥堵问题,还让萧山120救护车到达急救现场的时间减少了一半。


  在城市大脑的背后,必然离不开数据采集整合以及算法应用的技术支持。ET城市大脑将散落的数据汇合在一起,例如公交线路数据、高德地图数据、车辆的GPS数据等,同时跟企业、公安、政府、运营商等多方收集的数据汇集,借助记忆学习和人工智能算法,通过视频识别交通事故和交通拥堵状态,再融合警察接警数据,对城市进行全面多发的感知。构筑出一座基于数据驱动的3D城市,并将其微缩模型投放在屏幕上。这不仅非常炫酷,也为城市治理者提供了一个更加友好、人性化的态势监控界面。


  ET城市大脑分为三大块:数据整合层、记忆学习和智能算法层、应用层。并形成了城市大脑这一产品化的输出框架。在行业内部,ET有智能语音,人脸图像,OCR(光学字符识别)等智能产品。包括语音方面的实时文本转换,智能法庭/语音智能客服;身份验证场景的实名认证、人脸检测、图像场景打标、图片鉴黄;印刷文字领域的身份证,驾驶证,行驶证,工商管理证等的文字识别等广泛的应用。并能够利用dataV数据可视化神器提供数据展现,以满足城市、各级大小企业和机构日常业务展示以及业务监控的需要。


  MaxCompute:快速架构大数据仓控

  在阿里云双11访谈MaxCompute专场中,MaxCompute资深运营专家祎休为大家简单介绍了阿里云的MaxCompute平台的基本情况,并且为大家分享了MaxCompute如何帮助用户快速架构大数据仓控的。


  MaxCompute是一项大数据的计算服务,它能够为企业提供快速、完全托管的TB/PB级数据仓库解决方案。MaxCompute向用户提供了完善的数据导入方案以及多种经典的分布式计算模型,能够更快速的解决用户海量数据计算问题,有效降低企业成本,并保障数据安全。


  MaxCompute的应用场景可以大致分为三种:基于MaxCompute搭建企业的大数据仓库、机器学习、和基于加工后的数据实现个性化推荐。其具备强数据安全,从数据访问到最终的数据加工和处理,都能够实时地通过实名认证体现出用户的真实身份。


  迄今为止,MaxCompute在传统行业、互联网行业以及初创公司中都有很多成功应用的案例,比如墨迹天气、集团内的菜鸟网络、蚂蚁金服等,外部的新浪微博、ofo小黄车、美柚、天弘基金、众安保险以及金立手机等都在使用MaxCompute作为自己的大数据服务。


  Elasticsearch:定制化大数据解决方案

  在阿里云双11访谈Elasticsearch专场中,阿里云大数据Elasticsearch资深产品经理洪阳为大家简单介绍了阿里云Elasticsearch的基本情况,并且分享了阿里云Elasticsearch的优势以及在日志处理分析、搜索以及安全等领域实际应用。


  阿里云· Elasticsearch是基于开源Elasticsearch及商业版X-Pack插件,致力于数据分析、数据搜索等场景的一项服务。其在开源Elasticsearch基础上提供企业级权限管控、安全监控告警、自动报表生成等功能。


  作为基于开源项目的大数据服务,Elasticsearch产品不仅本身与开源社区完全兼容。还提供了Kibana以及X-Pack这样商业化插件的预置,以及ik等分词插件提高用户体验。相对于企业进行自建,阿里云Elasticsearch能够节约大量的运维和部署成本。并能获得来自Elasticsearch 24小时不间断的稳定技术支持。


  总结而言,阿里云Elasticsearch产品有三个亮点:功能更加丰富、成本更加低廉、能够提供更多服务支持,从而完美解决用户在日志分析场景下各种各样的诉求,并最终被应用于安全,搜索等多个领域。


  双11大促来啦,这些技术你想不想拥有呢?

  惊不惊喜?没想到吧,“双11购物节”不仅是消费者买买买的狂欢,也是阿里巴巴内部的一场技术盛宴,背后有着多样而稳定的各类技术进行保障。你想不想拥有这些技术呢?容器Docker、中间件、云存储、弹性计算、数据智能分析、数据仓库、大数据,想学的到腾科来,这些技术通通有!快到腾科来储备技术能量吧,丰富的技术资源和优惠的价格相得益彰之下,你还等什么呢??!


上一篇: 选Oracle培训有门道,Oracle认证哪个机构好

下一篇: 创建一个数据库需注意哪些原则

在线咨询 ×

您好,请问有什么可以帮您?我们将竭诚提供最优质服务!