[资料]

阿里云MaxCompute，用计算力让数据发声

2018-1-22 17:45:51 3664 机器学习大数据架构

0 摘要：计算的价值绝不止计算本身，而是让本不会说话的数据发声。从*到圆周率，从万有引力定律到二进制，从固化的物体到虚拟的思维都由数据注入。阿里云大数据计算服务MaxCompute以技术驱动产品，用计算力让数据发声。计算的价值绝不止计算本身，而是让本不会说话的数据发声。从*到圆周率，从万有引力定律到二进制，从固化的物体到虚拟的思维都由数据注入。阿里云大数据计算服务MaxCompute以技术驱动产品，用计算力让数据发声。阿里云大数据计算服务MaxCompute原名ODPS，是阿里巴巴的主力计算平台。从ODPS到MaxCompute，记录了阿里巴巴大数据平台从支持阿里集团几乎99%的数据存储以及95%的计算，到支持公共云和专有云客户业务的演化过程。MaxCompute用技术的不断创新实现计算力的持续提升，成为各行业客户数据化转型的强有力引擎，帮助企业将潜在的数据价值转变为实际行动、规划和决策，使客户自身的价值获得新的爆发，真正把MaxCompute卓越的计算力转化为巨大的社会效益和市场价值。作为提供快速、完全托管的PB级数据仓库解决方案的大数据计算服务，MaxCompute看似高冷，却也早已深入到生活中的各个场景，正持续不断的为绿色出行、天气预测、健康生活、精准医疗、美妆直播、甚至城市管理、基因检测、天文科研等提供计算力。 2017年，绿色出行方面不得不说的是共享单车行业，市场所处阶段使得各单车企业单车投放量井喷式增长，从而在精准投放、高效调度、准确连接方面必须借助大数据计算，MaxCompute成功帮助共享单车企业提升线下运营效率50%以上，轻松应对数千万级日订单量，提升企业整体运营效率76%，保证了企业向全球提供40多亿次出行服务，精准连接超过一千万辆自行车。天气预测有着广泛的需求群体，每天几亿次的天气查询需求和近几十亿次的广告请求，使得企业必须依托MaxCompute来应对挑战。MaxCompute成功提升企业工作效率5倍以上，提升性能和稳定性的同时节省成本超过70%，实现了对每天上亿用户的天气查询需求的快速响应和几十亿次广告请求的精准投放。互联网保险行业，MaxCompute帮助企业实现精准的用户画像分析，助力企业为数亿用户提供数十亿的保单服务，提升企业效率的同时，为亿万用户送去健康与安全。除民生方面，MaxCompute更是向高科技的基因测序持续输出计算力。针对传统计算无法完成的十万人基因数据计算，MaxCompute不仅可以在几小时内完成，更是将计算成本大幅降低到1千美金以内，成为基因测序方面真正意义上的计算引擎。 MaxCompute作为大数据计算引擎，正在不断实现社会效益和市场价值，受益方不仅仅是企业，更是每个人和整个社会。而在巨大的社会效益和市场价值背后，是MaxCompute计算力的不断提升和技术的不断创新。 2017年，MaxCompute在技术上实现了多项重大突破。 MaxCompute适配了TPC benchmark，将数据规模拓展至100TB，完成全球首次基于公共云的BigBench大数据基准测试，性能突破8200QPM，实现了中国计算、世界能力。 MaxCompute在离线计算的基础上，融入Lightning Compute交互计算模式，将离线和实时数据结合下的查询响应缩短到亚秒级，并支持交互式查询，满足对延迟和交互性要求更高的实时场景。进行MaxCompute(ODPS) 架构升级，在 NewSQL、富结构化、联合计算平台和AliORC多个方向上发力，构建高可用、高性能、高自适性的开放平台。实现存储计算分离架构和混布，提高资源利用率。2017年双11平稳支撑电商混布在线流量洪峰6.5W笔/s交易 (20%交易流量)，蚂蚁混布5W笔/s交易。 Datahub架构升级并成功支持双11媒体大屏业务。今年双11当天，DataHub承载压缩后PB级的数据收集和消费、投递，全链路延迟不超过2秒。首次做到了双11数据洪峰级别的负载下跨机房强一致容灾，整机房故障时可以在分钟级恢复服务，数据无缝衔接。为更好的向全球各地区市场和客户提供高质量的大数据计算服务，2017年MaxCompute加速全球化部署，已在全球10余个区域开通服务。据了解，2018上半年也会陆续开服印度、印尼等多个海外节点。 0
举报淘帖0 只看该作者相关推荐 • 大数据计算服务MaxCompute的使用教程 1530 • MaxCompute产品最新进展 -- 从马力到计算力 2872 • MaxCompute助力OSS支持EB级计算力 2641 • 「深圳云栖大会」大数据时代以及人工智能推动下的阿里云异构计算 1476 • 全新一代人工智能计算引擎MaxCompute杭州开服，强化阿里云大数据能力，比肩谷歌微软 3938 • 阿里云MaxCompute携手华大基因打造精准医疗应用云平台，十万基因组计算成本降低至1000美金以内 2984 • 基于阿里云数加MaxCompute的企业大数据仓库架构建设思路 3435 • MaxCompute印尼开服，成为阿里云第十二个大数据服务节点 4214 • 阿里云大数据利器Maxcompute学习之-假如你使用过hive 2945 • 阿里云MaxCompute印度开服，加速大数据产业升级 2306