大数据工程师必读手册通过精炼的内容展现了阿里云飞天大数据平台的技术精髓与实战应用,文档揭示了如何通过原创技术优化与系统融合突破数据与成本增长的线性束缚,描述了云原生大数据平台演化为全域云数仓的战略转变,以及大数据和AI的双生系统如何相辅相成,提升系统性能,阿里巴巴的飞天大数据平台,经过十年的沉淀和打磨,已成为支撑阿里99%数据业务的坚实基石,并在众多行业如城市大脑、电力、金融等发挥着巨大作用,这份文档不仅是大数据工程师理解阿里巴巴大数据技术的宝贵资料,也是任何对大数据和AI结合应用感兴趣者的重要阅读材料。
2019 云栖大会大数据 &AI 专场,阿里云智能计算平台事业部研究员关涛、资深专家徐晟来为我们分享《AI 加持的阿里云飞天大数据平台技术揭秘》。本文主要讲了三大部分,一是原创技术优化 + 系统融合,打破了数据增长和成本增长的线性关系,二是从云原生大数据平台到全域云数仓,阿里开始从原生系统走入到全域系统模式,三是大数据与 AI 双生系统,讲如何更好的支撑 AI 系统以及通过 AI 系统来优化大数据系统。
说到阿里巴巴大数据,不得不提到的是 10 年前王坚博士率领建构的飞天大数据平台,十年磨一剑,今天飞天大数据平台已是阿里巴巴 10 年大平台建设最佳实践的结晶,是阿里大数据生产的基石。飞天大数据平台在阿里巴巴集团内每天有数万名数据和算法开发工程师在使用,承载了阿里 99% 的数据业务构建。同时也已经广泛应用于城市大脑、数字政府、电力、金融、新零售、智能制造、智慧农业等各领域的大数据建设。