• 文章介绍
  • 评价建议

  • 大数据经典教程,阿里内部教程,《大数据工程师 必读手册》限时免费下载插图

    大数据工程师 必读手册》目录

    1. 开篇
    2. AI 加持的阿里云飞天大数据平台技术揭秘
    3. 计算存储引擎
    4. 飞天大数据平台计算引擎 MaxCompute 最新特性
    5. 飞天大数据平台实时计算 Flink on Kubernetes 最新特性
    6. 飞天大数据平台 E-MapReduce 4.0 最新特性
    7. 大数据 & AI 开发平台
    8. 飞天大数据平台智能开发云平台 DataWorks 最新特性
    9. 飞天大数据平台机器学习 PAI 最新特性
    10. 搜索与推荐
    11. 飞天大数据平台 OpenSearch 最新特性
    12. 飞天大数据平台 Elasticsearch 最新特性
    13. 飞天大数据平台智能推荐 AIRec 最新特性

    AI 加持的阿里云飞天大数据平台技术揭秘
    摘要:2019 云栖大会大数据 &AI 专场,阿里云智能计算平台事业部研究员关涛、资深专家徐晟来为我们分享《AI 加持的阿里云飞天大数据平台技术揭秘》。本文主要讲了三大部分,一是原创技术优化 + 系统融合,打破了数据增
    长和成本增长的线性关系,二是从云原生大数据平台到全域云数仓,阿里开始从原生系统走入到全域系统模式,三是大数据与 AI 双生系统,讲如何更好的支撑 AI 系统以及通过 AI 系统来优化大数据系统。说到阿里巴巴大数据,不得不提到的是 10 年前王坚博士率领建构的飞天大数据平台,十年磨一剑,今天飞天大数据平台已是阿里巴巴 10 年大平台建设最佳实践的结晶,是阿里大数据生产的基石。飞天大数据平台在阿里巴巴集团内每天有数万名数据和算法开发工程师在使用,承载了阿里 99% 的数据业务构建。同时也已经广泛应用于城市大脑、数字政府、电力、金融、新零售、智能制造、智慧农业等各领域的大数据建设。
    大家知道飞天大数据平台是从 2009 年发展到今天的系统。飞天平台从发展的角度来讲经历了 2 个阶段,第一个阶段是从 2009 年到 2015 年,那个阶段我们主要解决的是稳定性问题、可用的问题和异用的问题,从这个角度,到 2015 年的时候我们完成了一个非常有名的项目叫登月,登月就是把阿里巴巴所有的数据都融合在一起巴的数据进入到腾飞的过程,每月大概是几百个 PB 的数据涌入到这样的平台里来,那个时候的数据比较小,大概是数千台的服务器、几百个基架的状态。当时每个月就会有那么多的服务器开始摆进来,从 2015 年开始,也就是从海量的数据爆炸开始,系统走过这个稳定时期之后,后续的关键问题是什么?

    免责声明:
    1. 本站资源转自互联网,源码资源分享仅供交流学习,下载后切勿用于商业用途,否则开发者追究责任与本站无关!
    2. 本站使用「署名 4.0 国际」创作协议,可自由转载、引用,但需署名原版权作者且注明文章出处
    3. 未登录无法下载,登录使用金币下载所有资源。
    IT小站 » 大数据经典教程,阿里内部教程,《大数据工程师 必读手册》限时免费下载

    常见问题FAQ

    没有金币/金币不足 怎么办?
    本站已开通每日签到送金币,每日签到赠送五枚金币,金币可累积。
    所有资源普通会员都能下载吗?
    本站所有资源普通会员都可以下载,需要消耗金币下载的白金会员资源,通过每日签到,即可获取免费金币,金币可累积使用。

    发表评论