技术与商业案例解读
徐飞
前华为云资深总监,大数据专家
36771 人已学习
新⼈⾸单¥68
登录后,你可以任选6讲全文学习
课程目录
已完结/共 164 讲
技术与商业案例解读
15
15
1.0x
00:00/00:00
登录|注册

082 | 阿里巴巴的大数据故事:数据分析平台发展史

性能和功能
2017年发布
团队背景
2017年全面取代Oracle
2014年问题解决
起始和发展
目前应用情况
2015年大换血
初期发展
重叠的功能
PolarDB
OceanBase
MaxCompute
阿里巴巴的大数据故事
参考文章

该思维导图由 AI 生成,仅供参考

阿里巴巴是国内最早开始做大数据的公司,也是国内最早开始做云计算的公司。阿里巴巴的数据分析平台非常齐全,今天我带大家看一看阿里巴巴的大数据发展历史。我们首先看看数据分析平台方面的发展。

MaxCompute

阿里巴巴作为国内最大的互联网公司之一,也需要一个大数据分析平台。阿里巴巴发展大数据平台,走了两条路:一部分业务用的是开源的 Hadoop,另外一部分则用了自己研发的平台。这个自己研发的平台最初叫 ODPS,也就是现在的 MaxCompute。
阿里巴巴的平台研发,时间上比微软、谷歌或者雅虎起步的时候稍微晚了一点。这个平台最初主要做法是前端和 Hive 兼容,使用了 Hive 的语法,后端从查询优化到查询的执行,到数据的存储都是自己开发的。当时负责开发的是徐常亮。
平台的开发一开始并不顺利。但是通过几年的磨合,这个平台也开发得有模有样了,和阿里内部使用开源 Hadoop 的组并驾齐驱。到后来,很多阿里内部业务都泡在了 MaxCompute 上。当然,阿里巴巴的 MapReduce 叫作 E-MapReduce,至今依然是阿里云支持的服务之一。
确认放弃笔记?
放弃后所记笔记将不保留。
新功能上线,你的历史笔记已初始化为私密笔记,是否一键批量公开?
批量公开的笔记不会为你同步至部落
公开
同步至部落
取消
完成
0/2000
荧光笔
直线
曲线
笔记
复制
AI
  • 深入了解
  • 翻译
    • 英语
    • 中文简体
    • 中文繁体
    • 法语
    • 德语
    • 日语
    • 韩语
    • 俄语
    • 西班牙语
    • 阿拉伯语
  • 解释
  • 总结

阿里巴巴在大数据领域的发展故事展现了其在数据分析平台、分布式金融关系数据库和云端产品方面的技术实力。MaxCompute作为阿里巴巴的数据分析平台,经历了多次升级和改进,成为全球第三家不基于Hadoop生态圈的大数据分析公司。OceanBase则是针对金融业务的分布式数据库系统,取代了昂贵的Oracle数据库,成为蚂蚁金服的主要数据库平台。PolarDB则是基于MySQL的云端产品,通过硬件和软件相结合的方式,提供了高性能和并发处理能力。阿里巴巴在数据分析平台、分布式数据库和云端产品领域的重叠功能给用户选择带来了困惑,但也展现了其在不同领域的技术实力和创新能力。这些产品的发展历程体现了阿里巴巴在大数据领域的持续探索和创新,为读者呈现了其在技术领域的引领地位和多元化产品布局。

仅可试看部分内容,如需阅读全部内容,请付费购买文章所属专栏
《技术与商业案例解读》
新⼈⾸单¥68
立即购买
登录 后留言

全部留言(3)

  • 最新
  • 精选
  • 宋词
    对于上述系统,飞总有相关的个人评价吗?而不是仅仅做编年史?
    2018-06-08
    1
    9
  • xxw
    百度不是有c++的mapreduce 吗
    2018-06-09
    1
  • GeekAmI
    可能是内部斗争比较激烈吧
    2018-06-08
收起评论
显示
设置
留言
3
收藏
沉浸
阅读
分享
手机端
快捷键
回顶部