082 | 阿里巴巴的大数据故事:数据分析平台发展史
徐飞
该思维导图由 AI 生成,仅供参考
阿里巴巴是国内最早开始做大数据的公司,也是国内最早开始做云计算的公司。阿里巴巴的数据分析平台非常齐全,今天我带大家看一看阿里巴巴的大数据发展历史。我们首先看看数据分析平台方面的发展。
MaxCompute
阿里巴巴作为国内最大的互联网公司之一,也需要一个大数据分析平台。阿里巴巴发展大数据平台,走了两条路:一部分业务用的是开源的 Hadoop,另外一部分则用了自己研发的平台。这个自己研发的平台最初叫 ODPS,也就是现在的 MaxCompute。
阿里巴巴的平台研发,时间上比微软、谷歌或者雅虎起步的时候稍微晚了一点。这个平台最初主要做法是前端和 Hive 兼容,使用了 Hive 的语法,后端从查询优化到查询的执行,到数据的存储都是自己开发的。当时负责开发的是徐常亮。
平台的开发一开始并不顺利。但是通过几年的磨合,这个平台也开发得有模有样了,和阿里内部使用开源 Hadoop 的组并驾齐驱。到后来,很多阿里内部业务都泡在了 MaxCompute 上。当然,阿里巴巴的 MapReduce 叫作 E-MapReduce,至今依然是阿里云支持的服务之一。
公开
同步至部落
取消
完成
0/2000
荧光笔
直线
曲线
笔记
复制
AI
- 深入了解
- 翻译
- 解释
- 总结
阿里巴巴在大数据领域的发展故事展现了其在数据分析平台、分布式金融关系数据库和云端产品方面的技术实力。MaxCompute作为阿里巴巴的数据分析平台,经历了多次升级和改进,成为全球第三家不基于Hadoop生态圈的大数据分析公司。OceanBase则是针对金融业务的分布式数据库系统,取代了昂贵的Oracle数据库,成为蚂蚁金服的主要数据库平台。PolarDB则是基于MySQL的云端产品,通过硬件和软件相结合的方式,提供了高性能和并发处理能力。阿里巴巴在数据分析平台、分布式数据库和云端产品领域的重叠功能给用户选择带来了困惑,但也展现了其在不同领域的技术实力和创新能力。这些产品的发展历程体现了阿里巴巴在大数据领域的持续探索和创新,为读者呈现了其在技术领域的引领地位和多元化产品布局。
仅可试看部分内容,如需阅读全部内容,请付费购买文章所属专栏
《技术与商业案例解读》,新⼈⾸单¥68
《技术与商业案例解读》,新⼈⾸单¥68
立即购买
© 版权归极客邦科技所有,未经许可不得传播售卖。 页面已增加防盗追踪,如有侵权极客邦将依法追究其法律责任。
登录 后留言
全部留言(3)
- 最新
- 精选
- 宋词对于上述系统,飞总有相关的个人评价吗?而不是仅仅做编年史?2018-06-0819
- xxw百度不是有c++的mapreduce 吗2018-06-091
- GeekAmI可能是内部斗争比较激烈吧2018-06-08
收起评论