092 | Data Artisans:浴火重生的新一代大数据计算引擎Flink
徐飞
该思维导图由 AI 生成,仅供参考
2014 年,数据库领域的顶级会议 VLDB 在杭州召开。柏林理工大学的教授沃克尔·马尔科(Volker Markl)做了一场关于大数据计算平台的专题报告,这场报告讲的是一个叫做 Flink 的系统。
沃克尔和他的团队从事大数据研究已经很多年了,他们最初开始做的是一个叫做 Stratosphere 的项目。这个系统并不出名,既无 Hadoop 的声势浩大,也没有 Spark 的迅速扩张。
后来,沃克尔吸取了早年 Stratosphere 系统的教训,并调研了市场上现存的系统不足,经过了重新设计,才制作出了这个叫 Flink 的新系统。
Flink 以非常先进的流计算引擎思想为基本,同时还结合了传统大数据和数据库的优点。于是,这个系统一进入 Apache 软件基金会以后,就迅速火爆了,甚至连 Capital One 和国内的阿里巴巴集团银行都开始相继使用。
Flink 从一出现就获得了很多的关注,这是自 Spark 项目出现以来,所有 Apache 项目里面最受关注的一个。最主要的原因就是 Flink 的理念非常先进,而且 Flink 是基于流模型的一个计算平台,它所使用的流计算模型,又是目前市面上所有开源项目里最为先进的。“先进”“实时”“流计算”,这些词语被放在一起,就给 Flink 带来了无限的光辉。
公开
同步至部落
取消
完成
0/2000
荧光笔
直线
曲线
笔记
复制
AI
- 深入了解
- 翻译
- 解释
- 总结
Flink是一个基于流计算引擎思想的先进计算平台,结合了传统大数据和数据库的优点,因此备受关注。其背后的公司Data Artisans类似于Databricks,提供基于Flink的云计算平台和培训咨询服务。然而,相比Databricks,Data Artisans面临一些不利因素,如竞争对手已有较长时间运营、欧洲公司在北美推广困难等。尽管如此,Flink的先进思想和阿里巴巴等公司的支持让人对其未来充满信心。尽管Flink在北美发展仍然困难,但其晚出的产品优点和市场潜力仍然存在。因此,Flink要想取得胜利并非易事,但市场广阔,Data Artisans应该也能分得一杯羹。文章提出了Flink和Databricks的竞争,以及站在巨人肩膀上的问题,鼓励读者留言一起讨论。
仅可试看部分内容,如需阅读全部内容,请付费购买文章所属专栏
《技术与商业案例解读》,新⼈⾸单¥68
《技术与商业案例解读》,新⼈⾸单¥68
立即购买
© 版权归极客邦科技所有,未经许可不得传播售卖。 页面已增加防盗追踪,如有侵权极客邦将依法追究其法律责任。
登录 后留言
全部留言(2)
- 最新
- 精选
- 小孙最近在各个地方看阿里在狂推flink,spark2.3也出持续流处理功能了,在做他们直接详细的对比2018-07-271
- 拉欧还是各有侧重吧,spark虽然也支持流,但是它的流只是微批处理的概念2019-06-07
收起评论