Flink团队开源新作Streaming Ledger
极客时间编辑部
讲述:丁婵大小:947.61K时长:02:02
近日,由 Apache Flink 创始人创立的 data Artisans 宣布开源 Streaming Ledger,为基于流式架构的应用程序带来了串行化 ACID 事务支持。
在 data Artisans,数据流式处理得到了疯狂的增长,从早期阶段到快速增长的市场,预计到 2025 年将达到近 500 亿美元的规模。随着越来越多的行业采用流式处理,并为越来越多的任务关键型应用程序提供支持,这项技术本身也在不断发展,以便为数据和计算的正确性提供更好的保证。
随着 Streaming Ledger 成为 data Artisans 平台的一部分,用户可以在构建的同时,读取或更新多条记录和多张表的应用程序,并实现 ACID 事务支持。Streaming Ledger 在提供这些保证的同时,还能保持流式处理(恰好一次保证)的伸缩能力,而且不会影响应用程序的速度、性能、可伸缩性或可用性。
据了解,Streaming Ledger 基于 Apache Flink 构建,为跨多个表和单表多行的多个数据流提供执行串行化事务的能力,它可以被视为等效于键值存储系统(甚至是跨多个键值存储系统)的多行事务。
Streaming Ledger 还为使用流式处理构建新的应用程序类型打开了一个大门,在以前,这类应用程序只能依赖关系型数据库。现在,数据密集型实时应用程序(如欺诈检测、机器学习和实时交易定价)可以毫不费力地迁移到流式处理平台上。
此外,Streaming Ledger 非常适合用于处理涉及多个状态的用例,它支持对多个状态进行事务性的修改,这些修改彼此隔离,并遵循串行化一致性的原则。
借助 Streaming Ledger,开发团队正在开启流式处理的新篇章,现在,越来越多的任务关键型应用程序可以充分利用流式处理的实时、异步、灵活等优势。
公开
同步至部落
取消
完成
0/2000
荧光笔
直线
曲线
笔记
复制
AI
- 深入了解
- 翻译
- 解释
- 总结
该免费文章来自《极客视点》,如需阅读全部文章,
请先领取课程
请先领取课程
免费领取
© 版权归极客邦科技所有,未经许可不得传播售卖。 页面已增加防盗追踪,如有侵权极客邦将依法追究其法律责任。
登录 后留言
精选留言
由作者筛选后的优质留言将会公开显示,欢迎踊跃留言。
收起评论