你好,我是蔡元楠。
这里是“FAQ 第三期:Apache Beam 基础答疑”。这一期主要是针对上周结束的模块四——Apache Beam 的基础知识部分进行答疑,并且做了一些补充。
如果你对文章的印象不深了,可以先点击题目返回文章复习。当然,你也可以继续在留言中提出疑问。希望我的解答对你有所帮助。
在第 22 讲中,我分享了 Apache Beam 的诞生历程。留言中渡码、coder 和 Milittle 都分享了自己了解的技术变迁、技术诞生历史。
而 JohnT3e 则是分享了我在文章中提到的几个论文的具体内容。他分享的论文是非常好的补充材料,也希望你有时间的话可以下载来看一看。我把链接贴在了文章里,你可以直接点击下载浏览。
Morgan 在第 22 讲中提问:Beam 和 Spark 是什么关系?
我的回答是,Spark 可以作为 Beam 的一个底层 Runner 来运行通过 Beam SDK 所编写的数据处理逻辑。相信在读完第 23 讲的内容后,Morgan 会对这个概念有一个更好的认识。