• 9ambition
    2021-02-18
    老师提到的这个问题，还是要先明确使用业务。 举个例子：我这里要建立一个室内气体质量检测系统。 需要用到批处理的部分：做历史数据展示，做离线展示，做周平均，月平均，年平均的数据展示。 需要用到流处理的部分：实时气体质量监测展示。 框架：根据需要展示的模块进行划分。

    作者回复: 很好的分析

    
    4
  • Rain
    2020-12-02
    为什么采用 DAG 呢？我给你挖掘一下这背后的本质。感觉这里并没有“挖掘”出来呀ヾﾉ≧∀≦)o 没说清楚DAG有什么特点，所以才采用这个数据结构

    作者回复: 我是假设大家熟悉DAG这个数据结构哈，可以通过极客上的数据结构算法专栏了解。有时间这个度很难把握，说多了偏离主题，有人会觉得啰嗦。 这个说的意思是因为数据处理的流程就是一个有向无环图，所以用有向无环图来描述这个过程符合处理流程的本质。

    共 2 条评论
    4
  • ranger
    2020-11-30
    推荐一个批流统一的编程框架：Apache Beam

    作者回复: ������ Google出品必是精品

    
    4
  • redheart
    2020-12-07
    老师，你的回复是不是用了一些图形符号，在安卓上显示为乱码。之前的好多回复也是。

    作者回复: 用了emoji表情，我在电脑Web上回复时有这个问题。现在基本在手机上回复哈。 不好意思，你可以把它们都看成笑脸😄

    
    2
  • 一步
    2020-12-03
    kafka 就一个非常好的好用， 消息队列起家的 流处理平台

    作者回复: 是的，好软件有很强的生命力和成长性

    
    1
  • zhouqin
    2020-12-02
    老师可以介绍下，flink，storm在什么场景/规模下会用到。

    作者回复: 问这个一般说明你的系统还不需要用到。但是系统已经采用很多分布式技术，当你需要从消息队列中实时处理数据时，自然会需要用到。

    
    
  • 185
    2020-12-02
    实时的需求，按流的方式处理数据；能延时的需求，以批为单位处理数据。

    作者回复: ������

    
    
  • Geek_2c8816
    2020-12-01
    老师可以推荐下 数据结构与算法 的书籍或课程吗？这一节看的懵懵懂懂的好多名词

    作者回复: 极客App就有这样的课程阿。 建议你也可以再找大数据技术的书看看

    共 2 条评论
    
  • Geek_e34009
    2022-02-28
    每节课都给老师点个赞
    
    