• Radar
    2020-10-19
    - Yarn简介 - ResourceManager: 资源调度，监控NodeManager，资源分配和调度 - NodeManager：管理单个Worker节点上的资源；处理RM，AM的命令。汇报资源状态 - ApplicationMaster：负责数据切分，为应用申请计算资源，任务监控与容错，运行在WOrker节点上 - Container：资源抽象，封装了CPU，内存 - Session模式 - Client提交Yarn App - 启动Spawn Application Master - Client Submit Job - Dispatcher 启动Job Manager，申请Slots - Start TaskManagers，Register - Deploy Tasks - Per-Job 模式：独享 - 优势： - 与现有大数据平台无缝对接 - 部署和任务提交简单，容错借助Hadoop Yarn提供的自动failover机制 - 劣势： - 资源隔离，网络隔离问题 - Kerberos超期问题导致CheckPoint无法持久化

    作者回复: 学习的榜样

    
    5
  • 生活发言权
    2020-10-26
    学习中，请教一下 除了加餐内容，其他内容什么时候可以更新完，尤其是实战部分。

    作者回复: 应该在12月全部更新完

    
    
  • 白开水
    2020-09-04
    学习中！！！

    作者回复: 加油

    
    
  • geek
    2020-11-15
    老师好，有个矛盾的点请教一下，因为评论不能截图，我简单描述一下： 07章PPT -> Session集群运行模式 -> 图中Deployer了三个Job，共用了一个JobManager 10章PPT(本节) -> Flink On Yarn 集群部署 - Session 模式 -> 图中第9步submit了Job B，为什么又启动了一个JobManager B？
    共 5 条评论
    1
  • 强
    2021-11-04
    老师,我看大纲没有join相关原理的讲解吧？
    
    