当前播放: B 站万亿规模下管道化传输的演进
00:00 / 00:00
    1.0x
    • 2.0x
    • 1.5x
    • 1.25x
    • 1.0x
    • 0.5x
    网页全屏
    全屏
    00:00
    付费课程,可试看
    专题:融合趋势下的大数据技术
    如何基于 Apache Hudi 构建企业级数据湖
    实时图计算在蚂蚁集团的应用
    翼支付数智化升级之路
    腾讯在新一代的数据湖表格式 Iceberg 上的探索与实践
    字节跳动如何通过优化列式存储加速 Spark SQL
    Zeppelin + Airflow:大数据作业开发到生产的无缝切换
    使用 RayDP 构建下一代端到端的大数据和AI平台实践
    B 站万亿规模下管道化传输的演进

    B 站万亿规模下管道化传输的演进

    郑志升 bilibili大数据实时平台负责人
    494人学习
    ¥49 购买
    开通VIP

    课程详情

    课件下载
    伴随着B站多元化的高速发展,企业内部对数据的需求也变得越发强烈,数据集成作为大数据领域的建设基石,一方面要能覆盖采集复杂繁多的数据源,另一方面还要做到在万亿规模的数据体量下保障数据传输质量。本次演讲主要分享B站从数据的上报,边缘采集,实时传输,到流式分发的全链路一体化架构演进。核心内容要点包括边缘传输的架构实现,基于Flink流批一体的实时分发架构,以及超大规模下的稳定性保障方案与建设。内容大纲传输体系面临的挑战边缘化传输架构的落地基于Flink实时分发架构的挑战全链路数据高压下的稳定性保障建设听众收益了解大数据的整条传输分发链路了解数据的采集体系是如何在复杂需求的机制下构建的了解Flink流批一体的架构如何解决数据集成领域的各种问题了解数据在万亿规模下如何打造高性能和高可用的综合型管道化服务
    展开
    登录 后留言

    精选留言

    由作者筛选后的优质留言将会公开显示,欢迎踊跃留言。
    收起评论
    我的大厂案例VIP
    大厂案例VIP
    学习大厂前沿案例 向行业领先迈进
    开通

    相关推荐

    50:13
    如何基于 Apache Hudi 构建企业级数据湖
    杨华 T3 出行大数据平台负责人
    试看
    25:37
    实时图计算在蚂蚁集团的应用
    潘臻轩(泰初) 蚂蚁集团高级技术专家
    试看
    44:44
    翼支付数智化升级之路
    谢巍盛 翼支付大数据总监
    试看
    41:54
    腾讯在新一代的数据湖表格式 Iceberg 上的探索与实践
    邵赛赛 腾讯数据湖内核技术负责人/资深大数据工程师
    试看