当前播放: 如何对Hive表进行原子刷新?
00:00 / 00:00
    1.0x
    • 2.0x
    • 1.5x
    • 1.25x
    • 1.0x
    • 0.5x
    网页全屏
    全屏
    00:00
    付费课程,可试看

    如何对Hive表进行原子刷新?

    赵剑雄 Freewheel大数据开发工程师
    115次播放
    讲师介绍:赵剑雄,Freewheel大数据开发工程师,过往工作主要围绕离线数仓及离线数据处理平台的设计以及开发等。问题背景:随着云计算的流行,对象存储技术由于使用及维护成本低廉,逐渐普及开来。但由于对象存储技术本身的技术特点,在对象存储的情况下,由于没有move操作,以及对象存储写一致性等问题,会使得数据更新的时间可能会变得很长,这期间对Hive表进行访问的数据一致性无法得到保证。本文主要探讨这个问题的原因e以及解决方法。内容看点:Hive在对象存储的场景下数据更新一致性问题的探讨Hive的元数据管理服务HiveMetaStore的特性Hive中刷新数据的数据一致性问题
    展开
    登录 后留言

    精选留言(1)

    • 易轻尘
      可以的 如果作者还熟悉其他分析性数据库的话也可以讲一讲
      2021-07-29
    收起评论
    我的每日一课VIP
    每日一课VIP
    0.1元 畅看850+技术视频
    开通
    相关推荐
    2506
    51:52
    开发高性能消息引擎的秘诀:Apache RocketMQ
    冯嘉 阿里巴巴高级技术
    免费
    1099
    40:12
    Apache Pulsar:实时数据处理中消息、计算和存储的统一
    翟佳 Streamlio 核心创始成员之一
    试看
    1663
    36:05
    Dubbo开源现状与未来规划
    罗毅 阿里巴巴高级技术专家
    免费
    1530
    49:31
    爱奇艺广告核心架构及其演进
    孙立伟 爱奇艺广告在线服务团队高级技术经理
    试看