• 每天晒白牙
    2018-11-01
    看完有几个疑惑点
    1.独立机房部署的情况,虽然通过WMB在两个机房之间进行数据同步,但都只更新缓存,更新数据库还是由主库更新,然后通过binlog同步给从库,如果主库有问题,从库并未写数据库只是写了缓存,数据库中数据就不会更新了,只剩下缓存来扛流量。新的写请求只会写缓存不会写数据库,如果这时候来的请求数据恰好在缓存中失效了,就查不到数据了。
    2.关于数据一致性问题,文中给的方案是通过定时任务扫描es,通过比较不同机房相同requestid对应的处理状态,如果相同数据一致不做处理。如果不一致,进行重拾操作,达到一致。这种方案觉得是最终一致性,而不是准实时一致。阿忠伯有啥准实时一致方案推荐吗?
    3.这种多机房部署和业界说的那种异地多活是同一种概念吗?
    ps 留言了好几次了,阿忠伯回复我一次吧😂
    展开

    作者回复: 第一个问题确实存在 如果从库同步延迟,只有缓存更新成功了,穿透访问数据库就会数据不一致,所以要保证数据库同步的及时性。
    第二个问题看你理解的准实时有多实时,如果是秒级别的话目前里看还是强一致性的方案靠谱,但是这种方案比较复杂,需要付出一定的性能代价,对微博的业务场景来说目前没有这个强一致性的需求。
    第三个问题异地多活就是靠多机房部署才能实现。

    
     17
  • 拉欧
    2018-11-01
    同步一般有三种方式:应用层同步,缓存层同步,存储层同步,复杂度上也是由高到低排列,一般应用的话,存储层同步就够了

    作者回复: 说的很对👍

    
     4
  • 李俊
    2018-11-17
    文章里没写如何保证强一致性?

    作者回复: 目前微博业务要求的是最终一致性,强一致性还没达到

    
     3
  • asdf100
    2018-11-03
    如果有的机房某一阶段处理失败,则可以根据日志信息重试该阶段直到成功,从而保证数据的最终一致性。
    ---------------
    这时再重试会不会导致数据不一致的?假如失败后,数据被后面的请求进行了修改,如果再重试原来失败的请求,数据不是不一致了吗?

    作者回复: 重试的前提是要满足服务的幂等

    
     3
  • xylsh
    2019-07-20
    写操作可能是有先后顺序的,比如a b c 3个写操作需要按照顺序写入,a c成功,b失败,定时线程重试b的时候,会导致c操作好的结果不正确,这种情况怎么处理的?
    
     2
  • 西兹兹
    2019-01-07
    如果光缆被挖断了,在修复光缆之前,如何在电信机房写入数据库呢。 方案二
    
     1
  • 波波安
    2018-11-18
    对于redis我们在两个机房采取的策略是主从复制保持数据一致。保证A机房中的主节点在B机房中有从节点,反过来也是。
    
     1
  • 风轨
    2018-11-02
    如何做到缓存与数据库一致呢,缓存数据库不一致如何处理呢,写操作如果只写成功了缓存,数据以谁为呢?

    作者回复: 一般都是先写数据库再写缓存,以数据库的操作为准

    
     1
  • 每天晒白牙
    2018-11-01
    越到后面文章越好看

    作者回复: 后面就全是实践了,希望你能有所收获,哈哈

    
     1
  • 衣申人
    2019-09-10
    数据同步还涉及消息顺序问题,rpc方式如何确保顺序同步?
    
    
  • godtrue
    2019-06-16
    看结构图是强依赖缓存的,如果电信的缓存挂了,对应的服务是否就不可用了?还是此时能切到联通去?
    分布式系统的数据一致性是个难题,做到强一致更加复杂。
    赶集思路就是这两种啦:
    1:单写
    2:多写+同步
           同步可以日志、MQ、RPC
    展开
    
    
  • Enjoystudy
    2019-03-22
    多机房部署有个很重要的原则就是通过路由策略保证同一个用户的请求(至少写请求)打到同一个机房,尽量避免多个机房同时写数据导致的各种问题,在入口处和RPC的时候都需要做路由
    
    
  • 饭粒
    2019-03-13
    请问下,独立机房架构下,不同机房的数据库都是可写的吗,数据库是主-主模式?还是说固定一个机房的数据库写?
    
    
  • Mangosteen
    2019-03-12
    2. 独立机房架构
    既然两机房处理机得到的数据时一致的,为什么电信机房不能直接从处理机写入数据库而要用联通的binlog
    
    
  • 梦朝思夕
    2019-03-04
    这样的实践方式的确很折中,机房缓存的同步起码是秒级以上,
    
    
  • 西兹兹
    2019-01-07
    独立机房方案,如果联通机房挂了,那如何写电信机房的数据库呀?
    
    
  • 明天更美好
    2018-11-01
    胡老师,请教个问题,我们对性能有要求,所以数据全量缓存分布式缓存中,通过消息异步更新库,数据库是分布式的。需要携带分片键。所以性能一搬。故而全量缓存。但是数据有差异,怎么做到最终一致性呢

    作者回复: 我上面说得通过对账机制就是一种方案

    
    
  • 每天晒白牙
    2018-11-01
    看完有两个疑惑点
    1.独立机房部署的情况,虽然通过WMB在两个机房之间就行数据同步,但都只更新缓存,更新数据库还是由主库更新,然后通过binlog同步给从库,如果主库有问题,从库并未写数据库只是写了缓存,数据库中数据就不会更新了,只有缓存来扛。
    2.关于一致性问题,文章给出的方案是通过定时任务每分钟在es中扫描requestid相同机房不同的处理状态信息,判断是否一致,不一致的进行充实直到一直,这种也是最终一致性,阿忠伯有啥准实时同步的方案吗?
    我都留了好多言了,阿忠伯从不回复我😂
    展开

    作者回复: 1.确实有这个问题,在异常情况下要靠缓存来扛。
    2.实时同步只能是靠强一致性的解决方案,这样业务性能肯定会有一定影响,代码复杂度也会增加不少,阿里和腾讯都有自己的成熟方案,可以去看看。

    
    
我们在线,来聊聊吧