从0开始学微服务
胡忠想
微博技术专家
立即订阅
16289 人已学习
课程目录
已完结 42 讲
0/4登录后,你可以任选4讲全文学习。
开篇词 (1讲)
开篇词 | 微服务,从放弃到入门
免费
模块一 入门微服务 (10讲)
01 | 到底什么是微服务?
02 | 从单体应用走向服务化
03 | 初探微服务架构
04 | 如何发布和引用服务?
05 | 如何注册和发现服务?
06 | 如何实现RPC远程服务调用?
07 | 如何监控微服务调用?
08 | 如何追踪微服务调用?
09 | 微服务治理的手段有哪些?
10 | Dubbo框架里的微服务组件
模块二 落地微服务 (14讲)
11 | 服务发布和引用的实践
12 | 如何将注册中心落地?
13 | 开源服务注册中心如何选型?
14 | 开源RPC框架如何选型?
15 | 如何搭建一个可靠的监控系统?
16 | 如何搭建一套适合你的服务追踪系统?
17 | 如何识别服务节点是否存活?
18 | 如何使用负载均衡算法?
19 | 如何使用服务路由?
20 | 服务端出现故障时该如何应对?
21 | 服务调用失败时有哪些处理手段?
22 | 如何管理服务配置?
23 | 如何搭建微服务治理平台?
24 | 微服务架构该如何落地?
模块三 进阶微服务 (8讲)
25 | 微服务为什么要容器化?
26 | 微服务容器化运维:镜像仓库和资源调度
27 | 微服务容器化运维:容器调度和服务编排
28 | 微服务容器化运维:微博容器运维平台DCP
29 | 微服务如何实现DevOps?
30 | 如何做好微服务容量规划?
31 | 微服务多机房部署实践
32 | 微服务混合云部署实践
模块四 展望微服务 (4讲)
33 | 下一代微服务架构Service Mesh
34 | Istio:Service Mesh的代表产品
35 | 微博Service Mesh实践之路(上)
36 | 微博Service Mesh实践之路(下)
阿忠伯的特别放送 (4讲)
阿忠伯的特别放送 | 答疑解惑01
阿忠伯的特别放送 | 答疑解惑02
微博技术解密(上) | 微博信息流是如何实现的?
微博技术解密(下)| 微博存储的那些事儿
结束语 (1讲)
结束语 | 微服务,从入门到精通
从0开始学微服务
登录|注册

微博技术解密(下)| 微博存储的那些事儿

胡忠想 2019-01-31
今天是微博技术解密系列的第二期,我们来聊聊微博存储的使用经验。上一期“微博技术解密”我讲到微博主要使用了两大类存储:一类是数据库,主要以 MySQL 为主;一类是缓存,主要以 Memcached 和 Redis 为主。
今天我来分享一下微博在使用数据库和缓存方面的经验,也欢迎你给我留言一起切磋讨论。

MySQL

上一期我讲到微博 Feed 的存储使用了两层的结构,为了减少对 MySQL 数据库的访问压力,在前面部署了 Memcached 缓存,挡住了 99% 的访问压力,只有 1% 的请求会访问数据库。然而对于微博业务来说,这 1% 的请求也有几万 QPS,对于单机只能扛几千 QPS 的 MySQL 数据库来说还是太大了。为此我们又对数据库端口进行了拆分,你可以看下面的示意图,每个用户的 UID 是唯一的,不同 UID 的用户按照一定的 Hash 规则访问不同的端口,这样的话单个数据库端口的访问量就会变成原来的 1/8。除此之外,考虑到微博的读请求量要远大于写请求量,所以有必要对数据库的读写请求进行分离,写请求访问 Master,读请求访问 Slave,这样的话 Master 只需要一套,Slave 根据访问量的需要可以有多套,也就是“一主多从”的架构。最后考虑到灾备的需要,还会在异地部署一套冷备的灾备数据库,平时不对外提供线上服务,每天对所有最新的数据进行备份,以防线上数据库发生同时宕机的情况。
取消
完成
0/1000字
划线
笔记
复制
© 版权归极客邦科技所有,未经许可不得传播售卖。 页面已增加防盗追踪,如有侵权极客邦将依法追究其法律责任。
该试读文章来自付费专栏《从0开始学微服务》,如需阅读全部文章,
请订阅文章所属专栏。
立即订阅
登录 后留言

精选留言(14)

  • 王鸿运
    胡老师,问一个布隆过滤器问题:
    因为hash函数存在冲突问题,所以布隆过滤器如果判断不存在肯定是不存在,判断存在有极低可能不存在(该key哈希后对应的三个位置都冲突了),你们是允许这种概率性误判存在,还是会通过其他方式规避?
    2019-02-02
    5
  • 拉欧
    redis里的布隆过滤器,也是同样的原理
    2019-02-01
    3
  • xylsh
    不太明白L1怎么分担带宽压力的,
    1、是每组L1都有自己的带宽吗?
    2、带宽压力指机器接入的网络的压力吗?那岂不是每组L1都要有自己的网络带宽???
    2019-07-22
    1
  • westbrook
    bloom过滤器 当3次Hash 都存在 只能说明可能存在,还需要进行值对比,才能确认是否真的存在
    2019-12-08
  • 波波安
    老师,redis单个key value占大概65个字节,这个是怎么算得?
    2019-06-23
  • donson
    redis内存有效负荷比较低,一条KV大概需要至少65个字节。 这65个字节是怎么来的?
    2019-02-26
  • mz
    感谢
    2019-02-23
  • 小若
    胡老师新年快乐!利用七天假期完成了课程学习,受益匪浅,感谢!
    2019-02-09
  • CAFEBABE
    新年快乐
    2019-02-04
  • iHai
    感谢胡老师,新年快乐
    2019-02-01
  • snakorse
    胡老师,这两期很赞,感谢,新年快乐~
    2019-01-31
  • 三水
    新年快乐!
    2019-01-31
  • 每天晒白牙
    胡老师,新年快乐
    2019-01-31
  • Geek_978989
    新年快乐,希望胡老师还有新专栏
    2019-01-31
收起评论
14
返回
顶部