用户故事 | 黄云：行百里者半九十

黄云



该思维导图由 AI 生成，仅供参考

你好，我是黄云，目前是一名后端开发工程师，坐标苏州，已经工作三载有余了。在“Kafka 核心技术与实战”专栏刚刚上线的时候，我就第一时间订阅了。在学习专栏的几个月时间里，我有许多心得体会，想要跟你分享一下。
为什么要学习“Kafka 核心技术与实战”专栏？众所周知，在当今时代，“大数据”已经成为了一个家喻户晓的概念。动辄 GB 级、TB 级，甚至是 PB 级的大数据，都需要服务器在短时间内进行处理。如何充分利用每台服务器的性能，削峰填谷，就成为了数据处理的关键。Kafka 作为一种主流的消息队列工具，已经被很多大公司使用。掌握 Kafka，成为了大数据时代必不可少的专项技能。
我们公司目前也在用 Kafka 对接实时流量数据，数据量约 20GB/ 天。作为一名开发工程师，我必须要尽快掌握 Kafka 的核心技术，修炼专项技能，才能使其更好地为我所用。一直以来，在工作之余，我都会主动地搜集 Kafka 的相关资料，看各位大佬的分享。但是，那些零散的碎片拼凑在一起，却始终很难形成一个系统的知识体系，这也是一直让我很头疼的事情。
“道”与“术”的平衡作为一名程序员，我和很多人都一样，看到好的东西就想动手实践。在刚刚了解到 Kafka 的强大功能之后，我就迫不及待地参照 Kafka 官网的教程，着手搭建 Kafka 的服务器。除此之外，我还曾小试牛刀，在 1 万条 /s 的实时环境对接中，使用了 Kafka 作为消息队列。

公开

同步至部落

取消

完成

0/2000

荧光笔

直线

曲线

笔记

复制

AI

深入了解
翻译
英语
中文简体
中文繁体
法语
德语
日语
韩语
俄语
西班牙语
阿拉伯语
解释
总结

黄云是一位后端开发工程师，通过学习Kafka核心技术与实战专栏，深入理解了Kafka的原理、机制和参数。他对胡夕老师的抽象概括能力表示佩服，认为专栏内容精炼实用，帮助他更高效地学习。黄云强调了学习策略，包括多思考、多总结、多动手实践、多回头看、多记笔记和多提问。他鼓励读者不藏拙，勇于提问，认为这是成长的最佳路径。黄云表示专栏结束并感谢胡夕老师的付出，同时指出学习之旅并未结束，他将继续记录并实践专栏中的落地信息，真正做到能懂、会用、能用好。

仅可试看部分内容，如需阅读全部内容，请付费购买文章所属专栏
《Kafka 核心技术与实战》，新⼈⾸单¥68

立即购买

登录后留言

全部留言(10)

最新
精选

大力水手
15 66,057,323 66,001,015 56,308 胡老师请教个问题、分区15不被发现、总是有消费积压、而且是一直递增、好像这个分区没有被发现一样？
作者回复: 可能的原因有：1. 这个分区上有无法处理的消息或corrupted消息使得consumer无法跳过，你可以单独创建一个standalone consumer，只消费这个分区看看是否真的存在这样的消息；2. 你做过增加分区的操作，consumer需要一段时间才能发现这个新分区最好还是查一下日志，看看日志中有没有什么发现
2019-11-07
2
8
林师傅
21天，希望学完这个专栏，第一天打卡，加油！！！
作者回复: 加油💪
2020-03-25

2
罗成林
厉害
作者回复: Thanks man:)
2020-03-21

1
时间是最真的答案
请问同一个id的多条数据，发送到同一个主题的多个分区，怎么保证相同id的多条数据被同一个consumer消费？
作者回复: 赋值消息的key为该id，这样能保证它们去到同一个分区。
2019-11-26
3
1
Geek_72a3d3
咦，回来一看，还有更新～，那我就不客气再请教个问题啦😄，胡夕老师或者黄云老师解答都可以～：请问kafka中的事务和Rocket MQ中的事务根本区别是什么，能不能用简单的几句话总结
作者回复: Rocket MQ的事务机制我不太了解，不敢妄言，哈哈~
2019-10-17

1
Flee
老师你好，我们项目线上的kafka碰到了一个很奇怪的问题，kafka集群已经正常运行了快两年了没有任何问题，就在前几天，我们的一直使用的消费者组突然就不消费数据了。换一个消费者组就能消费到数据，但是过12个小时左右这个新的消费者组又不能消费数据了。这几天下来已经有好几百万的数据积压了。目前还没有找到原因。。。
作者回复: 有什么报错日志吗？
2019-11-08


小可
👍🏻
2019-10-17

4
ifelse
加油奥利给
2021-08-13

1
亚林
阿弥陀佛
2023-03-16归属地：湖南


KK
80/20原则，刻意练习。
2019-11-10



收起评论