没有任何单一技术能重塑整个企业IT世界
极客时间编辑部
讲述：初明明大小：3.85M时长：04:13
Architecht 的创始人德里克·哈里斯（Derrick Harris）长期关注 Hadoop 项目及其背后公司的发展情况，因此，在过去一年亲眼见证项目逐步从人们视野中消失之后，他开始思考到底出了怎么状况。近日，哈里斯发文分享了他观察到的 IT 世界的五个趋势，具体如下。
近十年来，Hadoop 一直是“大数据”领域的典型代表。在初期，人们希望通过分析 Hadoop 中的大量非结构化数据，发现新的趋势或者独特的业务洞察能力，实现数据驱动目标。然而，现在回顾起来，Hadoop 似乎永远无法达成其崇高的发展愿景。虽然 Hadoop 项目仍然又大又新，但如今的世界已经快速转至更重视速度、灵活性、微观要素甚至是已知数量的阶段。
随着云计算、容器化、深度学习、微服务的广泛应用，Hadoop 虽然继续存在且不断发展，但却已经越来越不可能成为很多人当初预测的那种不可或缺的基础性技术。相反，大多数社区开始采用更快、模块化程度更高且更为简单的工具与平台集合，并将数据作为应用程序架构中的一种组成部分，而非单纯有待分析的素材。
具体来讲，哈里斯现在观察到了以下趋势：
第一，流数据与事件驱动型架构越来越受欢迎。虽然其背后的基本思路已经拥有一定历史，但如今的技术与架构进步真正将其转化为现实，包括流处理甚至是基于函数（又称无服务器）计算。在大多数情况下，快速处理数据的能力要比批量处理数据或者对历史数据进行分析等方法更具价值。
第二，Apache Kafka 正成为越来越多数据架构中的神经系统。Kafka 不仅能够提供上述多种功能，同时爆棚的人气也使其成为各类项目与技术供应商的优先选择。Kafka 开始成为一切其它数据功能不可忽视的核心平台。只要启动并运行 Kafka，它就能够完成将数据导入 Hadoop 及其它批处理系统的工作。
第三，云计算已经在基础设施、存储、数据分析以及 AI 服务等领域占据主导地位。Amazon S3 等数据存储服务在使用感受上，要比管理复杂的文件系统更轻松也更便宜。云服务供应商带来大量能够对全部数据进行分析与建模的现成方法，包括人工智能以及机器学习等功能。对于相当一部分（虽然不是全部）企业而言，管理自有数据基础设施与应用程序的弊端，已经大大超过收益。
第四，关系数据库，包括数据仓库，仍然拥有旺盛的生命力， 其它一些数据库选项（例如 Postgres）也在蓬勃发展。由云服务带来的操作便捷性无疑是这些方案得以复兴的重大因素；此外，众多受到 Hadoop、NoSQL 以及过去十年来各类数据技术影响的新功能也在持续涌现。
第五，Kubernetes 正成为面向所有内容的默认业务流程层，其中自然包括数据系统与 AI。这缓解了市场对于 Hadoop 类数据编排平台（例如 YARN）的需求，同时鼓励用户采用更符合云原生价值主张的技术。简而言之，就是以微服务架构取代整体式架构，以大量小集群取代单一大型共享集群。
虽然跨越众多服务与技术开发数据架构仍然相当困难，但如今的工具确实带来了诸多优势。这些优势，已经远远超越单一、整体式平台的供应范畴。工程师们可以随意使用自己熟悉以及喜爱的工具。随着更多新生事物的出现，他们也能够更轻松地进行实验，并非常自信地将它们整合起来发挥更大的作用。更重要的是，他们也可以借此让业务需求成为新技术采用的原动力，最终打破技术决策限制业务可行性的陈旧怪圈。
Hadoop 让人们了解到大数据中蕴藏的无限可能，但同时也提醒人们，没有任何单一技术有能力重塑整个企业 IT 世界，至少以后不会再有。
公开
同步至部落
取消
完成
0/2000
荧光笔
直线
曲线笔记
复制
AI
- 深入了解
- 翻译
- 解释
- 总结
该免费文章来自《极客视点》，如需阅读全部文章，
请先领取课程
请先领取课程
免费领取
© 版权归极客邦科技所有，未经许可不得传播售卖。 页面已增加防盗追踪，如有侵权极客邦将依法追究其法律责任。
登录 后留言
精选留言
由作者筛选后的优质留言将会公开显示，欢迎踊跃留言。
收起评论