随着大数据技术的持续高速发展,大数据应用也已经在各行各业得到了普及,丰富的业务场景也同时对大数据处理技术提出了更高的要求。传统的离线数据处理技术明显已经不能满足当前的需求,用户需要更加实时化的大数据处理技术,同时也希望能够利用 SQL 方式进行开发,甚至更进一步的批流融合统一开发。
在开源实时计算社区中,Storm 作为第一代流计算技术依然在持续发展,Flink 作为新兴流计算技术也开始得到大规模应用,Spark 和 Kafka 也都利用其强大的生态推出了自己的 Streaming 配套技术。
实时计算进入百家争鸣阶段,并且各家也都进一步推出了自己的 Streaming SQL 技术,有的甚至开始考虑 Batch 和 Streaming SQL 的融合,这也许将是未来大数据处理技术更进一步的统一方向。本合辑邀请多位国内外大数据技术专家分享这些新技术的最新发展趋势以及在生产场景的应用。