MongoDB 高手课
唐建法(TJ)
Tapdata CTO、MongoDB 中文社区主席、前 MongoDB 大中华区首席架构师
19351 人已学习
新⼈⾸单¥59
课程目录
已完结/共 53 讲
MongoDB 高手课
登录|注册
留言
6
收藏
沉浸
阅读
分享
手机端
回顶部
当前播放: 47 | MongoDB + Spark实时大数据
00:00 / 00:00
高清
  • 高清
1.0x
  • 2.0x
  • 1.5x
  • 1.25x
  • 1.0x
  • 0.75x
  • 0.5x
网页全屏
全屏
00:00
付费课程,可试看
01 | 课程介绍
02 | 内容综述
03 | 认识文档数据库MongoDB
04 | MongoDB特色及优势
05 | 实验:安装MongoDB
06 | MongoDB基本操作
07 | 实验:Hello World程序开发
08 | 聚合查询
09 | 实验:聚合查询
10 | 复制集机制及原理
11 | 实验:搭建MongoDB复制集
12 | MongoDB全家桶
13 | 模型设计基础
14 | JSON文档模型设计特点
15 | 文档模型设计之一:基础设计
16 | 文档模型设计之二:工况细化
17 | 文档模型设计之三:模式套用
18 | 设计模式集锦
19 | 事务开发:写操作事务
20 | 事务开发:读操作事务之一
21 | 事务开发:读操作事务之二
22 | 事务开发:多文档事务
23 | Change Stream
24 | MongoDB开发最佳实践
25 | 分片集群机制及原理
26 | 分片集群设计
27 | 实验:分片集群搭建及扩容
28 | MongoDB监控最佳实践
29 | MongoDB备份与恢复
30 | 备份与恢复操作
31 | MongoDB安全架构
32 | MongoDB安全加固实践
33 | MongoDB索引机制(一)
34 | MongoDB索引机制(二)
35 | MongoDB读写性能机制
36 | 性能诊断工具
37 | 高级集群设计:两地三中心
38 | 实验:搭建两地三中心集群
39 | 高级集群设计:全球多写
40 | MongoDB上线及升级
41 | MongoDB应用场景及选型
42 | MongoDB典型案例(一)
43 | MongoDB典型案例(二)
44 | 关系型数据库迁移
45 | 数据库迁移方式及工具
46 | Oracle迁移实战
47 | MongoDB + Spark实时大数据
48 | MongoDB + Spark连接实战
49 | MongoDB SQL套接件
50 | MongoDB与微服务
51 | MongoDB与数据中台
52 | MongoDB数据中台案例
53 | 结果测试&结束语
登录 后留言

全部留言(6)

  • 最新
  • 精选
rayallen335
老师您好,请问一下Spark+MongoDB比Spark+HBase的架构有哪些优点

作者回复: HBase 和 MongoDB在这种和Spark场景下是比较类似的,可以互换。如果数据仅仅是用来做spark 分析计算,HBase可能还有一些性能上的优势。 MongoDB的好处是,你很可能已经用MongoDB在存储业务产生的数据,当你需要再做分析的时候不需要再把数据导到大数据平台(HDFS/Hbase)一份。你可以直接加上spark计算框架就可以完成分析了。节省存储,节省人力。

2020-02-19
2
8
qbit
老师能直观简要的说一下对 spark 和 flink 的感受吗?

作者回复: flink 是一个专门的流处理计算软件,关注对“现在产生的数据”。 spark 除了能做流处理,更多的是批处理能力,对“现在和以前的数据”做回顾式计算和分析。 flink 和 spark 的一个模块,spark stream更有可比性。 flink的实时能力更强一些,颗粒度是一条数据。spark stream是基于微批,所以颗粒度粗一点。

2020-02-19
2
3
Robin.Ku
唐老师你好,这节讲的课程提到的CASE: 1、请问Spark + MongoDB 选型改成 Spark + Elasticsearch 架构如何? 2、MongoDB 和 Elasticsearch 对比的主要应用场景和对比如何?

作者回复: 在这个场景下是两者都是okay的,因为是批量计算完了存储结果的场景,然后只是用来读。 ES和mongo相比有一个比较关键的点就是实时更新能力。ES一般不建议做实时更新,因为索引更新耗时很长。所以如果你需要实时更新某些数据并且马上查询,ES会有索引不及时更新的情况导致数据不够一致。

2020-03-29
2
楚翔style
spark-local模式吗?运价计算那个例子。

作者回复: 是的,那个示例用的是local 模式。

2020-07-29
Geek_97446b
请问下,这样的 mongodb 集群有多少个节点,是什么样的一个集群模式?
2023-03-08
龙行天下
spark + mongodb 如果要像hdfs将大量的数据读过来,是否会更浪费时间,毕竟hdfs是将任务下沉到各个节点,处理完了收集上来,统一处理,而mongodb要么在mongo服务端就做过滤,如果需求需要将1GB左右数据读过来,那有何好办法
2020-11-20
收起评论