MongoDB + Spark: 完整的大数据解决方案
2017-11-04
1336
版权
版权声明：
本文内容由阿里云实名注册用户自发贡献，版权归原作者所有，阿里云开发者社区不拥有其著作权，亦不承担相应法律责任。具体规则请查看《
阿里云开发者社区用户服务协议》和
《阿里云开发者社区知识产权保护指引》。如果您发现本社区中有涉嫌抄袭的内容，填写
侵权投诉表单进行举报，一经查实，本社区将立刻删除涉嫌侵权内容。
本文涉及的产品
简介：
转一篇文章，貌似大数据解决方案这块，MongoDB和HDFS还要较量一番。http://www.mongoing.com/tj/mongodb_shanghai_spark其余可参考的：http://blog.
相关实践学习
快速掌握 MongoDB 数据库
本课程主要讲解MongoDB数据库的基本知识，包括MongoDB数据库的安装、配置、服务的启动、数据的CRUD操作函数使用、MongoDB索引的使用（唯一索引、地理索引、过期索引、全文索引等）、MapReduce操作实现、用户管理、Java对MongoDB的操作支持（基于2.x驱动与3.x驱动的完全讲解）。 通过学习此课程，读者将具备MongoDB数据库的开发能力，并且能够使用MongoDB进行项目开发。 相关的阿里云产品：云数据库 MongoDB版 云数据库MongoDB版支持ReplicaSet和Sharding两种部署架构，具备安全审计，时间点备份等多项企业能力。在互联网、物联网、游戏、金融等领域被广泛采用。 云数据库MongoDB版（ApsaraDB for MongoDB）完全兼容MongoDB协议，基于飞天分布式系统和高可靠存储引擎，提供多节点高可用架构、弹性扩容、容灾、备份回滚、性能优化等解决方案。 产品详情: https://www.aliyun.com/product/mongodb
目录
相关文章
|
3月前
|
机器学习/深度学习
SQL
分布式计算
|
7天前
|
分布式计算
Hadoop
大数据
大数据技术与Python：结合Spark和Hadoop进行分布式计算
【4月更文挑战第12天】本文介绍了大数据技术及其4V特性，阐述了Hadoop和Spark在大数据处理中的作用。Hadoop提供分布式文件系统和MapReduce，Spark则为内存计算提供快速处理能力。通过Python结合Spark和Hadoop，可在分布式环境中进行数据处理和分析。文章详细讲解了如何配置Python环境、安装Spark和Hadoop，以及使用Python编写和提交代码到集群进行计算。掌握这些技能有助于应对大数据挑战。
23
1
1
|
3月前
|
机器学习/深度学习
SQL
分布式计算
|
1月前
|
NoSQL
atlas
MongoDB
|
2月前
|
分布式计算
大数据
Java
|
3月前
|
分布式计算
监控
大数据
|
3月前
|
NoSQL
安全
MongoDB
|
4月前
|
分布式计算
大数据
Linux
|
2月前
|
分布式计算
DataWorks
IDE
MaxCompute数据问题之忽略脏数据如何解决
MaxCompute数据包含存储在MaxCompute服务中的表、分区以及其他数据结构；本合集将提供MaxCompute数据的管理和优化指南，以及数据操作中的常见问题和解决策略。
47
0
0
|
2月前
|
SQL
存储
分布式计算
MaxCompute问题之下载数据如何解决
MaxCompute数据包含存储在MaxCompute服务中的表、分区以及其他数据结构；本合集将提供MaxCompute数据的管理和优化指南，以及数据操作中的常见问题和解决策略。
38
0
0
热门文章
最新文章
1
数据之势丨从“看数”到“用数”，百年制造企业用大数据实现“降本增效”
2
利用Hive与Hadoop构建大数据仓库：从零到一
3
【Flume】Flume在大数据分析领域的应用
4
大模型开发：你如何使用大数据进行模型训练？
5
基于Python的数据可视化技术在大数据分析中的应用
6
Java语言在大数据处理中的应用
7
大数据基础：Linux基础详解
8
探索云原生技术在大数据分析中的应用
9
大数据定义详解
10
Redis HyperLogLog: 高效统计大数据集的神秘利器
1
Spark学习---SparkSQL（概述、编程、数据的加载和保存、自定义UDFA、项目实战）
76
2
安装Spark
32
3
Spark环境搭建与使用
33
4
Spark学习---day07、Spark内核（Shuffle、任务执行）
40
5
Spark读取变更Hudi数据集Schema实现分析
36
6
实战|使用Spark Streaming写入Hudi
39
7
adb spark的lakehouse api访问内表数据，还支持算子下推吗
107
8
Spark学习---day06、Spark内核（源码提交流程、任务执行）
39
9
Spark学习--day05、SparkCore电商网站实操、SparkCore-工程代码
65
10
Spark【Spark学习大纲】简介+生态+RDD+安装+使用（xmind分享）
30