1. 阿里云>
  2. 云栖社区>
  3. 主题地图>
  4. M>
  5. mongodb 处理大数据

当前主题:mongodb 处理大数据

mongodb 处理大数据相关的博客

查看更多 写博客

如何破解HBase+Elasticseach组合使用遇到的难题

一、背景介绍HBase与ElasticSearch是现代应用在处理海量数据的技术架构会经常被使用的两款产品,其中HBase是一个分布式KV系统,具有灵活Schema、水平扩展、低成本、高并发的优势,但在复杂查询、分析能力方面相对比较弱,特别适合海量半结构化、结

阅读全文

如何破解HBase+Elasticseach组合使用遇到的难题

一、背景介绍HBase与ElasticSearch是现代应用在处理海量数据的技术架构会经常被使用的两款产品,其中HBase是一个分布式KV系统,具有灵活Schema、水平扩展、低成本、高并发的优势,但在复杂查询、分析能力方面相对比较弱,特别适合海量半结构化、结

阅读全文

MongoDB 与大数据

摘要:讲师通过介绍MongoDB的日志审计和慢查询、解析即将商业化的MongoDB索引推荐功能,利用MapReduce&Flink做审计日志分析、以及通过创建索引的最佳实践的例子让大家了解阿里云是如何利用大数据对MongoDB里面的数据和信息做分析的。 本次直

阅读全文

Teradata携手MongoDB整合JSON数据强力助推大数据战略

ZDNET至顶网CIO与应用频道 06月24日 综合消息:数据分析平台、应用和服务供应商Teradata天睿公司宣布,携手MongoDB公司,通过创建基于JavaScript Object Notion(JSON)的高速双向连接器,整合双方系统。该连接器将帮

阅读全文

Mongodb大数据语法大全

JSON和MONGODB JSON不止是一种交换数据的方式,也是一种存储数据的良好方式,实际上MONGODB并未使用JSON存储数据,而是使用由MONGODB团队开发的一种称为BSON的开放数据格式。 面向文档存储BSON BSON是一个开放标准,BSON存储

阅读全文

由数据迁移至MongoDB导致的数据不一致问题及解决方案

本文是“我和MongoDB的故事”MongoDB征文比赛的二等奖得主杨庆麟的文章。下面我们一起来欣赏下。 # 故事背景 # # 企业现状 2019年年初,我接到了一个神秘电话,电话那头竟然准确的说出了我的昵称:上海小胖。 我想这事情不简单,就回了句:您好,我

阅读全文

专访MongoDB官方大中华区首席架构师唐建法:MongoDB将会领导数据处理新趋势 —— 一个操作型的数据平台

杭州·云栖大会将于2016年10月13-16日在云栖小镇举办,在这场标签为互联网、创新、创业的云计算盛宴上,众多行业精英都将在这几天里分享超过450个演讲主题。 为了帮助大家进一步了解这场全球前言技术共振盛会的内容,云栖社区采访了各个论坛的大咖,以飨读者。

阅读全文

MongoShake——基于MongoDB的跨数据中心的数据复制平台

背景 在当前的数据库系统生态中,大部分系统都支持多个节点实例间的数据同步机制,如Mysql Master/Slave主从同步,Redis AOF主从同步等,MongoDB更是支持3节点及以上的副本集同步,上述机制很好的支撑了一个逻辑单元的数据冗余高可用。 跨

阅读全文

mongodb 处理大数据相关问答

查看更多 提问题

mongodb 32位大数据量处理的问题

使用mongodb存储系统日志,小批量测试没有问题 大批量储存时mongodb后台一直报错,内容乱码. 大概是200多万的时候,512M的文件创建成功,1024的无法创建了.后台就开始报错. 我使用的是 mongodb默认配置,机器是XP,32位,2G内

阅读全文

关于MongoDB数据恢复

由于一些原因,MongoDB的服务断电了,用的是window,重新开启电脑,开启MongoDB,发现数据全部没了,一点痕迹都没有,有人遇到过吗?这种情况是怎么处理的,虽然这个数据不是很重要。 本问题及下方已被采纳的回答均来自云栖社区【Redis&Mong

阅读全文

[问题] 阿里云国际站的VPC底下云数据库MongoDB內数据,传输至阿里云中国站的MaxCompute方法?

请问下,阿里云国际站的亚太东南3可用区A的MongoDB数据可以传输至中国站华东2的MaxCompute吗? 目前专案要将海外资料做语意分析PAI处理,需要将国际站资料汇入中国站PAI平台上,目前是考虑传输到MaxCompute上,或是有其他更好方法? 请提供

阅读全文

E-MapReduce是否支持以现有Mongodb分片集群数据库做数据源?

我们现在用Hadoop的MapReduce来分析数据,以mongodb为输入的数据源,分析后再存储在mongodb中,能否在几乎不改动程序的情况下用阿里云的这个E-MapReduce?阿里云的E-MapReduce支持这种方式么?还是需要将数据源拿过来另做处理

阅读全文

Mongodb能够支持复杂项目的数据库吗?

本人最近做一个O2O平台项目(含管理、预约、支付、接入微信等),当初出于人员能力、成本等考虑,选择了标准的MEAN作为技术选型。做起来确实很快,但随着项目需求的迭代,我感觉该技术选型特别是mongodb存在非常多的局限,主要如下: 1、mongodb不支持j

阅读全文

大量mysql数据怎么快速导入到Mongodb?

现有2个mysql表 不同字段的2个表 总共是1200多W条记录,现在想导入到mongodb 一个表中 每条记录都要经过一定的处理。 所以想请教有什么最快的方式来处理这个数据。 求大牛指导。

阅读全文

MongoDB+Mysql 做积分系统碰到的问题

最近项目要做一个积分系统(项目基于Spring框架),刚开始只用MongoDB做,但过程中涉及到多表操作,遇到数据一致性的问题,查资料说可以利用两阶段提交去模拟事务,但代码实现起来有点复杂;如果换Mysql的话,还有一些其他数据在MongoDB上,比如用户的一

阅读全文

大数据时代——数据存储技术百问

如今计算机已经渗透到企业运作的各个角落,企业依靠所存放的这些业务数据进行决策,因此企业如何存放数据成为企业信息系统的重中之重,这也掀起了如今的存储热潮。根据不同的应用环境通过采取合理、安全、有效的方式将数据保存并能保证有效的访问需要更高要求的存储模式。 ![

阅读全文