1. 云栖社区>
  2. 全部标签>
  3. #数据存储#
数据存储

#数据存储#

已有2人关注此标签

内容分类:
博客 | 问答 | 视频 | 资料 |

Spark的误解-不仅spark是内存计算,hadoop也是内存计算

市面上有一些初学者的误解,他们拿spark和hadoop比较时就会说,Spark是内存计算,内存计算是spark的特性。请问在计算机领域,mysql,redis,ssh框架等等他们不是内存计算吗?依据冯诺依曼体系结构,有什么技术的程序不是在内存中运行,需要数据从硬盘中拉取,然后供cpu进行执行?所有说sprk的特点是内存计算相当于什么都没有说。

算法 hadoop spark 磁盘 存储 数据存储 工作流

使用H2数据库进行单元测试

背景 H2 数据库是一个开源的嵌入型内存数据库,采用纯Java语言实现; 程序非常小巧轻便,整个完整的Jar包也只有1.5M左右,很容易集成到项目中。 官网地址http://www.h2database.

数据库 spring 测试 脚本 数据库存储 scope 自动化测试 单元测试 数据存储

P2P结构与Quorum机制------《Designing Data-Intensive Applications》读书笔记8

前文涉及到了很多与Leader相关的算法,大家有木有想过,王侯将相,宁有种乎,既然Leader这么麻烦,干脆还是采用P2P模型吧,来个大家平等的架构。本篇需要和大家探讨的就是多副本下实现民主政治的Quorum机制。

算法 node Cassandra 数据存储

流式计算与计算抽象化------《Designing Data-Intensive Applications》读书笔记15

上篇的内容,我们探讨了分布式计算中的MapReduce与批处理。所以本篇我们将继续探索分布式计算优化的相关细节,并且分析MapReduce与批处理的局限性,看看流式计算是否能给我们在分布式计算层面提供一个更好的解决方案。

消息队列 函数 数据流 流式计算 分布式计算 分布式存储 Mapreduce 数据存储 流计算

大数据小视角1:从行存储到RCFile

前段时间一直在忙碌写毕设与项目的事情,很久没有写一些学习心得与工作记录了,开了一个新的坑,希望能继续坚持写作与记录分布式存储相关的知识。为什么叫小视角呢?因为属于随想型的内容,可能一个由小的视角来审视海量数据的存储与计算技术,把知识点分为两到三章来梳理。

大数据 性能 数据处理 布局 数据节点 分布式存储 facebook Group 存储 数据存储 海量数据

告诉你 SQL 数据库与 NoSQL 数据库的区别

简单来说 SQL 数据库和 NoSQL 数据库有着共同的目标:存储数据,但存储的方式不同 一. 表 SQL中的表结构具有严格的数据模式约束: 存储数据很难出错。

javascript NOSQL SQL 数据库 存储 数据存储

区块链白皮书大全(2018分行业)

2018年各行业区块链应用白皮书的最新完整清单:游戏与虚拟现实、社交与沟通、金融、物流与供应链、交通旅游、投资、保险、信息技术、商业与零售等。

资产管理 电商 虚拟现实 network 数据存储

以太坊开发DApp实战教程——用区块链、星际文件系统(IPFS)、Node.js和MongoDB来构建电商平台

第一节 简介 欢迎和我们一起来用以太坊实战开发构建一个去中心化电商DApp!我们将会构建一个类似淘宝的在线电子商务应用,我将使用区块链、星际文件系统(IPFS)、Node.js和MongoDB来构建电商平台,卖家可以自由地出售商品,买家可以自由地购物: 去中心化: 和淘宝或eBay不同,我们把所有的商业逻辑和核心数据都放在以太坊区块链上,这使 得它成为一个完全去中心化的应用。

javascript MongoDB 服务器 数据库 js 敏捷开发 电商 node 淘宝 存储 数据存储

阿里云弹性计算-图形工作站(公测)发布

产品介绍: 阿里云图形工作站,基于GPU 实例,采用Nvidia/AMD 专业GPU,集成了远程桌面功能,非线编软件以及数据存储系统在内的一套完整图形图像处理流程,旨在满足一些高端用户在使用阿里云GPU可视计算实例时的极致桌面体验,如高清桌面的实时交互。

弹性计算 远程桌面 GPU 存储 数据存储

2区块链底层技术-逻辑架构

区块链因为比特币而为大家熟知,随之而来衍生出一些优秀的项目,比较有代表性的有以太坊(Ethereum)、锯齿湖(Sawtooth Lake)、超级账本(Hyperledger)、比特股(bitshares)、瑞波(Ripple)、小蚁等,根据不同的应用场景分为应用于公众的公有链,需要授权使用的私有链和联盟链,还有在原有区块链基础上进行扩展的侧链等,随着区块链的发展,相信还会有其他形式的应用出现,任何的应用都不是绝对的,应该按实际的业务需求来定。

分布式 架构 性能 分布式架构 分布式系统 数据存储 区块链

1区块链底层技术-序

  每次在讲解区块链时,都会收到很多关于底层技术问题,感觉很有必要对区块链的底层技术进行分享,这也是我写这一系列文章的动力。   2015年接触比特币(可惜当时没有囤币),作为一个在IT行业摸爬滚打多年,并且是技术出身的人,成功的被比特币底层技术-区块链所吸引。

分布式 数据存储

Hibernate小解惑

  1、什么是SessionFactory?什么是Session?httpsession和hibernate的session的有什么区别?     SessionFactory接口负责初始化Hibernate。

SQL 线程 数据库 fetch session Hibernate 数据存储

Redis学习一(基础入门).

一、前言     Redis是一个开源的使用ANSI C语言编写、遵守BSD协议、支持网络、可基于内存亦可持久化的日志型、key-Value 的数据库、并提供多种语言的API。     通常,Redis 将数据存储于内存中,或被配置为使用虚拟内存。

redis 日志 HASH string page 磁盘 pattern 存储 数据类型 数据存储

Android ORMLite数据库简介

 一般的项目中,Android自身提供的SQLite数据库,可以满足轻量级的数据存储应用,但是,只要是存储模型稍微复杂的项目,以及数据结构模型复杂的应用,就很难再用SQLite支撑整个项目的数据存储。

android java 数据库 string static class void database 存储 数据存储

Android NoSQL之SnappyDB

Android NoSQL之SnappyDB 常规到的Android开发需要SQLite或者ORMLite这样的数据库存储数据,但是在有些情况下,基于键值对的数据存储效率更高,使用更便捷,在平台级的Java EE项目中,有一种去SQL的趋势和技术,Android平台上也有此类NoSQL技术解决方案,SnappyDB就是一款Android平台上的开源数据存储NoSQL解决方案。

android NOSQL 解决方案 string static exception class 数据库存储 void arraylist github 数据存储

智能交通背后的物联网技术应用

无论你居住在哪个城市,你总会遇到交通问题。当这个城市的人口和他们拥有的汽车数量增加时,这个问题变得更加严重。而且,每个国家的城市交通系统越来越差,因此,如果没有更智能的技术的帮助,就很难思考如何解决这个问题。

云栖社区 大数据 安全 性能 物联网 数据存储

Redis持久化方式

Snapsotting(快照RDB)方式      snapsotting是默认方式,(把数据做一个备份,将数据存储在文件)       这种方式将内存中数据照快照方式写到二进制文件中.默认的文件名为“dump.rdb”。

redis 函数 性能 配置 同步 磁盘 数据恢复 dump 数据存储

WPF---Binding学习(一)

转自:http://blog.csdn.net/lisenyang/article/details/18312199 1,Data Binding在WPF中的地位 程序的本质是数据+算法。数据会在存储、逻辑和界面三层之间流通,所以站在数据的角度上来看,这三层都很重要。

算法 用户界面 单元测试 存储 数据存储

MongoDB 安装

介绍: MongoDB 是一个基于分布式文件存储的数据库。由C++语言编写。旨在为WEB应用提供可扩展的高性能数据存储解决方案。MongoDB 是一个介于关系数据库和非关系数据库之间的产品,是非关系数据库当中功能最丰富,最像关系数据库的。

分布式 MongoDB 日志 LOG c++ 面向对象 数据库 DB 索引 高性能 数据结构 存储 数据类型 数据存储

Android - SharedPreferences

以键值对的方式来存储数据。不要把密码存在这里。 将数据存储到SharedPreference中,首先需要一个SharedPreference对象。 获取这个对象有三种方法: 1)Context类中的getSharedPreferences()方法       往这个方法中传入2个参数。

android editor 存储 activity 数据存储

276
GO