1. 云栖社区>
  2. 全部标签>
  3. #数据仓库#
数据仓库

#数据仓库#

已有6人关注此标签

内容分类:
博客 | 问答 | 视频 | 资料 |

基于Hadoop的数据分析平台搭建

企业发展到一定规模都会搭建单独的BI平台来做数据分析,即OLAP(联机分析处理),一般都是基于数据库技术来构建,基本都是单机产品。除了业务数据的相关分析外,互联网企业还会对用户行为进行分析,进一步挖掘潜在价值,这时数据就会膨胀得很厉害,一天的数据量可能会成千万或上亿,对基于数据库的传统数据分析平台的数据存储和分析计算带来了很大挑战。

hbase hdfs hadoop 性能 SQL 数据处理 数据库 数据仓库 数据分析 同步 spark 离线计算 Hive 数据同步 存储

大数据情报第二期(2018-6-19)

《京东构建了全球最大的Kubernetes集群,没有之一》在 JDOS 1.0 中,因为容器更多的是以胖容器的形式存在,因此容器的使用相对来说是静态的,也就是一次调度完成后容器不会轻易迁移。除非节点故障、维护等特殊情况,则将其迁移到别的节点。

分布式 大数据 redis 数据仓库 容器 弹性计算 云服务 service 存储 数据存储

数据运营时代,如何基于AnalyticDB构建企业实时数仓?

万事万物每时每刻都在产生大量的数据,数据无处不在,如何降低企业大数据的建设门槛,使得大数据分析成为一种人人都可以获得的普惠能力呢?在本文中,阿里云高级算法专家缪长风(刘林豆)就为大家分享了如何基于AnalyticDB构建企业实时数仓。

大数据 mysql 日志 数据库 高并发 数据仓库 报表 存储 AnalyticDB

“帮助企业做好MaxCompute成本优化的实践” 主题分享 6月21日 18:30不见不散

在这个初夏,MaxCompute与大数据开发者们共同开启 “因计算,共成长” 分享季。 第一季《MaxCompute开发实战,爽爽不油腻》,共四次主题分享,每周二 18:30-19:00 “MaxCompute开发者交流钉钉群” 在这里等你。

大数据 数据仓库 odps 钉钉 aliyun 数据同步 数据存储 MaxCompute

大数据情报2018-6-19

《京东构建了全球最大的Kubernetes集群,没有之一》在 JDOS 1.0 中,因为容器更多的是以胖容器的形式存在,因此容器的使用相对来说是静态的,也就是一次调度完成后容器不会轻易迁移。除非节点故障、维护等特殊情况,则将其迁移到别的节点。

分布式 大数据 redis 数据仓库 容器 弹性计算 云服务 service 存储 数据存储

【直击数博会】BQ商业分析在用友大数据中扮演了怎样的角色

5月25日~5月29日,由国家发改委、贵州省政府主办的中国大数据产业峰会暨中国电子商务创新发展峰会(以下简称数博会)在贵阳国际生态会议中心举行。用友网络大数据整体解决方案和iUAP全系产品在数博会上齐齐亮相,其中用友大数据更是首次整体亮相大型展会。

云栖社区 大数据 监控 数据仓库 解决方案 开发环境 报表 数据管理 数据应用

Ebistrategy亦策软件与宝信数据达成合作协议

在越来越讲究绿色环保的今天,数据也提倡高效节能,绿色数据中心是未来的一个发展目标。建设绿色数据中心,可以达到节省运维成本、提高数据中心容量、提高系统的可靠性及可扩展的灵活性等效果。绿色数据中心是新一代数据中心发展的重要方向之一,建立并运行一个绿色数据中心包括先进的技术和策略。

云栖社区 大数据 数据可视化 数据仓库 数据挖掘 解决方案 运营 数据中心 大数据分析

阿里云MVP Meetup 《云数据·大计算:海量日志数据分析与应用》之《数据质量监控》篇

本手册为阿里云MVP Meetup Workshop《云计算·大数据:海量日志数据分析与应用》的《数据质量监控》篇而准备。主要阐述在使用大数据开发套件过程中如何将已经采集至MaxCompute上的日志数据质量进行监控,学员可以根据本实验手册,去学习如何创建表的监控规则,如何去订阅表等。

大数据 监控 日志 配置 数据仓库 数据分析 数加 aliyun 表达式 异构数据 MaxCompute DataWorks 数据质量

【友盟+】COO叶谦:全域数据 智能未来

在2016中国互联网大会全域大数据应用论坛上,【友盟+】COO叶谦对全域数据做了更为深入的阐释,同时也分享了【友盟+】全域数据应用上的研究。 叶谦表示,全域数据能力包括全面的数据采集能力、全面的数据处理能力和全面的数据服务能力。

云栖社区 大数据 数据处理 数据仓库 数据分析 运营 数据采集 海量数据 数据应用

上海云栖Clouder Lab—小微金融业务跨平台数据共享与处理课程实践

近来各类小微金融业务不断涌现,这些数字化金融创新背后是各种复杂的数据采集、交换、以及构建的过程。 本次Clouder Lab的课程中,我们会以一个第三方支付业务的风控场景为案例,演示如何通过阿里云产品解决核心数据互通的痛点,通过Serverless架构应对业务增长,通过与各计算分析引擎支持建立风控平台对机构和用户进行服务。

架构 OSS 日志 workshop 数据仓库 钉钉 aliyun 数据采集 异构数据 存储 海量数据

2018上海云栖大会workshop-日志数据采集与分析对接

日志数据采集与分析对接 课程描述 通过日志服务采集用户、数据库、业务等访问数据。演示对于业务日志分析与处理,程序日志查询与监控,打通日志与数据仓库对接案例。 日志种类 网站访问日志准备步骤 & 依赖 ECS虚拟机(测试账号默认包含,并且访问日志产生) OSSBucket 用做数据仓库,存储日志服.

nginx OSS ECS 日志 云栖大会 workshop 配置 数据仓库 RAM request cdn 同步 数据采集 可视化 采集分析

不得不关注的企业管理新趋势

随着企业管理需求的多元化,各类企业管理软件层出不穷,其中,8Manage从自主研发起步,十几年来专注于企业管理软件的深耕发展,致力于做用户体验一流的企业一体化管理产品。过去企业级软件的核心是以管控流程为中心,以线形的流程管理为代表,而移动互联网时代则是以用户体验为中心,以联动式一体化管理为代表。

云栖社区 架构 用户体验 数据仓库 数据挖掘 移动互联网

让云中数据更有价值 Cloud Integration消除云的鸿沟

云计算现在在很多企业中都扮演着重要角色,从管理销售流程各个环节的应用系统,到营销、人力资源、分析和业务报告应用系统,应有尽有。如,Salesforce.com 承诺可以更智能、更快速地助您完成销售;Workday 则可以简化财务和人力资源流程;Service Cloud可以提高服务速度,等等。

Cloud 数据流 数据仓库 解决方案 数据类型 数据管理

数据实验室:让您的数据获得真正的价值

面对巨量的数据,许多公司开始采用现代化的开采工具,并从这种新形式的经济资源中获取价值。事实上,一些有前瞻性的组织在多年前甚至几十年前就开始利用大数据来获取洞察。 这是一个不断演变的、并由越来越大的数据量驱动的大数据之旅。

大数据 安全 基础设施 数据仓库 数据分析 解决方案 数据存储

直面大数据撞击这个时代——畅享网成功举办大数据应用沙龙

当下,大数据已经成为重要的生产因素,人们对于海量数据的挖掘和运用,预示着新一波生产率增长和消费者盈余浪潮的到来。8月24日下午,一场关于大数据应用的高端沙龙在上海掀起了一片关于大数据讨论的热浪。此次活动是由畅享网携手上海大数据联盟和IBM共同举办。

云栖社区 大数据 hadoop 数据仓库 数据分析 分布式计算 分布式存储 IBM 大数据分析 海量数据 流数据

ubuntu 安装 mongodb并修改仓库路径

记一次安装mongodb的过程 机器情况:系统是ubuntu18.04,由于最初装系统的时候瞎装,导致现在根目录/下空间不足,而/home目录下剩余空间充足. 开始安装,参考官网步骤 sudo apt-key adv --keyserver hkp://keyserver.

数据存储与数据库 javascript MongoDB ubuntu 根目录 数据仓库 exception list service

探索挖掘数据的洪荒之力

9月12日-9月14日,2016中国(北京)国际大数据产业博览会暨高峰论坛,在北京·中国国际展览中心举行。本届展会以"促进大数据时代变革、共赢新时代机遇和挑战"为主题,展示了大数据产业领域的最新成果、新技术,吸引了众多业内人士参加交流。

云栖社区 大数据 数据可视化 数据仓库 数据分析 数据挖掘 解决方案 大数据分析

【云周刊】第163期:中国唯一,阿里云进入Forrester大数据服务榜单

中国唯一,阿里云进入Forrester大数据服务榜单,阿里云东南亚第三个大区开服,建成亚洲最大云计算平台,2018深圳云栖拉开帷幕,飞天技术汇五大专场邀你参加~,知识图谱数据构建的“硬骨头”,阿里工程师如何拿下?...更多精彩内容,尽在云周刊!

深度学习 大数据 飞天 程序员 公有云 数据仓库 云周刊 运营 云服务 知识图谱

中科创星投资云游九州,布局时空大数据

时间和空间是几乎所有数据的共同特征,时空维度的大数据分析对商业服务、智慧城市、环境保护、现代农业和公共安全等众多领域均有重要意义。 近日,专注于“硬科技”领域的投资平台中科创星,向北京云游九州科技发展有限公司投资数百万元人民币,并聘请联合创始人李振宇先生担任中科院西安光机所大数据工程应用中心副主任。

云栖社区 大数据 布局 数据仓库 物联网 移动互联网 数据存储 大数据分析

还不知道AIOps嘛?阿里这么火的智能运维,你不能不知道!

业务通过产品技术发挥价值的一个必要条件就是可以在线上稳定持续的运行,这一直是运维人员的终极目标。相信大家在使用天猫、淘宝、支付宝时几乎没有遇到过无法使用的情况,阿里是如何做到的呢?AIOps又是什么?本文主要关注线上业务的研发和运维流程,由阿里云高级技术专家向大家介绍如何将机器学习算法引入运维中的监控和故障分析领域,探索智能运维解决方案。

算法 监控 数据仓库 淘宝

104
GO