与big相关精彩内容-云栖社区-阿里云

阿里云HBase SQL一站式解决复杂查询难题

作者: 明朔 170人浏览

在大数据场景中，HBase由于其高吞吐，高并发，实时可见等特性往往被作为在线主存储，云HBase团队融合了在线存储引擎和全文引擎的优势，解决了针对在线大数据存储的复杂查询难题，并提供SQL统一表达，降低用户使用门槛。通过一站式产品能力，用户可以更加灵活高效地解决业务问题。

云栖社区数据存储与数据库分布式大数据分布式系统与计算实时系统 hbase SQL 同步 solr 索引数据同步 phoenix big data

EMR Spark Relational Cache 利用数据预组织加速查询

作者: 健身不健身 188人浏览

在利用Relational Cache进行查询优化时，我们需要通过预计算，存储大量数据。而在查询时，我们真正需要读取的数据量也许并不大。为了能让查询实现秒级响应，这就涉及到优化从大量数据中快速定位所需数据的场景。

Cache 排序 spark aliyun 索引 EMR Group 存储 big data sparksql RelationalCache ZOrder

2019国内外大数据挖掘工具有哪些？有什么特点?

作者: sdydata 85人浏览

数据挖掘工具是使用大数据挖掘技术从互联网的海量数据中发现、采集并挖掘出有有价值数据一种软件。利用特定的技术，例如：Hadoop、Spark……实现对互联网非机构化的大数据进行挖掘并获得正确、有价值数据的一种快速、便捷的方法。

数据存储与数据库 linux 互联网产品及应用 python 深度学习大数据算法分布式系统与计算 java hadoop 互联网数据挖掘自动化测试 big data

【MaxCompute季报】MaxCompute新功能发布 2019Q1

作者: 云花 620人浏览

2019年Q1 MaxCompute发布了一系列新功能。本文对主要新功能和增强功能进行了概述。 SQL新功能预付费资源监控报警 IP白名单支持IPV6 Logview中增加SQL复杂度预付费套餐(计算资源+存储资源)发布西南成都节点正式开服售卖

云栖社区数据存储与数据库分布式大数据分布式系统与计算 SQL Image 存储 big data MaxCompute

对比MySQL，一文看透HBase的能力及使用场景

作者: 天梧 2306人浏览

MySQL + HBase 是我们日常应用中常用的两个数据库，分别解决应用的在线事务问题和大数据场景的海量存储问题。本文内容适合初次理解HBase的读者，包括技术、功能及场景，也欢迎老司机们补充和温故。更多内容，请查看PPT

数据存储与数据库大数据 mysql hbase 数据库 Image spark 存储 big data

YARN提交任务的两种方式

作者: z7one 67人浏览

yarn

big data

使用Quick BI连接AnalyticDB for PostgreSQL数据源

作者: 陆封 757人浏览

本文介绍如何通过阿里云Quick BI连接AnalyticDB for PostgreSQL数据库。

PostgreSQL Greenplum 数据库配置测试控制台 aliyun 分析型数据库 schema 报表 html big data AnalyticDB 数据门户

AnalyticDB for PG 如何作为数据源对接帆软 FineBI

作者: 陆封 3444人浏览

本文介绍分析型数据库 PostgreSQL 版（AnalyticDB for PostgreSQL）如何作为帆软 BI 的数据源，支持 BI 查询展现。

数据存储与数据库 PostgreSQL 数据库数据仓库测试 JDBC ads 分析型数据库 Driver 报表 big data MaxCompute AnalyticDB 帆软

怎样设置“预付费资源到期提醒”消息接收人？

作者: 云花 705人浏览

经常有客户反馈自己的MaxCompute预付费资源组欠费了，Project不能访问了，但自己却没有接收到通知，因为资源组的owner是财务同学或者是运维同学，他们并不关注MaxCompute服务，因此忽略了。

云栖社区数据存储与数据库分布式大数据分布式系统与计算 Image 钉钉控制台 big data MaxCompute

零基础学习大数据的路线和方向

作者: 小猪佩佩 690人浏览

大数据本质是：数据挖掘深度和应用广度的结合。对海量数据进行有效的分析和处理，而不单单是数据量大就叫大数据。随着人们对大数据的认识越来越深入，很多零基础人员看到了大数据的未来，也想学习这个前沿技术，踏入时代的领军行业。

云栖社区编程语言大数据架构算法监控数据可视化 hbase hadoop 日志数据处理数据仓库集群 big data

阿里云安全算法大赛震撼启动这次玩的是“实战”

作者: 云安全专家 2389人浏览

2018年7月底第三届阿里云安全算法大赛已正式启动，由阿里云安全主办，落地阿里云天池平台，以“恶意文件云检测” 作为此次大赛的主题，打造一场更贴近真实场景的“实战” 演练。即日起至8月27日，诚邀中外顶尖算法工程师、高效学者，学生等算法精英参与。

云栖社区深度学习大数据安全网络安全算法云栖大会阿里技术协会云安全沙箱云平台自然语言处理 big data 海量数据处理

老司机告诉你大数据开发：学Hadoop好还是Spark好？

作者: 我是秃但是我很聪明 605人浏览

相信看这篇文章的你们，都和我一样对Hadoop和Apache Spark的选择有一定的疑惑，今天查了不少资料，我们就来谈谈这两种平台的比较与选择吧，看看对于工作和发展，到底哪个更好。一、Hadoop与Spark 1.Spark Spark是一个用来实现快速而通用的集群计算的平台。

云栖社区编程语言分布式大数据架构算法分布式系统与计算 storm hdfs hadoop Apache 数据处理 spark big data

ORACLE大表关联更新提速方法

作者: olaf 321915人浏览

执行两表关联更新时，oracle一般采用类似nested_loop的更新方式。当依据关联关系将表B的值更新到A表的字段中时，先遍历A表的，对A表的每行记录查询B表的索引，得到b表的结果后再更新到A表。由于存在查询索引的操作，更新每条记录都会至少执行两次io操作。

云栖社区数据存储与数据库大数据空间索引原理信息检索算法/实践算法 Oracle 性能源码测试 Image 索引 Create big data

《流浪地球》票房：预测10亿却飚50亿，大数据预测为什么这么难

作者: 小猪佩佩 340人浏览

票房分析可以说是大数据分析一个非常典型的应用了，具有数据来源多(历史票房数据、社交媒体互动、受众反馈等)、数据量大、影响因子多(用户评价、宣传流量、预售量、档期、题材、流量明星)等等特点，可是真正到实践之中仍然不尽如人意。

云栖社区编程语言 linux 大数据架构算法无线 big data 大数据分析

你在使用大数据技术的时候，你知道大数据语言的工具与框架吗？

作者: 小猪佩佩 726人浏览

为了解大数据的当前和未来状态，我们采访了来自28个组织的31位IT技术主管。我们问他们，“你在数据提取，分析和报告中使用的最流行的语言，工具和框架是什么？” 以下的文章是他们告诉我们的记录，经过总结如下。

云栖社区 python 大数据 Java核心技术架构算法 java storm 实时系统数据可视化 hadoop SQL Apache big data

浅谈大数据开发工程师的两年工作经验总结

作者: 小猪佩佩 539人浏览

今年广州的六月，在经历了大雨的洗礼之后，一切都变得更加明朗起来，新的工作，新的人和事。懒惰让我变得更焦虑，焦虑促使我进步，程序员的焦虑大家应该都有共同的感觉，时代的步伐太快了，在这个环境下的软件开发一定会淘汰掉那些不懂得学习，懒惰的人。

云栖社区编程语言大数据算法监控 storm 数据采集前端开发 big data 数据应用

#big#