1. 云栖社区>
  2. 全部标签>
  3. #e-mapreduce#
e-mapreduce

#e-mapreduce#

已有0人关注此标签

内容分类:
博客 | 问答 | 课程 |

4月21日云栖精选夜读:【校园头条】第1期:找实习、找工作时,让你脱颖而出的秘籍

你还在为寻找一个工作而苦苦追求吗?你想在面试的时候能脱颖而出吗?现在小编为大家准备了找工作的秘籍,这个秘籍一般人我可是不会告诉他的呢!要知道有时候你与工作的距离仅仅只有一个秘籍的差距,看完这个秘籍也许说不定你就会正式走进程序员的美好世界,成为一名真正的程序员呢~

java 阿里云 mysql RDS 云盾 spring 配置 云翼 开源大数据 openapi e-mapreduce

开源大数据周刊-第48期

资讯 云数据库厂商Snowflake获一亿美元融资,Iconiq领投 Snowflake Computing,是一家提供数据存储和查询服务的云数据库公司,以方便分析师用BI工具进行分析。该公司近日宣布获得一亿美元的融资。

大数据 算法 阿里云 hadoop Apache http 互联网 人工智能 钉钉 spark 开源大数据 e-mapreduce kylin 互联网金融

开源深度学习库BigDL在阿里云E-MapReduce上的实践

近些年来机器学习中的子领域深度学习成为一个热门的话题。本文要介绍Intel开源的深度学习框架BigDL,它也是在Spark上的一个算法库,提供了全面的深度学习算法支持,包括数值计算(Tensor)和高阶神经网络等。

深度学习 算法 阿里云

4月5日云栖精选夜读:Java如何进行垃圾对象回收?小秘书为你揭开谜底

由于JVM中垃圾收集器的存在,使得Java程序员在开发过程中可以不用关心对象创建时的内存分配以及释放过程,当内存不足时,JVM便会自动开启垃圾收集线程,进行垃圾对象的回收。 那么垃圾回收线程到底是什么时候触发,并如何实现垃圾回收的呢?在今天的夜读中,小秘书将用源码分析的方式为你揭开谜底。

深度学习 大数据 java jvm 阿里云 程序员 线程 源码 中间件 数据挖掘 e-mapreduce 数据恢复

E-MapReduce中引导操作安装使用Kylin

目前E-MapReduce的开源组件还未包含Kylin,下面介绍一种通过创建集群时设置的引导操作来完成集群上Kylin的部署。

OSS hbase hadoop HTTPS http 集群 e-mapreduce 脚本 Hive kylin

开源大数据周刊-第46期

阿里云E-MapReduce实践 云HBase建设之开篇 阿里云云HBase团队在2月份推出了云HBase产品,此款产品的内核在集团内部已经使用了6年之久,那么跟社区版本的HBase有怎样的区别,我们又做了怎样的产品化,本系列将会为用户详细介绍这些点。

分布式 大数据 安全 架构 阿里云 hbase hadoop 性能 HTTPS Apache http spark 开源大数据 e-mapreduce

开源大数据周刊-第44期

阿里云E-MapReduce实践 E-MapReduce的HBase集群间迁移 E-MapReduce提供HBase服务,本文介绍了几种HBase集群间迁移的方法。 E-MapReduce中Spark 2.x读写MaxCompute数据 最新的aliyun-emapreduce-sdk将MaxCompute数据以DataSource的方式接入Spark 2.x,用户可以使用类似Spark 2.x中读写json/parquet/csv的方式来访问MaxCompute。

云栖社区 大数据 分布式系统与计算 性能优化 阿里云 hbase hadoop HTTPS http 数据仓库 集群 spark 开源大数据 e-mapreduce Hive

开源大数据周刊-第43期

阿里云E-MapReduce动态 E-MapReduce发布新版本,可以在控制台管理meta表结构。 资讯 人脸识别,要靠哪些技术支撑,是否会泄露个人隐私? 本文介绍人脸识别用到哪些技术,讨论如何保护用户隐私 一图看懂AI阵营:学习AI 站错队可导致自取灭亡 本文介绍现在AI技术阵营,对AI各流派进行细分,梳理了17种方法,并用 图直观展现。

深度学习 大数据 阿里云 hbase HTTPS http 钉钉 开源大数据 e-mapreduce 分布式计算 物联网 分布式系统 html zookeeper 云数据库RDS

E-MapReduce中Spark 2.x读写MaxCompute数据

最新的`aliyun-emapreduce-sdk`将`MaxCompute`数据以`DataSource`的方式接入Spark 2.x,用户可以使用类似Spark 2.x中读写`json/parquet/csv`的方式来访问MaxCompute.

阿里云 SQL Json http odps spark aliyun DataFrame API e-mapreduce read MaxCompute

E-MapReduce的HBase集群间迁移

E-MapReduce提供HBase服务,本文介绍了几种HBase集群间迁移的方法

OSS hbase hdfs hadoop Apache path 集群 数据迁移 迁移 e-mapreduce Driver Create Mapreduce

开源大数据周刊-第42期

阿里云E-MapReduce动态 阿里云HBase支持PB级别的分布式数据库即将开始公测 资讯 云时代的大数据存储-云HBase 纵观数据库发展的几十年,从网状数据库、层次数据库到RDBMS数据库,在最近几年的NewSQL的兴起,加上开源的运动,再加上云的特性,可以说是日新月异。

深度学习 大数据 阿里云 hbase HTTPS http 数据库 互联网 钉钉 aliyun 开源大数据 e-mapreduce 离线分析 分布式数据库 存储

开源大数据周刊-第41期

云数据库HBase公测开始 EMR产品价格全面优惠,价格和ECS自建一致

大数据 分布式系统与计算 阿里云 hbase Oracle 性能 HTTPS Apache http 基础设施 集群 钉钉 spark 开源大数据 e-mapreduce

双研究员带你了解数据库技术现状,及阿里云为什么要推出HBase

纵观整个排行榜,RDBMS牢牢占据了前3席,各个数据库的热度亦一览无余。然而,在这背后,大数据时代下,数据库技术究竟发生了什么样的变化和发展?2月21日,阿里巴巴中间件技术部负责人蒋江伟与阿里巴巴 ApsaraDB 负责人余锋将为你揭开!

RDS e-mapreduce

开源大数据周刊-第40期

阿里云HBase支持PB级别的分布式数据库即将开始公测

大数据 分布式系统与计算 阿里云 hbase Oracle 性能 HTTPS Apache http 基础设施 集群 钉钉 spark 开源大数据 e-mapreduce

用Spark分析Amazon的8000万商品评价(内含数据集、代码、论文)

尽管数据科学家经常通过分布式云计算来处理数据,但是即使在一般的笔记本电脑上,只要给出足够的内存,Spark也可以工作正常(在这篇文章中,我使用2016年MacBook Pro / 16GB内存,分配给Spark 8GB内存)。

大数据 e-mapreduce 分析型数据库

基于Alluxio系统的Spark DataFrame高效存储管理技术

在这篇文章中,我们将介绍如何使用Alluxio帮助Spark变得更高效,具体地,我们将展示如何使用Alluxio高效存储Spark DataFrame。

大数据 e-mapreduce

开源大数据周刊-第39期

阿里云E-Mapreduce动态 E-MapReduce 3.0.0镜像版本(已发布) 支持Spark 2.0+版本 支持提供统一的Hive外部Meta数据 HBase 支持PB级别的分布式数据库年后开始公测 E-MapReduce 全体成员祝大家 新年快乐! 资讯 Hadoop黑客赎金事件解读及防范 年关将至,Mongodb数据丢失的事情还在眼前,数以千计的Mongodb数据库已经被删除或者被黑客勒索,就在最近一段时间,黑客也在攻击Hadoop,有不少Hadoop集群的数据全部丢失,这些数据甚至有上TB的数据量,对企业造成了巨大的损失。

大数据 MongoDB 阿里云 hbase hadoop HTTPS Apache 钉钉 aliyun 开源大数据 e-mapreduce 分布式数据库

自定义LOG投递OSS数据Partition,优化你的计算

数据划分Partition OSS数据存储具有高可靠、低成本等优点,是海量数据存储的最佳选择之一,尤其适用于半结构化的日志存储,并可以结合E-MapReduce(使用Hive、Impala等计算引擎)通过schema-on-read方式加载数据做查询分析。

阿里云 OSS HTTPS 日志 日志服务 LOG aliyun e-mapreduce string Hive html 存储 分区 日志投递

Hadoop黑客赎金事件解读及防范

年关将至,Mongodb数据丢失的事情还在眼前,数以千计的Mongodb数据库已经被删除或者被黑客勒索,就在最近一段时间,黑客也在攻击Hadoop,有不少Hadoop集群的数据全部丢失,这些数据甚至有上TB的数据量,对企业造成了巨大的损失。本文讲述这个问题及后续的预防方案。

安全 MongoDB hdfs hadoop HTTPS 安全组 集群 数据安全 spark aliyun e-mapreduce 数据备份 黑客

开源大数据周刊-第38期

本期关注:梨视频基于阿里云E-MapReduce搭建视频推荐系统的实践,Apache Eagle成为新的顶级项目,英特尔开源的分布式深度学习库BigDL,Hadoop 3.0新功能测评

深度学习 分布式 大数据 阿里云 性能 HTTPS Apache http 镜像 集群 钉钉 解决方案 开源大数据 e-mapreduce 大数据分析

4
GO