1. 云栖社区>
  2. 全部标签>
  3. #数据处理#
数据处理

#数据处理#

已有4人关注此标签

内容分类:
博客 | 问答 | 视频 | 资料 |

边缘计算这么火,但是它到底跟你有什么关系?

“5G时代,边缘计算将发挥更大价值。”阿里云边缘计算技术负责人杨敬宇向媒体表示,边缘计算作为5G时代的一项关键技术,未来将成为不可或缺的基础设施之一。 扩展阅读:阿里云杨敬宇:5G时代,边缘计算将发挥更大价值 边缘计算的概念从何而来? …

分布式 架构 数据处理 aliyun 存储 海量数据

以 9000 万欧元收购的Data Artisans能为阿里带啦哪些改变?

前几天,阿里巴巴以 9000 万欧元的价格收购了总部位于柏林的创业公司 Data Artisans。 Data Artisans 由开源流处理框架 Apache Flink 的创建者 Kostas Tzoumas 等于 2014 年创建,…

Apache 数据处理 容器

说说你遇到比较难处理的实时计算业务场景?

你用实时计算解决哪些业务难题? 实时计算 这个概念与离线计算是相伴而生的。离线计算:通过 ETL 程序清洗上报的数据,然后把数据存入 HDFS,通过 Hadoop 的批处理 Job 把数据导入 Hive、做 ORC 压缩处理、进行数据分区…

大数据 监控 数据处理 电商 离线计算 物联网 流计算

[@talishboy][¥20]对于大数据

我是某大学的大数据专业的大一生,想掌握好大数据并能在毕业后投入工作,需要掌握java和其他数据处理工具……到什么地步,具体需要学会什么技能

大数据 java 数据处理

如何在Scala中向数组添加元素,并找到变量类型?

如何在Scala中向数组添加元素,并找到变量类型?我有下面的Scala代码块作为我的数据处理管道的一部分。形成我目前所理解的,UDF接受一个file_contents类型String类型的参数。然后UDF进行一堆字符串处理,包括a spl…

数据处理 spark scala string UDF type list 数组

[@徐雷frank][¥20]如何搭建Hadoop处理环境?

Apache Hadoop 是用于开发在分布式计算环境中执行数据处理应用程序的框架。旨在从单个服务器提供存储和计算资源的方式扩展到数千台机器。Apache Hadoop的核心部分由存储部分(Hadoop分布式文件系统)及其数据处理部分(Ma…

大数据 服务器 hadoop Apache 数据处理 分布式计算 分布式文件系统 Mapreduce 存储

使用Flink在键控窗口中获取计数

我通过Scala接口使用Flink进行一些数据处理。我有一些元组中的用户数据: (user1, "titanic")(user1, "titanic")(user1, "batman")(user2, "star wars")(user2…

数据处理 scala flink

阿里云实时计算 Flink适用场景?

阿里云实时计算 Flink提供类标准的Flink SQL语义协助用您完成流式计算逻辑的处理。同时,受限于SQL代码功能无法满足某些特定场景的业务需求,阿里云实时计算 Flink为部分授信用户提供全功能的UDF函数,帮助授信用户完成业务定制化…

函数 SQL 数据处理 数据分析 流式计算 UDF flink 实时计算 流数据

阿里云实时计算 Flink提供的编程接口是什么?如何编写流式数据处理逻辑?

阿里云实时计算 Flink提供Flink SQL编写业务逻辑,为流式数据分析定制多种数据处理函数和操作符。

函数 SQL 数据处理 数据分析 编程 flink 实时计算

实时计算 Flink是什么?

转自实时计算:实时计算 Flink是什么?目前对信息高时效性、可操作性的需求不断增长,这要求软件系统在更少的时间内能处理更多的数据。传统的大数据处理模型将在线事务处理和离线分析从时序上将两者完全分割开来,但显然该架构目前已经越来越落后于人…

大数据 架构 数据处理 数据流 离线分析 flink 实时计算 流数据

关于flinkstreaing 中sql聚合结果后的撤回流,过程数据处理问题

用flink接受kafka解析json进行内部表数据聚合实现主要代码如下:结果:想要聚合后的结果,不想输出过程数据,请问这里应该如何处理,用timewindow没有效果,烦请指教,初学者,如果可以,烦请指导代码。多谢

云栖社区 SQL Json 数据处理 Image

阿里云也是不安全的地方

一个人叫我买他的域名 总共600 说阿里云五天内可以无条件退款 然后说他搬运数据处理然后可以挂到800一个 结果发现一口价竟然不能退款 害我一个月的生活费就打了水漂 仅剩上个月存的200块钱 这个月可能连肉都吃不到一块了 我以为阿里云是个大…

安全 服务器 域名 数据处理

「今日有话说」来谈谈你使用过阿里云产品的经历

2017年8月阿里巴巴财报数据显示,阿里云付费云计算用户达101.1万,阿里云致力于以在线公共服务的方式,提供安全,可靠的计算和数据处理能力,让计算和人工智能成为普惠科技,阿里云在全球14个地域开放了31个可用区,为全球数十亿用户提供可靠的…

安全 飞天 数据处理 人工智能 操作系统 数据中心

阿里云ACA第二章考试有些问题不懂

疑惑一:如果要呈现产品类型、区域、销量,用哪种图? (4选1:气泡图、 柱状图、瀑布图、饼图)疑惑二:数据分析平台包括哪些部分?5选3(事务处理、数据同步、数据清洗、数据处理、数据展现)疑惑三:一个大型企业每天产生10T数据,直接放在业务系…

大数据 数据处理 数据仓库 odps 数据分析 数据挖掘 数据同步 报表

有哪些看似不起眼的bug最终影响整个工程?

还记得BUG这个单词的来源吗? 在盛夏的时候,美国水上研究中心使用马克-Ⅱ计算机进行数据处理时,经常停止工作,其原因是,由于天气炎热加上机房无空调设备,致使大量飞蛾在机房中乱飞,这些飞蛾飞到正要闭合的继电器触点之间被继电器触电夹住,导致电…

数据处理 bug

数据处理慢慢慢

上传、下载、正常使用运营慢,非工作时间CPU使用率高

数据处理 运营 CPU

面对tcp 负载均衡真的能负载均衡吗?

常规负载均衡是在七层网络上进行负载,均衡的也是服务层数据处理如果假设情景是:在A机器(带宽1mbps)上建立负载(如haproxy) , 代理B(1mbps)和C(1mbps)上的tcp , 那么 面对TCP 负载均衡真的能有效吗?那么…

nginx 网络与数据通信 架构 数据处理 负载均衡 带宽

各位!双十一贡献了多少!1682亿背后巨大数据处理是咋实现呢!

今年天猫双十一的销售额最终定格在了1682亿元人民币。其中,移动占比90%,成交商家和用户覆盖222个国家和地区。 根据现场实时数据,双11购物狂欢节开场28秒钟,淘宝系交易额超10亿,3分01秒成交额超破百亿,13小时09分49秒!…

HTTPS 数据处理 淘宝 花呗

如何利用内存技术构建大数据服务平台?

随着大数据、云计算等技术的应用和普及,创新的企业用大数据解决方案的开发成为很多开发者与创业者的关注方向。传统的数据库面临着挑战:效率下降、数据集成代价大、无法处理多样性的数据等等。 传统搭建大数据分析服务的方式非常繁琐,不仅需要大数据模型…

大数据 架构 HTTPS 云栖大会 数据处理 数据库 express 运营 物联网 数据同步 开发框架 数据存储 文本分析 海量数据处理 流数据

2
GO