1. 云栖社区>
  2. 全部标签>
  3. #数据处理#
数据处理

#数据处理#

已有2人关注此标签

内容分类:
博客 | 问答 | 视频 |

从DSL扯开去

智能运维平台的内核驱动力来自数据(日志和指标)分析。从广义范畴来说,所有可以用作数据处理的软件系统,都可以用来构建这个平台。从远古时代的awstats到piwik,到人手一个的hadoop集群(确实没有更抽象具体的运维向子产品),到目前最流行的ELK,包括新近的基于PostgreSQL搞的TimeseriesDB,基于Solr搞的Rocana等等。

SQL 日志 Apache 数据处理 pipeline timestamp

《SEO的艺术(原书第2版)》——第2章 搜索引擎基础

本节书摘来自华章计算机《SEO的艺术(原书第2版)》一书中的第2章,作者:(美)恩吉(Enge, E.)著, 更多章节内容可以访问云栖社区“华章计算机”公众号查看。

算法 数据处理 人工智能 web SEO 搜索引擎

《新编计算机科学概论》一本章习题

本节书摘来自华章出版社《新编计算机科学概论》一 书中的第0章,第0.6节,作者:刘艺 蔡敏,更多章节内容可以访问云栖社区“华章计算机”公众号查看。

数据处理 计算机系统 存储

报表几种常用数据方案

报表的数据源如何组织?数据链路是怎样?怎样快捷方便的拿到数据?

mysql 性能 数据处理 数据分析 同步 报表 存储 MaxCompute QuickBI

《Java程序设计习题精析与实验指导》一第3章 Java的结构化程序设计

本节书摘来自华章出版社《Java程序设计习题精析与实验指导》一 书中的第3章,第3.1节,作者:施霞萍 王瑾德 史建成 马可幸,更多章节内容可以访问云栖社区“华章计算机”公众号查看。

算法 java 数据处理 表达式 type 数组

《Hadoop实战第2版》——1.1节什么是Hadoop

本节书摘来自华章社区《Hadoop实战第2版》一书中的第1章,第1.1节什么是Hadoop,作者:陆嘉恒,更多章节内容可以访问云栖社区“华章社区”公众号查看

分布式 hdfs hadoop Apache 数据处理 互联网 集群 分布式计算 分布式文件系统 云平台 分布式系统 Mapreduce 存储 海量数据

《大数据分析原理与实践》一一第1章 绪  论 1.1 什么是大数据

本节书摘来自华章出版社《大数据分析原理与实践》一 书中的第1章,第1.1节,作者:王宏志 ,更多章节内容可以访问云栖社区“华章计算机”公众号查看。

大数据 数据处理 数据挖掘 移动互联网 大数据分析 海量数据

硅谷飘来五个字,SMACK


上次我们跟大家分享了「少打一局王者荣耀就能上手Spring Cloud?!」,学到就是赚到,翘课的同学抓紧补习了。本期为大家带来全新「与硅谷大数据工程师吃着火锅唱着歌就把SMACK入门了」篇。

大数据 数据处理 PaaS SMACK Mesos Cassandra 云市场 kafka

《工业控制网络安全技术与实践》一一2.3 工业控制系统中的常用控制器

本节书摘来自华章出版社《工业控制网络安全技术与实践》一 书中的第2章,第2.3节,作者:姚 羽 祝烈煌 武传坤  ,更多章节内容可以访问云栖社区“华章计算机”公众号查看。 2.3 工业控制系统中的常用控制器 控制器(Controller)是指按照预定顺序通过改变主电路或控制电路的接线和改变电路中电阻值来控制电动机的启动、调速、制动和反向的主令装置,是发布命令的“决策机构”,完成协调和指挥整个计算机系统的操作。

网络安全 监控 性能 模块 数据处理

《工业控制网络安全技术与实践》一一2.1 数据采集与监视控制系统

本节书摘来自华章出版社《工业控制网络安全技术与实践》一 书中的第2章,第2.1节,作者:姚 羽 祝烈煌 武传坤  ,更多章节内容可以访问云栖社区“华章计算机”公众号查看。 2.1 数据采集与监视控制系统 工业控制数据采集与监视控制(Supervisory Control And Data Acquisition,SCADA)系统是由计算机设备、工业过程控制组件和网络组成的控制系统,对工业生产过程进行数据采集、监测和控制,保证工业生产过程的正常运转,它是电力、石油、冶金、天然气、铁路、供水、化工等关系国家命脉的基础产业的神经中枢。

网络安全 架构 监控 数据处理 数据库 数据采集 存储

大数据产业加速发展 龙头企业迎机遇

6月20日,中国健康医疗大数据股份有限公司投资意向签约仪式在京举行。工信部总工程师张峰出席会议并致辞。张峰表示,目前我国大数据发展呈现良好势头,大数据基础设施日益完善,关键技术领域不断取得突破,重要行业领域应用不断深化,大数据产业正在进入加速发展时期。

深度学习 大数据 数据处理 人工智能 数据分析 物联网 自然语言理解

国内外大数据创业面面观

大数据分为广义和狭义两个概念。广义的来讲,所有的互联网公司都有自己的数据,因为它们有很多用户,以及用户沉淀下来的数据。它们也有自己的数据部门,大的互联网公司会拿这些数据做一些变现。狭义的来讲,其实大数据更多的定义是第三方的公司,它帮助在市场上有需求的客户收集以及利用数据。

大数据 数据处理 创业 数据库 基础设施 数据分析

大数据和云计算是何关系?

关于大数据和云计算的关系,人们通常会有误解,而且也会把它们混起来说。做一个直白解释就是:云计算是硬件资源的虚拟化;大数据是海量数据的高效处理。 虽然上面的一句话解释不是非常的贴切,但是可以帮助你简单理解二者的区别。

大数据 架构 数据处理 数据库 数据分析 分布式计算 并行计算 存储 数据存储 海量数据

马云:想在未来拿高薪 就去做与数据分析相关的工作

据外媒报道,中国电商巨头阿里巴巴的创始人马云(微博)预计未来人类社会将发生巨大的变化,这位亿万富翁在接受CNBC采访时表示,在未来的30年里,人工智能将超越人类的知识,导致很多人失业。 他说:“新浪潮即将来临,很多就业机会将被夺走。

大数据 数据处理 人工智能 阿里巴巴 电商 数据分析 物联网

Apache Beam欲通过uber api获取大数据

现在,有用的Apache大数据项目似乎每日更新。相比于每次都重新学习的方式,如果可以通过一个统一的API如何呢? 长期开玩笑说Hadoop生态系统是那种如果你不喜欢一个为特定系统的API,等待五分钟,两个新的Apache项目将出现随之而来崭新的API可供学习。

大数据 Apache sdk 数据处理 数据流 测试 正则表达式 spark API

用大数据提升大企业税收管理水平

随着大数据的兴起,我国大企业税收管理信息化也在发展,如何管理和组织相关涉税数据为大企业税收管理服务,对于大企业税收管理本身来说可谓一场革命。只有主动将业务流程和组织结构改造为适应现代信息化格局的新形态,才能够满足大数据时代下大企业税收管理的新要求。

大数据 数据处理 数据分析

重磅,企业实施大数据的路径

企业实施大数据主要有四个方面的内容: 第一,企业要建立数据文化,企业作决策应该用数据来说话。 第二,企业要建立数据的战略。 第三,企业在数据战略之下组织数据管理团队的能力。 第四,企业实施大数据的技术能力。

大数据 安全 算法 hadoop 数据处理 数据分析 数据管理

深度学习与大数据解析

深度学习的概念于2006年提出,是机器学习研究中的一个新的领域,其动机在于建立、模拟人脑进行分析学习的神经网络,它模仿人脑的机制来解释数据,例如图像、声音和文本,已被应用于许多领域,如人脸识别、语音识别等。

深度学习 大数据 算法 数据处理 人工智能 语音识别 自然语言理解 图像识别 海量数据 人脸识别

Monitoring Apache Spark 面临新挑战

大数据处理已经进入了新时代,数据的复杂度越来越高,人们对数据实时处理的要求也越来越高。新时代带来了很多的新改变,但是最大程度创造数据价值是大数据时代不变的宗旨。随着实时数据处理的用例越来越多,实时数据处理框架也丰富起来,例如, Apache Spark、Storm、 Heron、 Flink、Apex、 Kafka Streams 等等。

大数据 监控 Apache 数据处理 基础设施 配置 集群 spark Driver

摩尔定律过时了?还有“摩尔定律Plus”接班

4月14日消息,据TechCrunch报道,我们现在正处于计算领域真正的转折点上,我们正在使用的技术每天都在进化。嵌入式传感器和网络接入的快速融入,正将我们使用的大部分电器变成“智能设备”,它们可对我们的语音指令做出回应,同时产生的大量数据又可在尖端网络计算机或云端进行分析。

性能 数据处理 虚拟现实

40
GO