当“大数据”落地,当技术接轨商业

简介:

作者:(美)大卫·芬雷布 盛杨燕 译


<a href=http://static.oschina.net/uploads/img/201401/18071552_qlQC.jpg" >

  从2012年以来,“大数据”持续升温(《纽约时报》就把2012年定义为 “大数据的十字路口”),跟着“热闹围观”的还有图书市场。截至目前,关于大数据的代表作品有:维克托·迈尔·舍恩伯格的《大数据时代:生活、工作与思维 的大变革》、冯启思(Kaiser Fung)的《数据统治世界——如何在数据统计中挖掘商机与做出决策》、Anand Rajaraman、Jeffrey David Ullman的《大数据:互联网大规模数据挖掘与分布式处理》、艾伯特-拉斯洛·巴拉巴西的《爆发:大数据时代预见未来的新思维》、涂子沛的《大数据:正 在到来的数据革命,以及它如何改变政府、商业与我们的生活》等,当然,还有大卫·芬雷布的《大数据云图:如何在大数据时代寻找下一个大机遇》。这些书中, 公认的以舍恩伯格的《大数据时代》为“国外大数据系统研究的先河之作”、“迄今为止关于大数据最好的一部著作”,那么,其他著作如何?

  大卫·芬雷布在方法论上领先

  从理论上的“数据可视化”到实践中的“大数据云图”,芬雷布走在了前面。

  在众多所谓的“《大数据时代》之后必读之作”的书单中,大卫·芬雷布的《大数据云图》则更胜一筹、实至名归。它开启了大数据从理念启蒙到商业应 用的时代,而身为作者、同时也是大数据集团(Big Data Group)创始人的大卫·芬雷布被业界誉为“大数据商业应用引路人”。究竟,他指引了什么,贡献了什么?

  首先就是“大数据云图”(Big Data Landscape),这也是中文版的书名(英文原版书名Big Data Demystified,直译为“掀开大数据面纱”)。为了让更多人理解大数据,并从中得到启发和受益,芬雷布和他的合伙人通过对包括网络科技新贵、传统 商业巨头在内的数百家公司进行了跟踪、评估,绘制了一幅大数据领域应用全景图,也就是著名的“大数据云图”,而且每隔一定周期进行更新。通过它,我们可以 知道现有各家企业在大数据领域扮演了什么角色,做了什么,以及有哪些待后人去填补的空白等。也就是说,大数据的商机在哪,一看云图便知。随着“大数据云 图”的广泛流传,大卫·芬雷布声名鹊起,找上门的咨询业务也络绎不绝。于是,芬雷布就从早先的“科技创业者”(他先后创办数家科技公司,很多被大公司收 购)一下子变成了“科技引路人”。

  其次在于“可视化”,芬雷布提出,它是“数据中发掘机遇的重要工具”。这一点有别于一般的大数据著述。在芬雷布看来,将信息可视化能有效抓住人 们的注意力。“有的信息如果通过单纯的数字和文字来传达,可能需要花费数分钟甚至几小时,甚至可能无法传达;但是通过颜色、布局、标记和其他元素的融合, 图形却能够在几秒钟之内就把这些信息传达给我们”。可视化是压缩知识、传递信息的一种方式。芬雷布提到了“数据界的达·芬奇”的爱德华·塔夫特,后者早在 20世纪出版了《定量信息的视觉展示》一书,而该书就是“以视觉方式传递数据信息”的经典著作。而芬雷布专门花了一章的篇幅阐述“数据可视化”,其意义在 于,强调了大数据理性之余的感性一面。事实上,大数据界的许多观点显然偏离了这点,常常倒向模型、算法、数学这一边。芬雷布的这一观点与 IBM(190.09, 1.33, 0.70%)等业界英雄所见略同,而从理论上的“数据可视化”到实践中的“大数据云图”,芬雷布走在了前面。

  大数据将在应用领域“大显身手”

  在未来几年中,大数据与移动终端、与云计算的结合,将会孕育更多的商机,会有更多的新的创业者在这个方向开创出新的企业和事业。

  不过,仅仅有方法论是不够的,首要的得在观念和思维上有所改变。例如维克托·舍恩伯格在《大数据时代》中要人们在逻辑上放弃“因果”转而“相 关”,冯启思在《数据统治世界》里在统计学上提出要“关注异常值,而非平均数本身”(特别是小概率的力量)。在《大数据云图》中,芬雷布将“大数据”推向 了极高的位置,视其具有决定下一个大机遇的重大战略意义。他说,数据、算法和速度让计算机能做出更好的决策和预测,从商业到生活甚至到飘忽不定的感情,一 切都可以分析。

  基于大量实证案例的支撑,芬雷布完全有这样的乐观和自信看待大数据的未来。在书中提到的许多公司应用中,不难发现在研发设计到管理销售,从教育、医疗到电子、汽车再 到音乐、建筑,大数据的影子无处不在、并且发挥着不可忽视的作用。而像亚马逊(399.61, 3.81, 0.96%)、谷歌(1150.53, -5.69, -0.49%)、IBM、Facebook(56.3, -0.89, -1.56%)、LinkedIn(219.93, -10.63, -4.61%)、Twitter(62.2, 1.63, 2.69%)、Netflix等公司对大数据的应用已经习以为常、开始得心应手。例如作为社交网络巨擘的Facebook使用大数据来追踪用户在其网络的 行为,通过识别你在它的网络中的好友,从而给出新的好友推荐建议,用户拥有越多的好友,他们与 Facebook之间的黏度就越高。更多的好友意味着用户会分享更多照片、发布更多状态更新、玩更多的游戏。像商业社交网站LinkedIn则使用大数据 在求职者和招聘职位之间建立关联。有了LinkedIn,猎头们再也不用向潜在的受聘者打陌生电话来碰运气,而可以通过简单的搜索找出潜在受聘者并联系他 们。与此相似,求职者也可以通过联系网站上其他人,顺利地将自己推销给潜在的雇主。可以这么说,现在业界对于大数据的认识可不再是“数据大”或者 Volume(大量)、Velocity(高速)、Variety(多样)、Value(价值)的“4V”这么简单、表面化了。大数据“真的”广泛进入商 用。至于对比舍恩伯格《大数据时代》中提到的应用实例,《大数据云图》更新颖、更前沿、更接近正在发生的未来。

  不仅如此,除了“大数据将影响所有方面”外,大卫·芬雷布至少以下两个观点值得注意。第一,他认为下一个获得重大发展的是在应用领域,这个领域 通过各种技术的手段,能够真正地把数据变成生产力。过去的几年中,大部分的投资都是在数据基础设施方面,未来人们会看到在应用层有更大的发展。第二,他介 绍自己喜爱铁人三项运动(游泳、骑车、跑步),平时通过技术手段,将自己在整个运动过程中产生的数据进行搜集和分析,这里面包括了运动过程中的热量、心 率、运动的轨迹、跑的长度等,然后不断自我优化、自我提升。通过这个现身说法,芬雷布实际上指出了可穿戴智能设备对大数据应用的推波助澜的作用。这也可以 理解为,下一步移动互联时代,大数据是随时随地的、无时无刻的。商家通过把越来越多的移动端放到消费者的手里,更好地了解消费者在移动端和各个场景中的消 费习惯。这意味着,在未来几年中,大数据与移动终端、与云计算的结合,将会孕育更多的商机,会有更多的新的创业者在这个方向开创出新的企业和事业。对此, 在《大数据云图》中,专门有一章就叫“谁是下一个上市的数十亿美元项目”。

  当“大数据”落地,当技术接轨商业,芬雷布向我们展示了一场已经发生而且将影响深远的商业变革。对于读者而言,应该心领神会:在理想情况下,企 业应当具备一种能够让数据分析贯穿于整个组织的视野,分析应该尽可能地接近实时。通过观察谷歌、亚马逊、Facebook和其他科技领袖企业,我们看到了 大数据之下的无限可能——当务之急,现在需要做的就是让企业尽快融入大数据战略中。

  □杨吉(法学博士、浙江传媒学院网络与新媒体专业系主任)

文章转载自 开源中国社区 [http://www.oschina.net]

相关实践学习
简单用户画像分析
本场景主要介绍基于海量日志数据进行简单用户画像分析为背景,如何通过使用DataWorks完成数据采集 、加工数据、配置数据质量监控和数据可视化展现等任务。
SaaS 模式云数据仓库必修课
本课程由阿里云开发者社区和阿里云大数据团队共同出品,是SaaS模式云原生数据仓库领导者MaxCompute核心课程。本课程由阿里云资深产品和技术专家们从概念到方法,从场景到实践,体系化的将阿里巴巴飞天大数据平台10多年的经过验证的方法与实践深入浅出的讲给开发者们。帮助大数据开发者快速了解并掌握SaaS模式的云原生的数据仓库,助力开发者学习了解先进的技术栈,并能在实际业务中敏捷的进行大数据分析,赋能企业业务。 通过本课程可以了解SaaS模式云原生数据仓库领导者MaxCompute核心功能及典型适用场景,可应用MaxCompute实现数仓搭建,快速进行大数据分析。适合大数据工程师、大数据分析师 大量数据需要处理、存储和管理,需要搭建数据仓库?学它! 没有足够人员和经验来运维大数据平台,不想自建IDC买机器,需要免运维的大数据平台?会SQL就等于会大数据?学它! 想知道大数据用得对不对,想用更少的钱得到持续演进的数仓能力?获得极致弹性的计算资源和更好的性能,以及持续保护数据安全的生产环境?学它! 想要获得灵活的分析能力,快速洞察数据规律特征?想要兼得数据湖的灵活性与数据仓库的成长性?学它! 出品人:阿里云大数据产品及研发团队专家 产品 MaxCompute 官网 https://www.aliyun.com/product/odps&nbsp;
相关文章
|
24天前
|
Cloud Native 数据处理 云计算
探索云原生技术在大数据分析中的应用
随着云计算技术的不断发展,云原生架构作为一种全新的软件开发和部署模式,正逐渐引起企业的广泛关注。本文将探讨云原生技术在大数据分析领域的应用,介绍其优势与挑战,并探讨如何利用云原生技术提升大数据分析的效率和可靠性。
|
4天前
|
分布式计算 Hadoop 大数据
大数据技术与Python:结合Spark和Hadoop进行分布式计算
【4月更文挑战第12天】本文介绍了大数据技术及其4V特性,阐述了Hadoop和Spark在大数据处理中的作用。Hadoop提供分布式文件系统和MapReduce,Spark则为内存计算提供快速处理能力。通过Python结合Spark和Hadoop,可在分布式环境中进行数据处理和分析。文章详细讲解了如何配置Python环境、安装Spark和Hadoop,以及使用Python编写和提交代码到集群进行计算。掌握这些技能有助于应对大数据挑战。
|
13天前
|
NoSQL 大数据 数据挖掘
现代数据库技术与大数据应用
随着信息时代的到来,数据量呈指数级增长,对数据库技术提出了前所未有的挑战。本文将介绍现代数据库技术在处理大数据应用中的重要性,并探讨了一些流行的数据库解决方案及其在实际应用中的优势。
|
18天前
|
机器学习/深度学习 人工智能 数据可视化
基于Python的数据可视化技术在大数据分析中的应用
传统的大数据分析往往注重数据处理和计算,然而数据可视化作为一种重要的技术手段,在大数据分析中扮演着至关重要的角色。本文将介绍如何利用Python语言中丰富的数据可视化工具,结合大数据分析,实现更直观、高效的数据展示与分析。
|
25天前
|
存储 NoSQL 大数据
新型数据库技术在大数据分析中的应用与优势探究
随着大数据时代的到来,传统数据库技术已经无法满足海量数据处理的需求。本文将探讨新型数据库技术在大数据分析中的应用情况及其所带来的优势,为读者解析数据库领域的最新发展趋势。
|
26天前
|
存储 分布式计算 大数据
现代化数据库技术——面向大数据的分布式存储系统
传统的关系型数据库在面对大规模数据处理时遇到了诸多挑战,而面向大数据的分布式存储系统应运而生。本文将深入探讨现代化数据库技术中的分布式存储系统,包括其优势、工作原理以及在大数据领域的应用。
|
1月前
|
大数据 Java Go
Go语言在大数据处理中的核心技术与工具
【2月更文挑战第22天】本文深入探讨了Go语言在大数据处理领域的核心技术与工具。通过分析Go语言的并发编程模型、内存管理、标准库以及第三方工具库等方面,展现了其在大数据处理中的优势和实际应用。同时,本文也讨论了如何使用这些技术与工具构建高效、稳定的大数据处理系统,为开发者提供了有价值的参考。
|
1月前
|
分布式计算 大数据 Apache
大数据技术变革正当时,Apache Hudi了解下?
大数据技术变革正当时,Apache Hudi了解下?
24 0
|
1月前
|
分布式计算 NoSQL 大数据
探索数据宇宙:深入解析大数据分析与管理技术
探索数据宇宙:深入解析大数据分析与管理技术
55 1
|
2月前
|
SQL 分布式计算 数据库
离线数仓--大数据技术之DolphinScheduler
离线数仓--大数据技术之DolphinScheduler
126 2

热门文章

最新文章