大数据的价值与作用

《大数据的价值与作用》由会员分享，可在线阅读，更多相关《大数据的价值与作用（7页珍藏版）》请在装配图网上搜索。

1、大数据的价值与作用（5）胡经国七、大数据价值挖掘三要素相关文献对大数据价值挖掘的三要素一一全面、集成和开放进行了论述， 现将其介绍于下，供读者参考。本文在篇章结构、内容和文字上对原文献作了 一些修改，对一些专业术语作了必要的解释，并且添加了一些小标题，特此说 明。如何充分利用大数据，挖掘大数据的商业价值，从而提升企业竞争力，已 经成为企业关注的一个焦点和努力方向。1、全面解决方案才能奏效当前，越来越多企业将大数据分析结果作为其判断未来发展方向的依据。 同时，传统的商业预测逻辑正日益被新的大数据预测所取代。但是，我们要谨 慎管理大家对大数据的期望值。因为，海量数据只有在得到有效治理的前提 下，才

2、能进一步发挥其业务价值。根据大数据的“ 3V”特性一一巨大的数据量（Volume）、数据快速处理 （Velocity）、多变的数据结构和类型（Variety），大家首先想到的是IT系统 中一直难以处理却又不容忽视的非结构化数据。也就是说，大数据不仅要处理 好结构化数据的分析，而且还要把社交媒体、电子商务、决策支持等信息都融 入进来。现在，分布式处理技术已经能对非结构化数据进行存储、处理、分析 和挖掘；但是尚未能提供一个全面的解决方案，以满足客户的大数据需求。事实上，普遍意义上的大数据范围更加广泛；任何涉及海量数据及多数据 源的复杂计算均属大数据范畴，而不仅局限于非结构化数据。因此，诸如电信 运

3、营商所拥有的巨量用户的各类详细数据、手机开关机信息、手机在网注册信 息、手机通话计费信息、手机上网详细日志信息、用户漫游信息、用户订阅服 务信息和用户基础服务信息等，均可归属为大数据。与云计算相比，大数据实现其业务价值所要走的路或许更为长远。但是， 企业用户已经迫不及待，越来越多的企业高层倾向于将大数据分析结果作为其 商业决策的重要依据。在这种背景下，我们必须要找到一种全面的大数据解决 方案，不仅要解决非结构化数据的处理问题，而且还要将功能扩展到海量数据 的存储，大数据的分布式采集和交换，海量数据的实时快速访问、统计分析与 挖掘，以及商务智能分析等。典型的大数据解决方案，应该是具有多种能力的平

4、台化全面解决方案。这 些能力包括：结构化数据的存储、计算、分析和挖掘，非结构化数据的存储、 加工和处理，以及大数据的商务智能分析。这种解决方案在技术上应具有以下 四个特性：软硬件集成化的大数据处理、全结构化数据处理的能力、大规模内 存计算的能力、超高网络速度的访问。2、软硬件集成化是必然选择、需要软硬件一体化的专门设备据认为，大数据解决方案的关键在于如何处理好大规模数据计算。过去， 传统的前端数据库服务器、后端大存储的架构，难以有效存储大规模数据并保 持高性能数据处理。在这种情况下，需要将软件和硬件更有效地集成起来，进 行更紧密的协作。也就是说，我们需要软硬件一体化的专门设备来应对大数据 的挑

5、战。、完整集成化大数据解决方案软硬件集成化方式可以提供大数据的捕获、组织、分析和决策的所有能 力，为企业提供完整集成化大数据解决方案。其中的核心产品包括：Oracle的 大数据机、Oracle的数据库云服务器(Oracle Exadata)和Oracle的商务智能云 服务器(Oracle Exalytics)。Oracle的大数据机、数据库云服务器和商务智能云服务器一起，组成了最 广泛、高度集成化系统产品组合，为企业提供了一个端到端的大数据解决方 案，以满足企业对大数据治理的所有需求。链接：Oracle的大数据机Oracle (甲骨文公司)大数据机，用于多结构化大数据处理，旨在简化大 数据项目

6、的实施与管理；其数据加工结果可以通过超高(无限)带宽 (InfiniBand，IB)网络，连接到Oracle的数据库云服务器中。通过Oracle大 数据机，在快速获得、组织大数据之后，企业可以根据对大数据全面、实时的 分析结果，做出科学的业务决策。链接：Oracle的数据库云服务器Oracle的数据库云服务器(Oracle Exadata)，可提供高效数据存储和计算 能力；配备超大容量的内存和快速闪存；配合特有的软硬件优化技术，可对大 数据进行高效的加工、分析和挖掘。同时，Oracle在数据库云服务器以及数据 库软件层面，提供了非常高效和便捷的高级数据分析软件，使数据能够更快、 更高效地得到分

7、析、挖掘和处理。链接：Oracle的商务智能云服务器Oracle的商务智能云服务器(Oracle Exalytics)，能以前所未有的速度运行 数据分析应用，为客户提供实时、快速的可视分析。同样，它通过InfiniBand 网络连接到Oracle Exadata上进行数据加载和读取，让大数据直接在内存中快 速计算，满足大数据时代对数据分析展现的快速响应需求。Oracle Exalytics实 现了新型分析应用，可用于异构IT环境，能存取和分析来自任何Oracle或非 Oracle的关系型数据、OLAP (联机分析处理)或非结构化数据源的数据。3、坚持开放策略在大数据应用领域，仅仅靠一家厂商的产

8、品难以解决所有问题。对于大数 据解决方案供应商来说，采用开放策略是必然选择。这一策略首先体现在，大数据战略在技术上支持Hadoop和开源软件。除 了集成化产品，还拥有一系列领先技术，以帮助用户全面应对大数据应用的挑 战。其中包括：Oracle NoSQL（Oracle的非关系型数据库）以及针对Hadoop 架构的系列产品。链接：Oracle NoSQOracle NoSQL （Oracle的非关系型数据库），专门为管理海量数据而设 计，可以帮助企业存取非结构化数据，并且可以横向扩展至数百个高可用性节 点。同时，该产品能够提供可预测的吞吐量和延迟时间，而且更加容易安装、 配置和管理，支持广泛的工

9、作负载。链接：针对Hadoop架构的系列产品专门针对Hadoop架构的系列产品，能够帮助企业应对在组织和提取大数 据方面所面临的挑战，包括：Oracle的数据集成Hadoop应用适配器、Oracle Hadoop装载器以及Oracle SQL Connector（Oracle的关系型数据库连接器）总而言之，大数据已经和云计算、社交化、移动化一起，成为现阶段驱动 企业IT模式变革的重要因素。Oracle的大数据解决方案可以横跨IT架构的所 有层面，与其他产品进行创新集成，并凭借卓越的可靠性、可扩展性和可管理 性，为企业的IT发展甚至业务发展提供理想的IT基础支持。八、大数据的作用相关文献对大数据

10、的作用进行了论述，现将其介绍于下，供读者参考。本 文在篇章结构、内容和文字上对原文献作了一些修改，并且提供了一些专业术 语解释，添加了一些小标题，特此说明。大数据意味着什么，它到底会改变什么？我们需要把大数据放在人的背景 中加以透视，理解它作为时代变革力量的所以然。1、变革价值的力量未来决定中国是不是具有大智慧的核心意义标准就是国民幸福。这一方面 体现在民生上，通过大数据让有意义的事变得澄明，看我们在人与人关系上做 得是否比以前更有意义；另一方面体现在生态上，通过大数据让有意义的事变 得澄明，看我们在人与天关系上做得是否比以前更有意义。2、变革经济的力量生产者是有价值的，消费者是价值的意义所在

11、。有意义的才有价值。消费 者不认同的就卖不出去，就实现不了价值；只有消费者认同的才卖得出去，才 实现得了价值。大数据帮助我们从消费者这个源头识别意义，从而帮助生产者 实现价值。这就是启动内需的原理。3、变革组织的力量随着具有语义网特征的数据基础设施和数据资源发展起来，组织的变革就 越来越显得不可避免。大数据将推动网络结构产生无组织的组织力量。最先反 映这种结构特点的是各种各样去中心化的Web2.0应用，如RSS、维基、博客 等。大数据之所以成为时代变革力量，在于它通过追随意义而获得智慧。链接：Web2.0Web2.0是相对于Web1.0的新时代。它是指一个利用Web的平台，由用户 主导而生成的

12、内容互联网产品模式。为了区别传统由网站雇员主导而生成的内 容而定义为“第二代互联网”，即Web2.0是一个新的时代。链接：RSSRSS （Really Simple Syndication，简易信息聚合，也叫做聚合内容），是一 种描述和同步网站内容的格式，是使用最广泛的XML应用。RSS搭建了一个 信息迅速传播的技术平台，使得每个人都成为潜在的信息提供者。在发布一个 RSS文件（一般称为RSS Feed）后，这个RSS Feed中包含的信息就能直接被 其它站点调用。而且，由于这些数据都是标准的XML格式，所以也能在其它 的终端和服务器中使用。链接：XMLXML （eXtensible Mark

13、up Language，可扩展标识语言），是标准通用标记 语言的子集，是一种用于标记电子文件使其具有结构性的标记语言。4、增强企业的软实力、数据的收集方式当今社会是一个高速发展的社会；高科技发达，信息流通，人们之间的交 流越来越密切，生活也越来越方便。大数据就是这个高科技时代的产物。数据的收集方式有很多种。可以根据人们上网主要浏览的网页，或者主要 搜索的关键字，看出来人们到底对什么东西感兴趣；也可以根据人们在社交软 件上面的聊天记录来收集有用的信息；还可以通过让别人做网页上面的问卷来 收集信息，知道人们对于某一种东西的看法和态度。虽然有的时候数据的收集 会有一点侵犯人们的隐私，但是不要担心，不

14、会对任何人造成危害，也不会泄 露任何人的秘密。、数据的存储、分析处理这些收集起来的数据会全部都存储在一起。然后，要用的时候就会用特殊 的软件来分析处理这些数据。国家有国家的数据库，很多公司也有自己的数据 库。一个公司的数据库越大，就代表这个公司的实力越强，未来发展的可能性 也就越好。当然，这些数据特点最主要的并不是大，而是有用的信息比较多，这样分 析出来的结果也就越准确。这些数据可以准确的反映现在社会上面发生的事情 和现在人们的心理状态，可以预测到很多事情的未来发展方向。有的公司可以 根据这些数据发现自己的不足和管理漏洞，及时改变和处理，延长企业的寿 命，增加企业的资产和竞争能力。通过数据分析

15、，也可以知道现在社会上面主流的东西是什么。只有抓住主 流的社会，才能跟上时代的步伐，顺应历史的潮流，抓住机遇，发展自己的公 司和事业。总之，大数据就是一个公司的软实力，就好像是一个无形的资产，蕴含着 很多的机会和信息。但是，这些数据一定要正当利用，不要用这些数据去做一 些违背道德和违背法律的事情。否则，一定要负法律责任。大数据就像是一件 非常厉害的武器，正当利用就可以战无不胜，否则就会给自己和别人带来损 失。5、获得洞察力和价值、大数据具有“衣”特征一般认为，大数据具有“ 4V”特征，即：Volume （体量）、Velocity （速 度）、Variety （种类）、Value （价值）。这其

16、实也是大数据概念的组成部分。 其中，Volume是指大数据巨大的数据量与数据完整性；Velocity可以理解为更 快地满足实时性需求；Variety意味着要在海量、种类繁多的数据之间发现其内 在的关联；Value最重要，是大数据的最终意义一一获得洞察力和价值。简单 地说，大数据“4V”特征就是体量大、快速快、类型多、价值大。体量大，容易理解。速度快，可以理解为更快地满足实时性需求。数据的实时性需求正越来越 重要。对普通人而言，开车去吃饭，会先用移动终端中的地图查询餐厅的位 置，预计行车路线的拥堵情况，了解停车场信息甚至是其他用户对餐厅的评 论。在吃饭时，会用手机拍摄食物的照片，编辑简短评论发布

17、到微博或者微信 上，还可以用LBS应用查找在同一间餐厅吃饭的人，看有没有好友在附近通过各种有线和无线网络，人和人、人和各种机器、机器和机器之间，产 生无处不在的连接；这些连接不可避免地会带来数据交换。而数据交换的关键 则是降低延迟，以近乎实时一一意味着小于250毫秒的方式呈献给用户。类型多，必然促使我们对海量数据进行分析、处理和集成，找出原本看来 毫无关系的那些数据的关联性；把似乎没有用的数据变成有用的信息，以支持 我们做出的判断；最终形成大数据的价值一一获得洞察力和价值。、实现大数据价值的过程大数据的崛起，正是在人工智能、机器学习和数据挖掘等技术的迅速发展 驱动下呈现这么一个过程：将信号转化

18、为数据，将数据分析为信息，将信息提 炼为知识，以知识促成决策和行动。所以，真正好的大数据系统，重要的不是 越多越好，其实是越少越好，最终变成一个决策，这才是最关键的。九、大数据：变革世界的关键资源相关文献对大数据是变革世界的关键资源进行了论述，现将其介绍于下， 供读者参考。本文在篇章结构和文字上对原文献作了一些修改，并且标注了一 些小标题，特此说明。1、人类文明进步每个阶段都具有最具代表性的历史标签在人类文明进步的每个阶段都具有一张最具代表性的历史标签。19世纪是 煤炭和蒸汽机；20世纪是内燃机、石油和电力。进入21世纪，由信息技术和 互联网所引发的新一轮科技革命和产业变革，更加深刻地诠释着人

19、类进步的征 程。其中，最具时代标志性的标签非大数据莫属。它好比是21世纪的石油和金 矿，是一个国家提升综合竞争力的又一关键资源。2、大数据是数据也是技术大数据既是一类数据，也是一项技术。作为数据，它呈现容量大、增长速 度快、类别多、价值密度低等特征。作为新一代信息系统架构和技术，它能够 对数量巨大、来源分散、格式多样的数据进行采集、存储，并进行关联性分 析。大数据通过数据整合分析和深度挖掘，发现规律、创造价值，进而建立起 从物理世界到数字世界和网络世界的无缝链接。在大数据时代，线上与线下、 虚拟与现实、软件与硬件重叠交错、跨界融合，这将重塑我们的认知和实践模 式，开启一场新的产业突破与经济转型

20、。3、大数据变革时代我们正处于大数据变革的时代。移动互联网、智能终端、新型传感器，快 速渗透到地球的每一个角落。人人有终端、物物可传感、处处可上网、时时在 链接，数据增长速度正在呈几何式增长，甚至爆发式增长都很难形容得贴切。 有机构预计，到2020年，全球数据使用量将达到约44ZB（1ZB=10万亿亿字 节），将涵盖经济社会发展各个领域。由此产生的革命性影响将重塑生产力发展模式，重构生产关系组织结构， 提升产业效率和管理水平，提高政府治理的精准性、高效性和预见性。毋庸置 疑，大数据将创造下一代互联网生态、下一代创新体系、下一代制造业形态以 及下一代社会治理结构。4、大数据改变国家间竞争模式大数

21、据还将改变国家之间的竞争模式。世界各国对数据的依赖程度快速上 升。国际竞争焦点，将从对资本、土地、资源的争夺，转向对大数据的争夺。 其重点体现为一国拥有数据的规模、活跃程度以及解析、处置和运用数据的能 力；数字主权将成为继边防、海防、空防之后又一个大国博弈领域。各主要国 家已认识到大数据对于国家的战略意义。谁掌握数据的主动权和主导权，谁就 能赢得未来。新一轮大国竞争目标，在很大程度上是通过大数据增强对世界局 势的影响力和主导权。5、中国大数据发展经过多年努力，中国已拥有全球最多的互联网用户和移动互联网用户，全 球最大的电子信息产品生产基地，全球最具成长性的信息消费市场，培育了一 批具有国际竞争

22、力的企业。同时，庞大的用户群体和完整的经济体系，积累了 丰富的数据资源；而工业互联网将进一步激发大数据发展的潜力，不断拓展信 息产业“新蓝海”。6、在经济社会发展中的基础性、战略性、先导性地位当前和今后一个时期，创新、变革和融合将成为产业发展的主旋律，蕴藏 着巨大发展机遇。随着中国经济发展进入新常态，无论保持经济中高速增长、 促进产业迈向中高端水平，还是营造大众创业、万众创新的发展环境，大数据 都将充当越来越重要的角色，在经济社会发展中的基础性、战略性、先导性地 位也将越来越突出。7、大数据发展的战略方向2015年，在中国建设制造强国和网络强国的关键之年。国家制定发布了中国制造2025和“互联网+ ”行动计划，极大地激发了全民创新创业的热 情，也明确了大数据发展的战略方向。而且，国务院常务会议通过了关于促 进大数据发展的行动纲要，强调开发应用好大数据这一基础性战略资源。应该按照建设制造强国和网络强国的战略部署，加强信息基础设施建设， 提升信息产业支撑能力，构建完善以数据为核心的大数据产业链，推动公共数 据资源开放共享，加快推动核心技术、应用模式和商业模式的协同创新发展， 将大数据打造成新常态下经济提质增效升级的新引擎，为经济发展和社会进步 提供更加有力的支撑。2016年5月30日编写于重庆2019年10月26日修改于重庆