ABB
关注中国自动化产业发展的先行者!
CAIAC 2025
2025工业安全大会
OICT公益讲堂
当前位置:首页 >> 资讯 >> 行业资讯

资讯频道

与大数据有关的那些事儿爆炸信息该怎样安全使用
——与大数据有关的那些事儿(上)
  • 点击数:939     发布时间:2013-09-06 16:20:00
  • 分享到:
关键词:

   来源: 中国科技网 作者: 王怡

依然漂泊在外的斯诺登让美国“棱镜门”事件悬而未决,也使得“大数据”“云计算”这两个时髦的词汇以一种并不光彩的方式出现在人们的视野中。

“棱镜”计划通过对美国九家主要的互联网公司所掌控的用户的音频、视频、邮件等10类信息进行数据及文本的挖掘,从而分析出个人的联系方式以及行动。值得注意的是,“棱镜”每天所要面对的天量的“10类信息”便是标准的“大数据”。在网络以及媒体对“棱镜门”进行铺天盖地的口诛笔伐以及对爆料者最终去向不断猜测之时,探讨大数据能为我们带来什么似乎更有意义。本报记者特就它影响我们生活的方方面面,采访了有关专家,同时推出上下辑,探讨与大数据有关的那些事儿。

不仅“大”,与之配套的分析能力更“强大”

在提到大数据这一概念时,微软云计算中国区总监沈寓实特别强调:“我们所说的大数据,并不只是数据‘大’这一概念,这是信息和资源两个概念的区别,数据可以看作是信息,大数据则是可以用来分析和参考的有效资源。”

大数据的“大”一方面是数据绝对数量的急剧增长。IBM全球副总裁胡世忠在IBM2013大数据与分析高峰论坛上谈到:“十年前我们把一些数据量做GB,现在数据每个月发生变化,我们把它达到PB的数量,每天差不多25个PB的数据。”

在计算机世界中1PB是1024TB, 1TB又是1024GB。为何在大数据的时代,数据出现了这般爆炸式的增长?这就要提到大数据的“大”的另外一层含义:更广的信息范围。

IBM全球企业咨询服务部大中华区总经理段仰圣谈道:“企业数据,实时数据还有社交媒体的数据都包括在大数据范围内。我们的购物记录,在搜索引擎上的搜索记录被整合起来后都可以成为有用的数据。也就是说,我们在真实生活以及社会交往的过程中的点点滴滴都可以被‘数据化’。很多数据,比如社交媒体的数据是以文本的形式存储,这也一定程度上体现了信息范围的扩大也是数据绝对数量增长的重要原因。”

正如沈寓实所说,大数据并不是简单描述数据数量的庞大与来源的广泛,它更强调的是与之相配套的强大的分析能力。没有从天量数据中披沙拣金的分析能力,空有庞大的数据只会变成“数据坟墓”。

胡世忠简明扼要的把上述大数据的特点描述成4个“V”,V代表了数据的数量、速度、多样性、真实性。这四个V涵盖了大数据最主要的方面:数据量大,数据来源广形态多,分析数据速度快能力强,来源真实。

未来,生活点滴都被数据化

大数据到底会带给我们什么?记者采访的几家从事大数据研发的公司,都在从事着与智慧城市相关的大数据研发。

天云大数据正在依照纽约311热线项目,为北京政府了解民情提供参考。

“我们通过收集到的碎片信息,进行综合分析,依据实时监测公共数据,聚会分类各种相关民情,对数据进行提炼分类和可视化,”天云大数据副总裁雷涛介绍说:“在对北京东城区进行智慧城市网格化管理的民情播报:公共卫生,公共安全,环境设施,社区养老,紧急事件民……通过实时监控与分析,政府可以实时了解民情,并针对不同功能区域结合市民反映状况进行合理改善与治理。”

雷涛介绍说,纽约市民把311热线看成是生活的百科全书,包括报税、流感注射、手机账单,出租公寓、宠物执照,以及游泳池、公园、图书馆、体育场等信息。而311热线所登录的来电内容,也反映出纽约市民生活百态。

311热线让市政当局充分地了解民情,正因为投诉电话太多,纽约市长则针对噪音问题破天荒地对纽约的狗吠修法,狗白天吠叫不可超过十分钟,但若是在晚间,不得超过五分钟,主人如不能在规定时间内使狗平静下来,将会因违反噪音管制法吃上罚单。至于全美国行之有年的冰淇淋贩卖车,各地都是播放传统的童谣音乐,这童谣形同冰淇淋车的标准音乐,但是因不少民众投诉音乐吵人,于是纽约市长规定冰淇淋车子不得播放童谣,仅能以手摇铃来招揽客人。

“纽约,这个美国最大的城市拥有820万人口,每天产生大量的数据,其中大部分数据位于很多市政机构和部门的高度分散的孤岛中,如何有效的利用就成了解决问题的关键,”雷涛说:“大数据不仅仅能为企业所用,还可以帮助政府了解民情。大数据技术不仅仅可以替代传统信息系统,更重要的是大数据拥有前所未有的计算能力,语义计算,行为计算,视觉计算,可以得心应手的处理以前难以处理甚至无法处理的数据。”

IBM全球副总裁兼大中华区软件集团总经理胡世忠也就大数据如何解决交通问题提出了自己的设想。

“北京的交通问题是非常大的,如果可以提供一些数据的分析,让这个城市能够更好地了解在一天的什么时间,有很大的公共交通的情况,或者在某一个时间某条公路上的一些情况,这对于我们物流方面的交通有很大帮助。以此类推,对于政府来说,比如水资源的管理,电网的管理,在大数据的分析之后,都将有一个完美的管理方式。”胡世忠说。

   

怎样搭上大数据这班快车

——与大数据有关的那些事儿(下)

来源: 科技日报 作者: 姜晨怡

大数据是个好概念。据海外媒体报道,美国市场研究公司Forrester日前公布了一份关于客户数据管理的研究报告。结果显示,大数据虽然是不可逆转的趋势,但绝不是一剂万能良药。在这份名为《未来客户数据管理之忧患》中提到,分析人士就未来客户数据分析的前景进行预测,涵盖诸多重点,其中最受关注的焦点是数据来源问题。随着移动终端设备的广泛普及,数据来源变得越来越多元。一方面必须尊重和保护数据拥有者的隐私,另一方面必须对同一个人利用多个移动终端设备发出的数据进行整合。

发展大数据产业必须有明确的产业规划。事实上,与大数据有关的行业到底有哪些?它会给我们的生活带来哪些变革?大数据是否又“过热”了?

海量数据帮厂商赚到更多

事实是,虽然大数据的数据来源缺乏明确标准,安全性也让人感到隐隐作痛,但这些都并不妨碍大数据在商业领域的成功应用。平台仍在搭建中,技术也正在探索中,而大数据这个听起来有些虚幻的概念,已经迅速地帮助厂商得到了更多实惠。

中国互联网协会副秘书长石现升以农夫山泉举例介绍,他们每天有一万个业务员,其中每天每个人要到十五个销售点拍十张照片,每人每天拍的照片是10兆,一万个业务员每天的数据量就是100G,每个月就是30T,这些靠最简单的方式获取了海量数据,这是农夫山泉大数据量获取的来源。同时这些照片主要观察的是各个销售点怎么摆放,位置发生什么变化,以及这些变化的原因是什么,怎样摆放水有助于销售,不同年龄段购买量有多大,气温的变化对购买行为的影响,竞争对手的新包装如何等等对经营带来直接的指导作用的信息。他们通过与SAP公司合作,采用大数据分析技术对产品和销售做出快速反应,由24小时缩短至0.67秒,同时提供精准物流服务,物流配送效率得到极大提升,效益提升使市场占有率是34.8%,年增长率达到30%到40%。

在互联网行业,大数据带来的变化明显的一点就是精准的广告投放。石现升介绍,传统网络投放是比较粗放式的网络投放,但是现在通过搜索广告营销的方式,使得广告投放和用户渗透更加的精准。用户看到的是他愿意看到的,投放主投放的广告,通过搜索的方式把这些广告内容直接推送到用户手上,所有一切通过海量数据分析来完成。

大数据带动更多产业提速

大数据有个阳光明媚的称号——“新的石油”。这是因为种类广泛、数量庞大、产生和更新速度加剧的大数据蕴含着前所未有的社会价值和商业价值。事实上,大数据不是个单独的产业,由它带动的相关行业还包括:用以实现大数据存储、检索、处理、分析、展示的相关IT硬件与软件的生产、销售和租赁活动,以及相关信息服务。据赛迪分析,大数据有关行业可分为三个方面:用以搭建大数据平台、实现大数据组织与管理、分析与发现的相关IT硬件与软件的生产、销售和租赁活动;大数据平台的运维与管理服务、系统集成、数据安全、云存储等解决方案与相关咨询服务;与大数据应用相关的数据租售业务、分析预测服务、决策支持服务、数据分享平台、数据分析平台等。

蓝讯是一家专门做CDN即内容分发网络的公司,简而言之,他们的业务就是让网络更快更稳定,避开那些影响网络数据传输速度和稳定性的环节。就是这样的一家公司,已经在大数据的大背景下,规划着自己的未来。在日前举行的“中国CDN十五年发展大会”上,香港科技大学计算机教授、蓝讯首席技术顾问李波提出,随着云计算、大数据应用、移动互联网和社交网络发展,传统的CDN服务的内涵也正在发生变化。正在从传统的互联网内容加速服务,向针对互联网资源提供有效管理服务的方向演进。例如如果企业需要一种定制化服务,这些服务包括云计算、大数据、移动互联网和社交网络的资源,那么专业CDN公司能不能以最快方式、最合理资源配置方式为用户提供最为有效服务,这将是CDN服务未来的发展方向。如何面对大数据带来的种种挑战,应该是每个处于行业中的公司都应该思考的事情。

■ 多说一句

警惕大数据过热带来资源浪费

文•本报记者 王 怡

由于有了之前“云计算”过热的前车之鉴,现今处在聚光灯下的大数据也应警惕泡沫。中国云基地创始人田溯宁在接受采访时说道:“云计算和大数据的到来,对中国十分有利,它缩短了中国与世界的距离,中国有可能在这个领域获得创新和领先。”

大数据或许会改变整个时代的进程,微软云计算中国区总监沈寓实认为:“大数据时代,数据将会是新能源。”纽约时报曾评论“数据将成为类似货币或黄金的新型经济资产”。面对如此诱人的描述,以及发展中国家在此次竞赛中并不差的排位,我们在投入热情的同时,还要保持冷静。

中科院计算机研究所副研究员王斌认为:“大数据也许会改变计算机企业的格局,原来主导计算机行业的要么是硬件制造者,要么是软件制造者,也许以后在计算机行业的主导者是数据的拥有者。”

“但是,真正步入到大数据时代,还需要经历一个过程。”王斌说。大数据热对于大数据发展是有益的,但不能防止有的人借此炒作概念用来圈钱。“有的不了解大数据、不懂大数据的人,也加入到投资中,或者很多和大数据关系不大的技术也都纷纷给自己戴上大数据的帽子。”王斌说。

“国外的公司讲大数据还只是在营销策略领域。”王斌介绍说。在中科院发布的《科技发展新态势与面向2020年的战略选择》研究报告中,就提到:大数据技术将关注的重点真正落在数据上,计算机行业要转变为真正的信息行业。计算机要从追求计算速度为主转变为提高大数据处理能力为中心。

这种在硬件和软件上的改变势必需要大量资金投入,作为投资者和国家战略应审慎的判断大数据核心价值以及与自身利害关系,防止产生泡沫。

现今对于大数据的预测或悲观或乐观,它究竟会如何改变人类社会,我们还将拭目以待。
 

热点新闻

推荐产品

x
  • 在线反馈
1.我有以下需求:



2.详细的需求:
姓名:
单位:
电话:
邮件: