警惕“大数据傲慢”

来源:互联网  
2015/8/3 21:08:02
在数据公开、数据交换、数据共享和数据利用成为大势所趋时,不论是政府机构、企业还是个人,都在创造数据、管理数据和使用数据,每个公民在这样的过程中遵守法律和尊重伦理是最必不可少的素养。

本文关键字: 数据 大数据 价值 素养

我们每天听到“数据”一词的频率突然高起来,如“大数据”、“数据经济”和“政府数据公开”等,“数据”与现代社会、与大家的日常生活越来越息息相关。

从“数字”、“数值”到“数据”

没有计算机和信息技术的年代里,“数据”更多的是“数字”或“数值”,至多也就是用于统计的“数字”或“数值”。计算机问世初期,信息技术有了“数值计算”和“数据处理”的差别,只不过,“数值”通常指连续变化的物理量;而“数据处理”处理的是离散的一组组“数字”而已,“数据”仍然停留在统计应用的水平。

随着计算机和信息技术的普及和发展,互联网的普及特别是移动互联网的普及,“数据”有了更多的内涵和更广外延,“数据”不再限于“数字”或“数值”,只要是计算机可以处理,“数据”可以是文本、语音、图形、图片、视频和更多其他的形式。“金融数据”包括但不限于银行交易、证券交易、外汇牌价和交易、信贷、资信、金融趋势等。“医疗数据”包括但不限于病人症状、检查结论、诊断、用药、流行病、专家就诊时间、医疗资源分布等。“教育数据”包括但不限于适龄学生数、课程计划、成绩、教育质量、升学、就业等等。各种数据,林林总总,不一而足。

曾记得,“数字化”风靡一时。科学家香农在上个世纪40年代就提出了采样定理,即对一个连续函数,按给定间隔提取其值,就可以用一组离散的数字序列代表这个连续函数,这就是数字化的重要基础。“数字化”的另一个意思是“数字化标示”,用一串数字来标示一个客体。“数字化”目标是数字计算机可以处理模拟信号,也可以纪录处理各种客体的“数字化标示”,我们不能不说这是一场技术革命,只不过这个革命是一种工具(计算机)或过程(计算机处理)的革命。“数据”就不同了,“数据”是现在信息社会的一个新生儿,它像石油和矿石,是一种新的原材料,可以用来加工、产生价值;它像农具和机器,是一种新的生产资料,可以提高生产的效率;它像高速路和机场,是一种新的基础设施,投资和利用它可以改善经济和民生。

有创新企业的生产原材料就是“数据”,他们对这样的原材料加工,生产去形形色色的“数据产品”,获得受益,比如:加工过的病案数据对于医药企业,加工过的点评数据对于餐饮企业,加工过的人口流动数据对于规划部门。有些企业很好的利用了“数据”这种生产资料,通过收集分析用户习惯“数据”,可以设计生产出更有人缘的产品,比如:世界知名的互联网公司和手机公司都不断在收集分析用户使用习惯的“数据”,进而改进自己的产品,搜索服务提供商不停收集用户的搜索关键词,借以分析各种有价值的趋势。也有不少地方开始关注对于“数据”基础设施的投入,提高本地区的竞争力,

有企业家说,鼠标嫁给水泥,诞生的宝宝叫数据经济。

“大数据”并不仅仅是因为“数据”量大

“大数据”极大的提升了“数据”一词的使用频率。多大是“大”?

其实历史上“海量数据”被用过很长时间,“海量数据”也是在说“数据”的规模,“大数据”也包含“数据”的规模,不同的是:“大数据”不仅关乎规模,同时还涉及数据的多样性和复杂性,最关键的是用传统的理论和方法都无法高效处理。

曾几何时,人民熟知的数据大小的单位,从位、K(千、10的3次方)、M(百万、10的6次方)、G(十亿、10的9次方)、到了T(兆、10的12次方)、P(千兆、10的15次方)、甚至E(百京、10的18次方)。《经济学人》期刊2010年2月出版的专辑“The data deluge(数据洪流)”中提到数据大小的单位E时,不少专业人士也得上网查查,E到底是多大?

“大数据”与“数据”或“传统数据”有规模上的不同,同时在收集方式上,特别是分析方法上有着根本的差别。搜索服务提供商不停收集用户搜索关键字,用于分析各种趋势;社交网络不停收集聊天主体,分析其中关键字和语义,判断社会大众心情;电商则通过售买数据解读热销产品,这些和“传统数据”或“小数据”的收集方式有明显的差异。“传统数据”的分析方法主要是统计和数据挖掘。“大数据”的加工与“传统数据完全不同”:高度并发的数据采集、数据全集(而非抽样)的处理、数据清洗等预处理,非结构化数据的处理、语义分析、深度学习。正是由于采用了各种新的数据处理方法,“数据”才能成为“大数据”,“数据”才有价值,“数据”才能成为原材料、生产资料、基础设施。

数据的社会价值

当“数据”不再只是“数字”和“数值”,当“数据”成为了原材料、成了生产资料、成了基础设施,我们显然可以得出结论:现代社会“数据”无处不在。正是无处不在的计算、无处不在的网络和无处不在的数据构筑了信息社会的三个维度。

现在信息社会是信息技术的发展和普及带来的,而信息技术的发展史,是信息技术核心不断转换的历史,计算机刚刚问世时,信息技术的核心是计算机;随着计算机越来越多,核心转移到计算机的网络;有了网络,核心就转移成为搜索,在互联网和移动互联网普及的今天,数据成为了信息技术的核心。

《自然》期刊2015年2月发表查尔斯赛费的文章说,“大数据”不仅带来了商业和科学的革命,同时带来了社会的变化,在过去的十年里,我们让机器在我们生存的方方面面扮演者中间角色,我们和朋友交流、娱乐、驾驶、健身、看医生、读书,总有计算设备在那接收、发送数据,是我们留下了朵朵巨大的数据云。

从司空见惯的日常生活到最尖端的科学研究,人类不断在创造数据,也不停地利用和享受着数据带来的便利。

一个人早上起床通过智能手机上网看看天气预报,利用了数据、计算、和网络,通过电视节目来看天气预报也是一样,有专业人员收集天气数据、分析天气数据、得出数据预报结论,通过电视节目播出来。通过电商采购日常用品越来越普及,一目了然的多种选择,可供参考的用户评价,优惠的价格,快速的物流和配送,方方面面都在利用数据、计算和网络诠释着便捷和高效,通过改变人们的消费习惯来改变着人的生活方式。

电子邮件、短信、博客、微信和朋友圈是全新的人与人的交互方式,让几年前还常用的邮递信件、电报、传真变成历史。

传统的不同语言之间的互译,多少年来都是语言学家编出字典,语言专家借助字典互译,然而,数据改变了这样的传统,谷歌公司利用“大数据”和统计的方法,通过对大量双语文献的收集和处理,为社会提供了71种语言的即时互译,去年一年为大众提供了达2亿次的翻译服务。这种翻译可能还没有达到语言学家的文学译著那么优雅,但是已经服务于联合国不同语种的文件翻译。

欧洲核子研究组织(CERN)是全球最大的粒子物理学实验室和高能物理研究中心,取得了令人瞩目的科学成就,它同时也是世界上第一个网站,第一个网络服务器,第一个浏览器的诞生地。它的科学发现的基础是其各种设备每天不停歇的接收和处理不可想象规模的数据,每秒钟要处理几十TB的数据。

如果说工业1.0是蒸汽机带来的机械化、工业2.0是电力带来的电动化、工业3.0是计算机带来的自动化,那工业4.0就是数据带来的智能化。其最基本的理念是CPS(信息物理系统),简单说,就是用数据让所有相关因素连接为一个系统,包括订单、原材料、生产设施、生产过程、仓储、物流、全球化等等,仔细分析工业4.0的核心特征,都与数据有密不可分的联系。

共2页: 上一页1 [2]
责编:樊晓婷
vsharing微信扫一扫实时了解行业动态
portalart微信扫一扫分享本文给好友

著作权声明:畅享网文章著作权分属畅享网、网友和合作伙伴,部分非原创文章作者信息可能有所缺失,如需补充或修改请与我们联系,工作人员会在1个工作日内配合处理。
最新专题
流动存储 为大数据而生

伴随信息技术的突飞猛进,更大量级的非结构化数据与结构化数据构成的大数据成为企业级存储所面临的最大挑战:一方..

磁盘阵列及虚拟化存储

利用数组方式来作磁盘组,配合数据分散排列的设计,提升数据的安全性。虚拟化存储,对存储硬件资源进行抽象化表现。

    畅享
    首页
    返回
    顶部
    ×
      信息化规划
      IT总包
      供应商选型
      IT监理
      开发维护外包
      评估维权
    客服电话
    400-698-9918