您的当前位置:首页>深度评论>返回上一级
主题书解读:大数据将给我们带来什么?
时间:2015-10-28
作者:俞 川
来源:商报
9月8日,国务院印发《促进大数据发展行动纲要》,提出将全面推进我国大数据发展和应用,加快建设数据强国2017年底前形成跨部门数据资源共享共用格局;2018年底前建成国家政府数据统一开放平台。《促进大数据发展行动纲要》的出台,受到社会各界的热切关注。老百姓关心的是大数据时代将给自己的生活带来哪些实惠,与之同时也担忧专家所说的隐私安全问题。企业一方面希望能够获得数字经济时代、大数据时代创造的新商机,另一方面则对行业洗牌等多类挑战感到担忧。政府部门希望提高公共管理和服务水平,增强公共投入效益,但一些部门对于更趋透明,更为全面、更具实时性纳入社会舆论监督的工作方式也感到不适应。大数据将给我们带来什么?
●主题书评
大数据时代已经来临
○俞 川(书评人)
由信息安全管理专家涂子沛所著的《大数据》(广西师范大学出版社2012年6月版)一书,对于大数据概念在中国社会的普及扩散起到了重要作用,2015年,该书出版了最新3.0版。这本书引介美国的翔实案例并指出,信息时代得以大大扩容的数据,经挖掘分析,可以使得公共管理、公司治理及个人事务的效率发生惊人提升。美国纽约、芝加哥、洛杉矶等大都会从上世纪70年代的“罪恶都市”、犯罪天堂,转变为今天全美最安全的大城市,与市政当局、警察部门推进以数据挖掘、前瞻预测为核心的警务管理模式改革相关。零售帝国沃尔玛、互联网零售巨头亚马逊,更是借助信息技术将数据分析效率提升到很高水平,使其比消费者个人更加清楚了解消费者的消费习惯、预算计划、消费预期。
自此后的三年多时间里,国内各出版机构踊跃引进出版了更多的大数据主题图书,而本土的观察家、电子商务和公共管理研究专家也推出了一些高品质作品。本文试图对其中部分代表作品给予概括分析,解读大数据将为中国经济和社会、公共管理、民众带来的影响。
大数据如何助力产业、企业腾飞
“大数据时代的预言家”、牛津大学网络学院互联网研究所治理与监管专业教授维克托·迈尔-舍恩伯格所著的《大数据时代》(浙江人民出版社2013年1月版),近两年频繁出现于国内媒体、官员荐书的书单、书榜中。这本书指出,大数据时代带来的显著改变,首先是突破了随机采样的思路限制,可以在极短时间内对海量数据进行分析,让概率发挥作用,实现了从“因果关系”到“相关关系”的逻辑演变。商业逻辑自此发生了根本性的变化。
世界知名咨询企业罗兰贝格管理咨询公司的两位合伙人比约·布劳卿、拉斯·拉克合著的《大数据变革:让客户数据驱动利润奔跑》(机械工业出版社2014年1月版)一书,指出,传统的营销、广告、传播及其塑造的消费模式,核心在于把握因果关系,对市场反馈的数据进行随机采样分析。大数据时代的到来,使得市场研究和消费者研究真正从一门粗糙的艺术,变成了科学。
企业可以通过数据挖掘分析,更清晰地把握消费者行为动机,建立起细粒化市场图景,缩短客户数据反馈至研发和制造等环节的周期。零售企业借助大数据技术和方法,可以更好的优化物流、商品陈列和价格,还能够对客户行为作出预测,推出有前瞻性的促销。
阿里巴巴集团商业智能部副总裁、数据委员会会长车品觉在《决战大数据:驾驭未来商业的利器》(浙江人民出版社2014年4月版)书中结合中国企业特点分析指出,数据挖掘分析必须克服无效数据的干扰、解决数据信息分析的效率问题(实时分析的难度较高)、面临将非结构化数据转为结构化数据的挑战,在此基础上,才能实现数据挖掘分析的5大价值:识别与串联价值(根据大数据中的核心数据对用户真实身份、真实行为进行还原)、描述价值(在特定框架内找出核心用户、紧密购买行为数据)、时间价值(在特定时间段分析历史数据)、预测价值、产出数据的价值。
本土资深投资专家肖风所著的《投资革命:移动互联时代的资产管理》(中信出版社2014年7月版)解析了大数据将以怎样的方式重塑投资流程,一是改变了投资数据收集的方法,二是金融机构核心竞争力转为基于大数据处理能力的投资分析水平、计算预测水平,三是金融机构及投资者都需要借助大数据,更好的捕捉、分析研判市场情绪,并使用大数据管理流动风险、预防道德风险。肖风在书中对搭建起来的资产网络云平台,作了详尽的分析及展望。信息搜集的便捷促进了更多便利化的操作手段和交易方法的产生,也在促进信息的透明化和普遍共享,云服务的运营成本降低,因而基于社交网络的投资平台将主导未来的资产管理生态系统。
大数据将给民众生活带来什么
全球科技创新领域最知名的记者、美国最著名的企业博客作者罗伯特·斯考伯与《财富》等媒体专栏作家谢尔·伊斯雷尔合著的《即将到来的场景时代》(北京联合出版公司2014年6月版)提出,场景时代的五种技术力量分别就是移动设备、社交媒体、大数据、传感器和定位系统,都迎来了技术成熟期。人们将因此获得款式越来越多、功能覆盖越来越全面、价格越来越便宜的移动传感设备(如谷歌眼镜)及各种场景应用程序,生活将更为便利,家庭生活品质会发生一个质的层面提升。
世界著名的未来学学者、小说家、美国《未来主义者》杂志副主编帕特里克·塔克尔所著的《赤裸裸的未来》(江苏凤凰文艺出版社2014年10月版)提出,大数据时代的到来,更多的预测、更准确的预判、更少的隐私,标志着社会和生活概念的全面革新。帕特里克认为,大数据时代要求人们主动或被动披露隐私信息为代价,换取更为准确的信息预测和行动预判成果。例如,自然计算、遥测技术、感应装置及相应的强大分析系统的更广泛应用,不仅可以使得人、物的定位被实时准确反映,还可以使得大量状态信息在整合分析后,提出相应的预警信号,比如预测道路拥堵、地震,等等。这些显然会给人们带来更多的便利,甚至会起到挽救许多人生命的巨大作用,但是却必须以用户允许公共部门、网站和分析机构掌握地理定位等多项信息为前提。
BM软件集团副总裁、IBM大数据和信息管理产品负责人罗伯特·托马斯的《大数据产业革命:重构DT时代的企业数据解决方案》(中国人民大学出版社2015年7月版)谈到了美国220万个农场引入大数据改造的经验,包括引进产量监控、产量绘图、浮动式施肥、杂草监测、可控式喷洒、运用差分全球定位系统开展的地形与边界测量、盐度监测等工具,再将海量数据进行记录分析,由此可以极大地实现农业种植的精细化,提高产量和品质。
欧洲著名城市设计专家、巴塞罗那市政厅首席城市设计师比森特·瓜里亚尔特在《自给自足的城市》(中信出版社2014年10月版)书中指出,未来的房屋、社区、城市都将升级为“可住人的有机体”,这有赖于遥测技术、感应装置与大数据分析技术的采用,建立起本地化能源生产系统、新型社交农业、公共空间冷凝水系统、空气循环系统等新型运转系统。
东方出版社2014年8月出版了由数托邦创意分析工作室推出的《中国娱乐大数据》一书。这本书的分析对象包括:湖南卫视《爸爸去哪儿》、《快乐大本营》,江苏卫视《非诚勿扰》,央视《舌尖上的中国2》等最近两年最为红火的影视产品和明星。书中对影视产品的受众群体、电视观众与新媒体观众带来的口碑评价反差、口碑传播影响力周期、口碑舆情地域与年龄分析等重要问题,在数据支撑的基础上,给予了分析解答。这也意味着,中国观众而今往后获得的影视产品,将越来越多的借助大数据分析技术,观众需求和偏好将决定产品导向、节目和艺人风格的走向。
小心大数据时代的阴暗面
《删除:大数据取舍之道》(浙江人民出版社2013年1月版)是维克托·迈尔-舍恩伯格(《大数据时代》)的另一部巨著。书中指出,大数据时代使得信息、数据、隐私都很难实现必要的隐藏和遗忘,导致企业和公共管理部门可以实施对消费者(公民)的全景控制,进一步强化社会等级,巩固并加深现有的不平等的信息权力分配。他对应提出了六种可能对策:数字化节制、保护信息隐私权、建设数字隐私权基础设施、调整人类的现有认知、打造良性的信息生态、完全语境化。强调数据发掘利用带来的隐私不保问题。
美国哥伦比亚大学前计算机科学教授、世界预测分析大会发起人兼主席埃里克·西格尔在《大数据预测:告诉你谁会点击、购买、死去或撒谎》(中信出版社2014年4月版)中更为深入地分析了大数据技术应用中的阴暗面。
埃里克·西格尔举出了三方面例证:已经有社交网站为用户提供未来职业选项的预测服务,也同时为雇主服务预测员工的离职倾向,后一指数较高的员工将很可能在毫不知情的情况下成为职场竞争的牺牲品。金融机构通过大数据挖掘与分析技术,得出客户群体消费倾向与不良记录的相关性指数,部分用户将因此受到更严格的贷款、信用卡申请批准限制。医疗机构通过数据挖掘与分析,判定某些病患经抢救仍将无法存活,继而会将医疗急救资源优先投放给数据反映更可能被救活的病患。
埃里克·西格尔认为,可取的解决方案是不断提高数据挖掘分析的准确性,来增大效用,并加诸约束机制以抑制其弊端。这其中涉及到立法、执法、消费者知情许可、数据加密等多个环节。
公共管理该如何融入大数据时代
美国著名的互联网与社会研究专家、乔治敦大学商业和公共政策中心学者、埃森哲卓越绩效研究院研究员拉里·唐斯所著的《颠覆定律:指数级增长时代的新规则》(浙江人民出版社2014年9月版)一书指出,数字经济、大数据技术的广泛应用,已经出现与法律体系和公共管理相触碰冲突的多方面问题,应当作出调整。
首先,立法机关、法院和监管机构应当审慎看待大数据等数字技术对社会和经济的影响,克制干预冲动,鼓励市场层面的自律调整,鼓励消费者行动起来,组成某种意义上的“数字警卫队”,敦促企业尽快形成解决新问题的模型。基于大数据等数字技术推出的互联网专车、快车,对传统出租车行业产生的影响,就不宜简单禁止,而应以市场和行业调整使之规范化发展。
其次,要更新隐私权法律体系。立法、监管部门都希望更好的保护公民隐私权,但政府唯有掌握更多的公民信息,才可能有效维护新时代的网上网下秩序,应当就此更新相关的法律。
第三,要严厉打击滥用大数据技术的商业行为及欺诈、犯罪行为,一方面要加强政府网上监管执法,另一方面要通过立法要求收集、存储或处理消费者信息的企业按照国际标准改进数据交易惯例、银行等金融机构为遭遇身份盗窃造成的损失的客户提供保险及第三方保护,积极开展消费者自我保护常识的公共教育。
●知识链接
到底什么是大数据?
大数据的概念
大数据(big data,mega data)或称巨量资料,指的是需要新处理模式才能具有更强的决策力、洞察力和流程优化能力的海量、高增长率和多样化的信息资产。在英国学者维克托·迈尔-舍恩伯格及肯尼斯·库克耶编写的《大数据时代》中大数据指不用随机分析法(抽样调查)这样的捷径,而采用所有数据进行分析处理。大数据的4V点:Volume(大量)、Velocity(高速)、Variety(多样)、Value(价值)。
大数据的意义
大数据是由人类日益普及的网络行为所伴生的,受到相关部门、企业采集的,蕴含数据生产者真实意图、喜好的,非传统结构和意义的数据 。其实大数据很早以前就有,但今天的数据不只是大,真正有意义的是数据变得在线了,这个远远比“大”更体现大数据的本质。从技术上看,大数据必然无法用单台的计算机进行处理,必须采用分布式计算架构。它的特色在于对海量数据的挖掘,但它必须依托云计算的分布式处理、分布式数据库、云存储和/或虚拟化技术。
大数据的来源
物联网、云计算、移动互联网、车联网、手机、平板电脑、PC以及遍布地球各个角落的各种各样的传感器,无一不是数据来源或者承载的方式。
大数据核心价值
大数据最核心的价值就是在于对于海量数据进行存储和分析。相比起现有的其他技术而言,大数据的“廉价、迅速、优化”这三方面的综合成本是最优的。
大数据的特点
第一,数据体量巨大。从TB级别,跃升到PB级别。
第二,数据类型繁多,如前文提到的网络日志、视频、图片、地理位置信息,等等。
第三,价值密度低。以视频为例,连续不间断监控过程中,可能有用的数据仅仅有一两秒。
第四,处理速度快。1秒定律。最后这一点也是和传统的数据挖掘技术有着本质的不同。
大数据的未来
在经历了几年的批判、质疑、讨论、炒作之后,大数据终于迎来了属于它的时代。大数据正在以不可阻拦的磅礴气势,与当代同样具有革命意义的最新科技进步(如纳米技术、生物工程、全球化)等一起,揭开人类新世纪的序幕。可以简单地说,以往人类社会基本处于蒙昧状态中的不发展阶段,即自然发展阶段。大数据宣告了21世纪是人类自主发展的时代。大数据让人类对一切事物的认识回归本源,大数据通过影响经济生活、政治博弈、社会管理、文化教育、科研、医疗保健休闲等等行业,与每个人产生密切的联系。
2015年9月,中国的《促进大数据发展行动纲要》顺利出台。中国人口众多,互联网用户数在2013年已经超过5亿人,全球第一。海量的互联网用户创造了大规模的数据量。当前,大部分中国企业在数据基础系统架构和数据分析方面都面临着诸多挑战。根据产业信息网调查,目前国内大部分企业的系统架构在应对大量数据时均有扩展性差、资源利用率低、应用部署复杂、运营成本高和高能耗等问题。国内企业为适应大数据时代而做出大规模调整是一种必然,这为国内从事大数据相关业务的企业带来了极大市场需求。
更多新闻
More- 阎海军:书写故乡是疼痛的感召2015-10-28
- 听一个出版人说说“书不厌精,文不厌细”的“精细账”2015-10-28