大数据:从海量到精准
上QQ阅读APP看书,第一时间看更新

1.2 预测未来,大数据的发展趋势

据悉,在1993年的美国《纽约人》杂志上刊登了一幅标题为“互联网上,没有人知道你是一条狗”的漫画,而作者彼得·施泰纳也因此赚取了超过5万美元。此后的20年间,互联网发生了巨大的变化,移动互联、社交网络及电子商务大大拓展了互联网的疆界和应用领域。

如今,我们在享受便利的同时,也无偿贡献了自己的“行踪”,现在互联网不但知道对面是一只狗,甚至还知道这只狗喜欢什么食物,几点出去遛弯,几点回窝睡觉。每个人在互联网进入到大数据时代,都将是透明性存在的,可以说是“处处行迹处处留痕”。

收集并分析海量的各种类型数据,并快速获取影响未来的信息的能力,这就是大数据技术的魅力。事实上大数据的来源非常广泛,天上的卫星、地上的汽车、埋在土壤里面的各类传感器,无时无刻不在生成大量的数据。这些数据如果加以综合利用,产生的社会价值和经济价值将是难以估量的。大数据技术让人们看到未来解决预测问题的一丝曙光。

1.2.1 大数据撬动全世界

大数据不仅体现为数据量的惊人增长,更前所未有地引入了正在不断扩展中的数据类型。从量的增长来看,根据IDC(国际数据公司)的跟踪分析,全球产生的数据总量2011年已经达到1.8ZB(1ZB等于1万亿GB,1.8ZB也就相当于18亿个1TB移动硬盘的存储量);2012年达到约2.8ZB,但当年全球产生的数据中仅有约0.5%得到有效分析。据悉,到2020年,全球数据总量中有22%将来自中国。

电商投放广告、物流调度运力、证监会抓老鼠仓、金融机构卖基金、民航节约成本、农民破解猪周期、制片人拍电影……看似毫不相关的事情,背后都有大数据在发力。随着互联网、移动互联网对各个领域的渗透越来越深,从政府到企业,从群体到个人,数据的积累与日俱增。4G牌照的发放,又让移动数据通道由“乡村公路”升级为“高速公路”。

与此同时,社会上的各行各业,从电信、IT业,到金融、证券、保险、航空、酒店服务业等,地球上的各种存在事物,从每个人到每棵树、每朵花乃至每粒沙子,无一例外地都在成为大数据的生成者。笔者可以预见,大数据席卷各行各业和人们生活的速度只会越来越快。

例如,世界上第一部“先拍照后对焦”光场相机Lytro,就运用了大数据处理分析理念。与传统相机只记录一束光不同,Lytro可以记录整个光场里所有的光,也就是用总体数据取代了随机样本。用户没必要一开始就对焦,想要什么样的照片可以在拍摄之后再决定。

因此,究竟该如何“开采”大数据这座丰富的矿藏,成为了一个令人着迷的问题,因为与正确答案相随的将是谁都渴望的巨大商业成功。当前,伴随着变革的发生,传统的互联网企业已经站在了大数据时代的最前沿。作为后PC时代的4大巨头,Facebook、谷歌、苹果、亚马逊正在成为大数据的拥有者和使用者,其主要特点如表1-5所示。

表1-5 4大互联网企业的大数据策略

大数据,正在撬动全世界的神经,无论是国家、企业,还是每一个独立存在的个人,都将成为大数据时代的贡献者和受益者。

专家提醒

目前,数据量的大幅增加对人们注重精确性的习惯提出了挑战。大数据需要技术和思维上的变革才能利用,才能做到从海量到精准。这一轮的变革,事关绝大多数企业的命运。可以看到,用大数据这个视角,可以考察企业的兴衰。第一,如果对大数据不关心,不了解,必将走向衰败;第二,拥有大量的数据并善加运用的公司,必将赢得未来。时代变了,判断企业价值的标准、判断软件价值的标准也变了。

1.2.2 大数据是大势所趋

大数据有多火?有媒体将2013年称为“大数据元年”。目前,几乎所有世界级的互联网企业,都将业务触角延伸至大数据产业;无论是社交平台逐鹿、电商价格大战还是门户网站竞争,都有它的影子。2012年,美国政府投资两亿美元启动“大数据研究和发展计划”,更将大数据上升到国家战略层面。大数据,正在由技术热词转变为一股社会浪潮,影响社会生活的方方面面。

星巴克有意推出的“大数据咖啡杯”就是个小小的例子。美国媒体报道,这家咖啡连锁巨头打算试验在一些咖啡杯中装上传感器,收集常客喝咖啡速度等数据,从而为喝咖啡较慢顾客提供保温效果好的杯子,以提高其满意度和忠诚度。

又例如,在2008年初,阿里巴巴平台上整个买家询盘数急剧下滑,欧美对中国采购量也在下滑。通常而言,买家在采购商品前,会比较多家供应商的产品,反映到阿里巴巴网站统计数据中,就是查询点击的数量和购买点击的数量会保持一个相对的数值。

阿里巴巴平台通过统计历史上所有买家、卖家的询价和成交的数据,可以形成询盘指数和成交指数。这两个指数是密切相关的:询盘指数是前兆性的,前期询盘指数活跃,就会保证后期一定的成交量。因此,当马云观察到询盘指数异乎寻常地下降,自然就可以推测未来成交量的萎缩。这种统计和分析,如果缺少大数据技术的支持,是难以完成的。这次事件,马云得以提前呼吁,帮助成千上万的中小制造商准备“过冬粮”,从而赢得了很高的声誉。

因此,大数据是一种新的价值观和方法论,人们面对的不再是随机样本而是全体数据,不是精确性而是混杂性,不是因果关系而是相关关系。

1.2.3 大数据将成为资产

众所周知,用户的消费习惯、兴趣爱好、关系网络以及整个互联网的趋势、潮流都将成为互联网从业者关注的热点,而这一切的获取和分析都离不开大数据,因为在社会化媒体基础上的大数据挖掘和分析都会衍生很多应用。例如,帮企业做内部数据挖掘,帮企业找到更精准用户,降低营销成本,提高企业销售率,增加利润等。

大数据、社会化媒体营销真正实现了营销模式的“量体裁衣”,这是营销领域跨时代的进步。未来企业的竞争,将是拥有数据规模和活性的竞争,将是对数据解释和运用的竞争。

随着技术的发展,大数据社会化营销将是未来营销的主战场,即将到来的大数据时代可以在任何行业,任何服务上出现,由此可能产生的服务和商业模式将是无穷尽的。笔者认为,围绕大数据至少可以演绎出6种新的商业模式,如表1-6所示。

表1-6 6种新的商业模式

如今,“大数据”这一话题在国内受到投资者追捧,也不断有高技术人才选择这个方向创业;但实际上国外对于“大数据”,已经走过了概念炒作阶段,进入到实际的应用,产生了实际的效益。例如,美国奥巴马政府已经开始大规模地投资大数据领域,这是大数据从商业行为上升到国家战略的分水岭,表明大数据正式提升到战略层面,大数据在经济社会各个层面、各个领域都开始受到重视。笔者相信,“大数据”将领跑新一轮互联网投资高潮,让资产逐步变成资本。

1.2.4 大数据时代的转变

互联网的重心逐步向着移动互联转移,各种新型智能移动设备的迅速普及带来了海量数据的爆发。于是大家都在谈论大数据,大家都想用好大数据。但你真的了解大数据吗?当前的行业状况又是怎样?

事实上,大数据只是一种提法,其形态本身是数据云。因此,以实时感知、分析、对话、服务能力为基础,让数据流成为商业、营销活动的核心才是关键。怎样才能让这些大数据更好地为产品或营销服务,搞清楚大数据时代的业界生态必不可少。

我们可以结合互联网数据中心(Data Center of China Internet, DCCI)发布的数据报告一起来看看。

1.互联网生态结构:传统互联网→移动互联网

据市场研究机构IDC预测,2013年全球智能手机出货量将超过10亿部,这个数字意味着它比2012年增长了近40%。

同时关于三大移动智能操作系统,我们还得到这样一组数据,如表1-7所示。

表1-7 三大移动智能操作系统的APP相关数据

大量智能移动设备接入网络,移动应用爆发性增长使得对数据进行深入挖掘的需求突显,而移动互联网与传统互联网融合,并成为所有媒体的核心节点却是大数据实现的前提。根据EnfoDesk易观智库产业数据库最新发布的《2012—2014中国移动互联网市场预测》数据显示,目前中国移动互联网市场规模已达到1500个亿,移动互联网用户超过5亿,是15年前的867倍,互联网普及率达到39.9%。ZDC统计数据显示,参与调查者中,使用手机上网者的比例高达97.4%,仅有2.6%的调查者表示不使用手机上网。

2.数据流量剧增,导致网络行业发生新的转变

2013年12月24日,据《纽约时报》网站报道,过去一年美国手机产业出现两大趋势:手机网络速度更快,智能手机显示屏更大,其结果是用户的移动数据流量增长近1倍。2013年美国消费者每月使用的移动数据流量由2012年的690MB增长至1.2GB;从全球范围来看,消费者每月使用的移动数据流量由2012年的140MB增长至240MB。

例如,中国移动数据在2013年春节期间涨幅也十分明显,上涨了105%。据中国移动广东方面透露,总体GPRS数据使用量同比增长63.84%; WLAN数据量同比增长227.55%;3G数据量同比增长212.68%。

对于如此庞大的数据量,又有哪些是具有商业价值的?怎样挖掘出这些有价值的数据呢?事实上在大数据中,存储在数据库中的结构化数据仅占10%,邮件、视频、微博、帖子、页面点击等大量非结构化数据占据了另外90%。怎样从这些与用户行为相关的大数据中挖掘出更多有价值的内容,值得创业者思考和探索,同时也给数据分析与挖掘产业带来更多的机会。

基于如此巨大的数据流量,网站分析(Web Analytics)已成为一种新的火爆产业。Web Analytics是一种网站访客行为的研究,对于商务应用背景来说,网站分析特指通过来自某网站资料的使用,以决定网站布局是否符合商业目标。例如,哪个登录页面(landing page)比较容易刺激顾客购买欲。这些搜集来的资料几乎总是包括网站流量报告,也可能包括电子邮件回应率、直接邮件活动资料、销售与客户资料、使用者效能资料或者其他自订需求资讯。这些资料通常与关键绩效指标比较,以得到效能资讯,并且还可用来改善网站或者获取营销活动中观众的反应情况。

3.数据方式在发生转变:数据存储→数据应用

从传统互联网到移动互联网,人们产生的数据越来越多。同时Google Glass的诞生让我们有理由相信,未来每个人都将产生更多的数据。但如果仅仅是简单地将这些数据存储起来,它本身并不具有任何价值。

据统计,目前大数据所形成的市场规模在51亿美元左右,而到2017年,此数据预计会上涨到530亿美元。由此可见,数据背后潜藏着巨大的商业机会。但是,如果大数据时代真的来了,营销人员是否真的能够利用好数据分析,并从中寻找商业价值呢?笔者认为,这是每个企业都应该思考的问题。

4.互联网营销方式的转变:向个性化时代过渡

正如前面所说,数据结构更加多样化,图像、视频和文档的比例占了半壁江山。大量的用户行为信息记录在大数据中,互联网营销将在行为分析的基础上,向个性化时代过渡。

互联网上,每天新浪微博用户发博量超过1亿条,百度大约要处理数十亿次搜索请求,淘宝网站的交易达数千万笔,联通的用户上网记录一天达到10TB……这些数据运用得好,可以使大众化营销转向个性化营销,从流量购买转向人群购买。

DCCI提供的数据显示,中国有超过230万个网站,网页超866亿,移动应用超过135万。由此可以预见,国内网络广告投放也将从传统面向群体的营销转向个性化营销,从流量购买转向人群购买。也就是说,未来的市场将更多地以人为中心,主动迎合用户需求。

专家提醒

大数据技术的应用,可以帮助企业从业务的整体设计角度,发展到针对客户的个性化服务,例如,零售企业对于过剩的库存会进行整体促销,如果对于用户购买数据进行分析,就可以针对用户的喜好进行个性化促销,同时也根据用户的购买行为对库存进行准确的调配,以减少浪费。

1.2.5 大数据的发展动力

大数据行业的发展,除了市场需求的驱动和技术水平的进步,还离不开资本与政策的帮助。据麦肯锡报道,大数据已经实现了显著的经济价值:为美国的医疗服务业每年节省3000亿美元,为欧洲的公共部门管理每年节省2500亿欧元,为全球个人位置数据服务提供商贡献1000亿美元,帮助美国零售业净利润增长60%,帮助制造业在产品开发、组装等环节节省50%的成本等。大数据体现的巨大经济价值,成功地获得了金融界和政界的青睐。

例如,在英国,虽然经济不景气、财政紧缩,但政府依然为大数据一掷千金。2013年初,英国商业、创新和技能部宣布将注资8亿英镑发展8类高新技术,其中1.89亿英镑(约3亿美元)用于大数据项目。

从目前的实时数据应用状况来看,在许多私企和组织里其实已经开始了大数据应用,因此这一市场非常需要得到政府的支持。

诸如在线购物等网站已经开始了大数据的应用与实践,例如亚马逊购物网站,系统会根据用户最近的选择和关注过的商品,来进行对应的产品或服务推荐。同理,政府也需要根据这种模式来研究如何将大数据技术应用到公共数据上。

大数据在中国也已驶入“快车道”,政府、企业和科研院所正多方位布局。工信部的物联网“十二五”发展规划,将信息处理技术作为四项关键创新技术工程之一,其中包括海量数据存储、数据挖掘等。随着4G牌照在2013年末的发放,更高速的网络将带来更大的数据流,为政府和企业带来战略性资源。

例如,国内的政府机构都在推行“智慧城市”这一蓝图。然而,“智慧城市”的信息处理与应用需要具备快速从海量数据中获取决策信息的能力。现代化都市中无所不在的移动设备、RFID、无线传感器以及互联网应用每时每刻都在产生纷繁复杂的巨量数据。

以视频监控为例,一个大型城市目前用于视频监控的摄像头约50万个,一个摄像头一个小时的数据量就是几个G,每天视频采集数据量在3PB左右。“智慧城市”的“智慧”主要出自对上述巨量信息的分析、挖掘和处理。大数据技术的应用恰好有效满足了“智慧城市”信息处理需求。如果说具有感知功能的传感器是智慧城市的末梢神经,连接传感器的城市宽带网络是智慧城市的神经系统,那么大数据应用就是智慧城市的大脑,是城市运行的智慧引擎。

综上所述,我们可以看到,大数据成为今天众人瞩目的焦点,是市场、技术、资金以及政府多方因素推动的结果。

1.2.6 展望2014的大数据

大数据时代,媒体的转型发展,既是技术问题,也是战略问题,其将对未来的媒体形态和格局产生深远影响。经过2012年整整一年的蓄势待发,在2013年新年开始时,“大数据”的概念火了,有媒体将2013年称为“大数据元年”。

那么,翻过2013,走进2014,大数据领域又会向着什么方向发展呢?如表1-8所示为2014年度大数据发展趋势的预测。

表1-8 2014年度大数据发展趋势的预测