大数据:信息再价值化的金矿

2011年10月,甲骨文宣布收购为企业用户提供非结构化数据管理、网络商务和商务智能技术的企业搜索和数据管理公司Endeca Technologies;

2011年11月,IBM宣布已收购在云计算和大数据领域大放异彩的高性能计算软件公司Platform Computing;

2012年2月,美国团购网站Groupon收购能利用大数据个性化eBay、Amazon等电子商务网站的用户购物体验的一家初创公司Adku;

2012年3月,EMC公司宣布收购了在旧金山的一家私营的敏捷软件开发服务和工具提供商Pivotal Labs公司;

……

近两年来,IBM、甲骨文、EMC、SAP等国际IT巨头掀起了一股剑指“大数据”市场的收购热潮,共花费超过15亿美元用于收购相关数据管理和分析厂商,也使得“大数据”(Big Data)成为继“云计算”之后又一个在IT界乃至金融界炙手可热的名词。

大数据的热潮产生于新一代信息技术的融合发展,同时,对大数据的处理和分析又成为这种融合发展的核心支撑。物联网、移动互联网、数字家庭、社会化网络等都是新一代信息技术具体的应用形态,大数据伴随这些应用不断增长,云计算则为这些海量的、多样化的大数据提供存储和运算的支撑平台。据估算,全球可统计的数据存储量在2011年约为1.8ZB,2012年将达到2.7ZB,2015年将超过8ZB;其中,结构化数据的增长速度约为32%,而非结构化数据还要快上一倍,约为63%。反过来,对大数据的分析、优化结果反馈到物联网等应用中,又进一步改善使用体验,并创造出巨大的商业价值、经济价值和社会价值。

对大数据的利用将成为企业提高核心竞争力、并抢占市场先机的关键。在未来3到5年,我们将会看到那些真正理解大数据并能利用大数据进行价值挖掘的企业和不懂得大数据价值挖掘企业之间的差距。真正能够利用好大数据、并将其价值转化成生产力的企业必将具备强劲有力的竞争优势,从而成为行业的领导者。

在零售领域,对大数据的分析可以使零售商实时掌握市场动态并迅速做出应对。沃尔玛已经开始利用各个连锁店不断产生的海量销售数据,并结合天气数据、经济学、人口统计学进行分析,从而在特定的连锁店中选择合适的上架产品,并判定商品减价的时机。

在互联网领域,对大数据的分析可以为商家制定更加精准有效的营销策略提供决策支持。Facebook、Ebay等网站正在对海量的社交网络数据与在线交易数据进行分析和挖掘,从而提供点对点的个性化广告投放。

甚至在公共事业领域,大数据也开始发挥不可小觑的重要作用。欧洲多个城市通过分析实时采集的交通流量数据,指导驾车出行者选择最佳路径,从而改善城市交通状况。联合国也推出了名为“全球脉动”(Global Pulse)的新项目,希望利用“大数据”来促进全球经济发展。

大数据因其巨大的商业价值和市场需求正成为推动信息产业的变革的新引擎。面向大数据市场的新产品、新技术、新服务、新业态正在不断涌现。

一方面,大数据面临的有效存储、快速读写、实时分析等挑战,将对芯片、存储产业产生重要影响,还将催生一体化数据存储处理服务器、内存计算等市场。Intel已经在Xeon E5和E7处理器中加强对大数据的支持,并在深入研究大数据处理算法;Oracle在2012年1月推出软硬件一体集成的Oracle大数据机;EMC和SAP在2011年先后推出了面向大数据的内存计算产品。

另一方面,因为大数据中蕴含的巨大价值,带来对数据快速处理和分析的迫切需求,将引发数据挖掘、商业智能市场的空前繁荣。IBM推出了跨多个平台的数据和业务分析技术产品,它们涵盖了移动设备到数据中心再到SmartCloud的方方面面。微软将在SQL Server 2012中引入Hadoop分布式计算平台,以提高对大数据的处理分析能力。