【转】大数据时代：正在到来的数据革命

       利用一周的时间终于拜读完涂子沛的大数据，这本书在国内政界和商界都引起强烈的反响，看完之后有一些东西的确引人深思，也那怪科技圈内人士首推这本书，正如马云所说那样当前社会我们已经由IT时代过渡到DT时代了，我们即将迎来一场数据革命，这不仅对个人、企业、社会、甚至国家都会产生深远的影响。

       这本书首先从美国的信息公开法案和中央数据银行创建过程时曲折历史切入，介绍了美国过去近几十年来的对于信息公开和信息关联历史争战以及数据帝国的创立过程。无论是信息公开还是信息关联都是社会进步的表现，是大数据时代下的必然选择，不管政府还是普通大众愿不愿意，不管这个过程有多么艰辛和曲折，历史的潮流总会朝着进步的方向禹禹前行。从政府的角度来看，我们可以通过建立中央数据银行利用信息的公开方式保证权利在阳光下更加健康更加高效的运行，我们也可以利用互联网时代下社会聚集效应和协同力量凝聚大众的集体智慧为政府献言谏策从而节省政府成本，毕竟集体智慧的结晶谁也无法忽视，同时我们也可以利用中央数据银行所收集来的数据通过数据挖掘获得我们所需要的有价值信息，我们可以用它来打击腐败或假货，预测灾难，提供各种公共服务平台等等。从商界角度来看，我们可以利用大数据对顾客进行分析，可以从宏观上把握顾客的结构、流量、购买的周期等信息，通过数据挖掘可以预测其感兴趣的商品或消费意愿，从而主动为其提供个性化销售和服务；我们也可以利用商品分析，为其如何确定最佳的商品组合和库存量，何时导入新产品或者淘汰旧产品，如何定价以及何时进行降价促销，如何整合来自市场、竞争者以及天气。地理情况等外部资源；我们也可以对供应链和运营效率进行分析，从而确定怎样选择供应商、优化物流和配置人力资源等等。未来国家或者企业的竞争在一定程度上已经成为一种基于数据的竞争，在大数据时代下，数据分析和挖掘的能力将必然成为国家和企业的核心竞争力，目前最稀缺最有价值的人才就是数据科学家正说明这个问题。在漫漫的历史长河里，我们已经完成了由小数据时代到大数据时代的过渡，迎来一场数据革命，它将深刻影响着政治、经济、文化以及社会生活的方方面面。

       当然，在大数据时代，我们不得不提一下一种思想——开源。 从互联网时代开始，开源思想就像种子一样在人们的脑海里便开始萌芽，从当初的代码开源到软件开源，再到目前的数据开源，体现了在大数据时代下人们在信息互联互通下的高效协作下集体智慧的结晶。比如安卓操作系统，就是当年由于谷歌当时开源了软件，世界各国都不断在其基础上改进开发，最后出来的各种不同版本连谷歌“亲娘”都认不出来了，这也推动了安卓在手机操作系统的霸主地位。最近Facebook等人工智能公司也都陆陆续续开源了人工智能领域的源代码，人工智能已经成为第四次科技革命的标志，谁能在这场革命中站住先导地位谁就能主导市场。不管是开源的是代码还是软件或者数据库，其实都是推广自己的思想，在这思想的背后隐藏着是一种行业标准，我想开源已经成为这个时代的进步的标识，而在大数据时代下数据开放也越来越重要。这种数据开放运动可以看做开源运动在软件领域的一种深化，甚至有人认为数据的开源要比代码的开源更加重要，而且这种深化已经不仅仅局限于技术领域。这种开源运动对美国社会乃至全世界的影响，已经渗透到政治、文化和社会生活等各个方面，衍生出开放政治、开放政府、开放媒体、开放城市等一系列的运动和口号。正如奥巴马2010年在联合国大会上演讲所说的那样——我们目前面对的不是一个普通时代。虽然各国的人民有不同的文化、面临不同的挑战，发展路径也各不相同，但归根到底，自由才是历史发展的最终趋势。而开放的政府、开放的经济、开放的社会正是人类之所以能够不断发展向前发展、获取更大自由的根本动力。

      在过去的几年里，商务智能、大数据、云计算、射频识别、语义网、普适计算、软件开源、数据开放、软件即服务等新概念新思想让人应接不暇。在这个信息爆炸的时代对于政府而言，收集收据、使用数据、开放数据都是政府急需解决的三大挑战。如果说收集数据是一种意识，使用数据是一种文化、一种习惯，那么是否开放数据则是一种态度。开放数据不仅可以服务大众、刺激经济，还能调动大众创新，为政府节省开支。今年李克强总理提出“大众创新、万众创业”口号，我们从中可看出政府的态度，而大众创新、万众创业必然需要利用大数据来完成。而大数据之所以大并不仅仅在于其容量之大，更多的意义体现在人们可以分析和利用的数据在大量增加，通过这些数据的交换、整合和分析，人们可以发现新的知识，创造新的价值，带来大知识、大科技、大利润和大发展。正如雨果说所：你可以阻挡一支入侵的军队，但你无法阻挡一种思想。对于任何国家来言，如果跟不上大数据时代的潮流，那么未来的处境将会变得越来越被动、越来越孤立，因为时代在发展，科技在进步，人类社会进步的潮流谁也无法阻挡。
最后恶补一下一些知识：
1、摩尔定律：最近总看到当前的发展规律是否还满足摩尔定律，感觉好熟悉，却不知道究竟是啥。摩尔定律是由英特尔创始人之一戈登.摩尔于1965年考察了计算机硬件的发展规律，提出“同一面积集成电路上可容纳的晶体管数目，一到两年将增加一倍。”也就说计算机硬件的处理速度和存储能力，一到两年内将提升一倍。目前在半导体领域该定律依然适用，目前台积电的半导体技术独步全球，在今年击败三星拿到苹果7的晶圆供应大单。不过随着云计算的不但发展，个人觉得这个定律将不再适用，因为云计算的最强大就是计算和存储，并且全部在云端，已经完全摆脱了硬件的限制，用户需要多少计算和存储空间就提供多少，按需索取。
2、普适计算：在日常生活环境广泛部署小的计算设备，人们能够在任何时间任何地点获取并处理信息，计算将最终和环境融为一体，这就是普适计算，是人类的第三波计算浪潮。一句话：万事万物，凡存在，皆联网，凡联网，皆可计算。例如最近很火的物联网（IOT）就是普适计算最好的实用例子。云计算也是普适计算的一种，它把有形的产品变为无形的服务。
3、商务智能：信息高度个性化已经成为现实：商务智能已经可以帮助我们高度细分。定制信息，数据挖掘技术可以根据用户过去的行为模式预测其信息的需要，为其配送个性化信息或服务，未来的语义网更是一个高度个性化的智能网络平台。