块数据

　　马云作序解读，梅宏、涂子沛、田溯宁、潘石屹鼎力推荐
　　首次创新性提出“块数据”这一概念，打破“条数据”的限制与藩篱，真正挖掘出数据更高、更多的价值
　　从理论到实践，深度解读块数据，以及如何利用块数据打造透明政府、智慧政府、法治政府 

　　大数据正在对社会生产生活的各个层面产生巨大而持久的影响，政府、企业、个体都在大数据浪潮中享受大数据带来的裨益。但到目前为止，人类形成的大数据，更多的是以领域、行业为单位，往往是彼此割裂、互不相通的数据，这本书将这些数据定义成“条数据”。相对于条数据的概念，本书创造性提出“块数据”的概念——一种以一个物理空间或者行政区域形成的涉及人、事、物等各类数据的总和，相当于将各类“条数据”解构、交叉、融合的数据。它可以挖掘出数据更高、更多的价值。块数据的产生，将使人类在大数据领域初步探索并逐步形成条数据的基础上，形成条和块数据的融合式发展态势。可以说，这种发展潮流将给我们的时代带来颠覆性的变革，也标志着大数据时代的真正到来。
　　这本书对块数据从理论到实践进行全方位深入探讨。首次提出块数据的定义与特征，块数据的形成、汇聚及运行模式，块数据公共平台和大数据市场交易机制，块数据的全产业链、全服务链、全治理链等。书中有着大量翔实的案例和技术讲解，阐述块数据对经济发展的推进作用，可增强社会治理能力，更好地服务于百姓的“共性需求”和“长尾需求”。同时，书中还谈到了块数据对监督政府依法行政和倒逼政府改革，打造透明政府、智慧政府、法治政府和责任政府的独特推动力。

　　大数据战略重点实验室是一个跨学科、专业化、国际化、开放型研究平台。实验室聚集国内外大数据相关专业研究者、管理者和决策者，发挥独立、客观、公正、持续的科学精神和创新方法，立足全球大数据发展趋势和中国大数据发展实践，以大数据发展的重大理论和现实问题为主攻方向，进行大数据发展全局性、战略性、前瞻性研究和咨询，构建“块数据”理论模型和应用模型。曾研究编制“大数据指数”，出版年度《大数据蓝皮书》，建立大数据发展规划数据库，举办“中国DT产业50人论坛”，搭建开放式协作创新平台、专业化决策咨询平台、网络化成果转化平台和国际化合作交流平台，奋力打造具有较大影响力和国际知名度的大数据高端战略智库。

推荐序一XI
推荐序二XIII
序XV
引 言XIX
上篇 块数据的定义与特征
章 块数据出现—时也，势也
（一）条数据—越长大越孤单
（二）块数据—坐拥天时和地利的宠儿
（三）“块”思辨—块数据哲学体系初步构建
第二章 块数据素描—“金矿”是怎么炼成的
（一）高度关联性：“你”“我”“他”与“们”
（二）立体性：块数据的维度结构
（三）活性：随时随地都在更新
（四）主体性：以人或物的活动为起源
（五）开放性：块数据的基因表达
第三章 块数据的价值—得“块”者得天下
（一）商业模式发掘潜力巨大
（二）社会领域应用前景广阔
（三）政府职能发生深刻转变
（四）社会公共文化被重新定义
中篇 块数据的形成、集聚及运行模式
第四章 块数据的挑战—雄关漫道真如铁
（一）顶层机制设计时不我待
（二）数据结构化挑战巨大
（三）数据安全问题日益凸显
（四）保护公民隐私刻不容缓
（五）行业重大变革即将到来
第五章 块数据的形成—使数据“聚变”
（一）“宽带城市”为块数据形成提供“反应堆”
（二）“无线城市”为块数据形成注入“催化剂”
（三）“物联城市”为块数据形成安装“引爆器”
第六章 块数据的汇聚和处理—让“富矿”名副其实
（一）打造公共平台，让块数据汇聚得更迅速、更全面、更智能
（二）打破技术瓶颈，将数据处理能力作为公共平台的核心支撑
（三）增益块数据价值，使“云上富矿”飘进千家万户
第七章 块数据开放与市场交易机制构建—数据资产化
（一）数据开放机制构建—史无前例的深度开放
（二）大数据交易机制构建—把数据变成一门生意
（三）网络及数据安全保障机制构建—守住国家安全的第四维
下篇 块数据应用
第八章 商业领域：大数据，大产业
（一）服务业领域—告诉你谁会点击、购买、差评
（二）工业领域—智能制造
（三）农业领域—精准性和精细化
（四）块数据的全产业链—一片新的蓝海
第九章 民生领域：大数据，大民生
（一）文化教育—数字化、在线化和个性化
（二）健康医疗—“你未来5 年患癌的概率是80%”
（三）就业创业—找到自己真正热爱并适合的工作
（四）社会保障—全天候关怀与长尾化帮扶
（五）交通出行—寻找短畅通的那条路
（六）城市安全—由末端治理转向源头预防
（七）块数据的全服务链—无处不在的精心呵护
第十章 政府治理领域：大数据，大治理
（一）透明政府—让政府变得不再神秘
（二）智慧政府—打造块数据时代的政府2.0
（三）法治政府—把“牛栏”变成铜墙铁壁
（四）责任政府—块数据时代的政府使命
（五）块数据的全治理链—共建共治的新格局
结 语
后 记
参考文献

    当前，世界正处于以数据驱动发展的转折点上，数据的大爆炸炸出了一个创新涌动、风云变幻的大时代，在由无数的树木、建筑、道路、车辆等实体物质构成的现实世界背后，一个由众多计算机、应用软件和数据库通过网络构建的“虚拟帝国”正在成为世界的主宰。在这个“帝国”里，以互联网的广泛深入运用为基础，基于数据汇集、处理、分析基础上的大量商业模式、社会治理模式创新不断涌现，人类的生产方式、生活方式、行为方式甚至价值观念、道德观念正在发生深刻变化。可以说，数据，已经成为充满科幻感的达摩克利斯之剑，具有决胜未来的神奇力量。这是一个前所未有的时代。有人为之欢欣鼓舞，认为人类正迎来自工业革命以来甚至是人类有史以来深刻、伟大、彻底的大变革，随之而来的是既有利益格局被打破、重构和新生，而正是在这种深度的调整中，给在上一轮发展大潮中落在后面的人和地区以全新的机会实现后发赶超。也有人不为所动，认为就像历史上那些昙花一现的所谓发明创造一样，泡沫之后，便是深渊。总之，是众说纷纭、莫衷一是。但是无论如何，凭借着20 世纪60 年代以来数据存储技术的发展，90 年代以来社交网站的兴起，以及近年来数据挖掘技术的突破，我们事实上已经打开了大数据时代之门。这个时代是大数据与小数据并驾齐驱的时代。一方面，万物的数据化带来的是数据之海的高速扩张，数据量级呈现出跳跃式增长的趋势。在对海量数据进行分析的基础上，我们正在具备发现隐藏在大量细节背后的规律，并用规律预测未来的能力。另一方面，与日常生活紧密相连的一些数据，如消费、健康、教育等数据本身的量级并不大，往往是以M（兆）为单位，但是也可以用于改善每个人的生活，推动产业模式的升级与变革，也就是说，小数据也具有无可取代的价值。
    这个时代是虚拟与现实深度交互的时代。网络为人们在现实世界之外创造了一个虚拟的世界，在这个世界的帮助下，现实世界里很多事情变得前所未有的快速、高效、精确和便捷。而在这种变化的背后，是两个世界交流的日趋频繁，是虚拟和现实界限的日益模糊。越来越多原本必须在现实世界里完成的活动正在借助数据模拟技术放到网络上进行。3D（三维立体）电影、游戏、打印技术大行其道，正在把人类送入一个虚拟的“真实”世界。
    这个时代，人们对事物的关注点从逻辑性转向逻辑与关联并重。大数据重要的特征之一就是在混沌、失序、杂乱的数据中寻找看似毫无关系数据之间的关联性，在挖掘、分析中重构事物的线性关系，进而建立以此为基础的数据模型并用于指导实践，这是对既有强调因果逻辑思维方式的冲击。当然，从发展的趋势来说，数据的分析在某种程度上也必然需要考量因果关系，且不说编码本身的数据基础就是逻辑关系，即使是在比如深度学习、人工智能等技术的发展上也都需要在不断“喂食”数据的同时建立完善的逻辑反馈机制。可以说，关联性和逻辑性都是新时代的基本特征。
    这个时代是数据的融合成为数据价值提升关键的时代。单一的数据价值始终是有限的，但如果能够把各个单一的数据串联起来，通过多维度的挖掘比对，像GPS（全球定位系统）一样，就能够实现对事物规律的精准定位。我们知道，大数据在数据的精确度上比不上传统的统计学抽样，但它的优点就在于不需要抽样，所有的数据都是样本。而在将不同领域、不同行业的数据交叉、对比、融合的过程中，对事物的预测、对规律把握的精准性就会不断提升，甚至能够发现以往未能发现的新规律。无论你信或不信，我们已经站在了大数据时代的风口之上。正是在这样的时代大背景下，块数据应运而生。

    本书从一个新颖的视角——块数据，来看待大数据及其未来的发展，颇有创意！“条数据”和“块数据”的划分，师法自然，抓住了数据的本质。本书源于贵阳市领导在推进大数据应用及其产业发展过程中的思考和实践，既有理论的阐述，也有实践的支撑，呈现了对诸多方面极有价值的参考。
    梅 宏 全国信标委大数据标准工作组组长，中国科学院院士、上海交通大学副校长
    以控制为出发点的IT时代正在走向以激活生产力为目的的DT时代。这不仅仅是技术的升级，更是思想意识的巨大变革。这本书对于块数据、条数据的认知，对于块数据之于未来经济和社会变革的影响分析，对于云计算领域的预判和布局，是极具前瞻性的，站在了时代的前沿。
    *集团董事局主席 马云
    这本书富有洞见，我从书中读到了属于一个时代的真诚思考，更难能可贵的是，这些洞见来自这本书的作者，他们也是地方公共政策的制定者，我为贵阳喝彩加油。
    涂子沛 *集团副总裁、《数据之巅》作者
    从产业经济及区域发展角度，阐述大数据对现阶段中国经济发展的作用，并创新性提出“块数据”概念，令人眼界大开，掩卷深思。
    田溯宁 中国宽带资本基金会董事长
    今天我们的时代从深层次联系在一起了，形成了不可分割的整体。这个时代重要的精神是团结合作，而将人类社会真正联系在一起的黏合剂是数据。
    潘石屹 SOHO中国董事长

　　块数据—坐拥天时和地利的宠儿
　　突破条数据瓶颈的一些探索
　　过去几年，以Google 为代表的企业，大力发展基于空间信息系统的大数据，其目的是通过地图信息的载体把各种条数据联在一起，从某种意义上来讲，它是块数据的一个初步尝试，但是由于数据量和开放性等原因，仍然具有很大的局限性。解决问题的根本出路，是真正意义上块数据的产生。块数据的产生，打破了传统信息的不对称和物理区域、行业领域对信息流动的限制，通过对不同类型、来源信息的集成、挖掘、清洗，极大地改变了信息的生产、传播、加工和组织方式，进而给各个行业的创新发展带来新的驱动力，推动各类产业彻底变革和再造。人类将以块数据为标志，真正步入大数据时代。以往很多数据价值的外部性难
　　题，将可以通过块数据以市场化和行政化手段得到解决。
　　块数据的概念
　　所谓块数据，就是以一个物理空间或行政区域形成的涉及人、事、物的各类数据的总和。（块数据不只是“条集合”，更是“条集构”。）人的数据、物的数据，以及人与物、物与物的关系数据，构成了各种活动和事件的数据。
　　块数据的形成
　　开放、共享、连接是块数据形成的基本机制，在一个个“块”内形成开放、共享、连接的块数据，再把一个个块数据开放、共享、连接起来，就会产生更大的块数据网状结构。例如，在社区，通过智慧社区建设，建立起社区居民、家庭和居委会的数据采集和社交网络平台，它能够采集居民、家庭、楼宇的基本数据，也能够汇集物业、民政、医疗、养老、公安、
　　文化、教育等各个领域的数据，还能够聚合社区金融、超市、农产品供应等商务数据，就会形成一个共享、开放的社区块数据。在城市中，通过铺设高速光纤宽带网络，搭建高速移动宽带基站，建设无缝衔接的Wi-Fi 接入节点，将使得整个城市的网络“高速公路”更加畅通，数据将被更加快捷地传输和连接，这会有力推动各类社会企业和个人动态数据的“块”上集聚。通过建设城市基础数据库、数据交换共享平台和跨部门协同应用，能够将人口、法人、地理信息、宏观经济等数据开放、共享并连接起来；通过公共数据平台和跨部门协同应用系统，能逐步将各个部门的数据汇集起来，进一步整合城市网络平台上采集的企业和个人的
　　行为数据，将逐步形成城市块。
　　条数据的融合
　　块数据就像一个计算机的主板，它建立起了一个开放、共享、连接的数据基地，而各个行业和部门的条数据就像一个个可插可拔的板卡，它们只有融合和集成到主板上，才能发挥数据资产真正的功效。加快各个行业云的应用示范，通过跨部门、跨行业的政务云、民生云、产业云、环保云和文化云等共享工程示范，建设起行业应用云平台，能推动计算、应用和数据资源从“条”到“块”上的融合与集聚。正如学科交叉通过跨学科知识汇聚获得学科创新的新优势一样，条块融合也给予了数据汇聚优势，在汇聚而成的数据海洋背后，那些被发现的规律和知识就是“黄金”。