《2018年数据生态报告》发布，五大方面领跑数据智能时代
'Data Ecology Report 2018' Released, Five Aspects Lead the Era of Data Intelligence
中关村大数据产业联盟联合 Talkingdata、中国国际大数据大会组委会在“2018年第五届中国国际大数据大会”主会场高峰论坛上共同发布了《2018年数据智能生态报告》。中关村大数据产业联盟数字生态行研中心首席研究专家、Talkingdata CEO助理、腾云大学校长杨慧博士对报告进行了详细解读，针对数据智能的发展趋势给出相应的应对策略，帮助企业更好地驾驭数据智能，领跑数据智能时代。
《2018年数据智能生态报告》结合Talkingdata 在助力行业发展变革中积累的经验，梳理了当下中国数据智能市场的发展历程和未来走向，给出了数据智能平台的定义，描绘了时代的特性。本报告洞察了数据智能时代的本质，分析了数据智能市场行业全景及痛点，并为不同类型的企业提供应对策略，倡议积极推动行业合作，共建数据智能平台。
现今无论是互联网企业还是传统行业的企业，都非常重视对于数据的收集、处理以及算法的精炼和最终对数据价值的应用。
一、数据智能的定义与本质
著名图灵奖得主Jim Gray 提出的四大范式，可以很好地帮助我们梳理科学的演进。其中前三大范式，在人类文明发展的历史长河中帮助我们更好的记录、归纳和模拟现实世界；而进入数据智能时代，在机器学习、分布式计算等技术发展的基础上，数据逐渐呈现出高维度、高阶态、异构性的形势，能够对海量数据进行分析、处理和挖掘，并且通过建模、工程等方式来解决实际的预测和决策问题，最终实现决策的行动，则为“数据智能”。
数据智能也和数据科学、数据工程、数据分析等概念息息相关，但数据智能作为一个独立的概念，和其它几个名词最大的区别在于：
1、数据智能的目的是作出“预测”和“决策”，而非“分析”或者“展示”。
2、由于数据智能指向决策，所以用来判断数据智能的效率和价值就在于其决策的结果产生的可衡量的商业价值。
3、数据智能产出的过程中需要一个强有力的能够承载和调动一系列智能数据、核心模型以及面向不同情境的数据处理能力的数据智能平台。
4、最终呈现出有封装的、有交互界面的可以一定程度上替代人工决策的数据智能产品。
The four paradigms proposed by Jim Gray, a well-known Turing Prize winner, can help us sort out the evolution of science well.
从商业和经济的本质上来说，数据智能平台指数级地加速了数据和人的智慧，其价值体现在两个方面：第一方面体现在聚合效应，即从数据源到数据加工、数据分析、数据应用最终形成数据产品的过程中，实际上遵循价值“微笑曲线”；数据智能通过聚合各个环节的剩余价值，从而提升整条价值链的价值。第二方面体现在加速效应。在数据的获取和应用的这些环节，数据的价值链已经从单一的线性结构逐渐演变成为模块与模块之间互相交叉融合的复杂架构。数据的每一个环节都都能够得到数据智能平台的加速，产生更多价值。综上，通过打通数据价值链，可以集中剩余价值、降低数据成本、提高资源配置，从而获得数据智能所带来的价值红利。
二、数据智能平台的使命与能力
数据智能平台的使命有两件事：帮助企业更好的“看现在”——对现有数据的治理；帮助企业更好的“看未来”——对数据价值的挖掘并对未来作出预测；“看现在”的最终目的是为了更好的“看未来”，这是因为在数据智能时代，数据的量级和异构的程度都极其复杂。千里之行始于足下，因此这是企业实现数据智能的第一步，也是决定数据智能价值实现最为关键的基础。进一步来说，这两个能力拆开后又包括了以下这些能力要素：为了更好“看现在”连接、共享、安全；以及为了更好“看未来”的管理、科学与工程。
1、连接，提高数据维度及饱和度。连接
不强调对数据的拥有，而是强调能够触及和返回的数据的广度、丰富程度。将不同来源的数据汇聚和连接起来形成更丰富的数据维度，是数据智能平台的使命。
2、共享，通过OPAL实现数据价值流转。
共享能力是评估一个数据智能平台是否合格的首要标准。共享不代表要完全的透明，而是通过像 OPAL（OPEN Algorithms，开放算法库）这样的技术框架去构建一个合理的、区分权限的、能够保护数据同时让知识的价值流转的机制。
3、安全，推动数据安全合规标准的建立。
安全合规是重中之重。一个数据智能平台是中立的、合法合规的，它中间涉及到的各项任务都应该是安全且合规的，具有安全管理、用户管理、平台接入与使用的审计、调优和保障高可用性和容灾的能力。
4、管理，实现企业的数据资产化、资源化。
管理是数据智能平台实现价值的起步，让数据的排列有序、结构趋同，可以被进一步的分域、保存、备份、重新组合，形成更多的协同价值。
5、科学，提升决策的科学性与准确性。
数据科学是探索数据价值的流程，也是数据价值被挖掘的核心过程。数据的价值不是一次成型的，数据价值的挖掘依赖与不断假设、分析、验证、校准的反复迭代过程，最终才能凝聚沉淀成模型和解决的方案。
6、工程，实现数据价值的快速转化。数据能够直接变成决策，中间需要工程
来构建环境，实现汇聚、仿真和自动化。工程这个因素将数据和算法、工具和能力有机的结合起来，最终形成一个封装的、内部自成体系的数据智能产品。
有了以上六个能力因素，数据智能平台才得以成为一个独特的平台，才能成为企业想要快速构成数据智能产品、实现客户价值的必需平台。
三、数据智能市场的发展与痛点
随着互联网技术、人工智能等科技的飞速进步、数据量级的增长、计算能力的提升、存储的便捷化等推动了数据智能市场的蓬勃发展。数据市场从以传统IT企业为代表的软件时代，到以互联网企业为代表的数据时代，再到以数据智能企业为代表的生态时代，数据的支撑和驱动因素越发成熟。随着终端的智能化、数据异构化、商业问题复杂性的提高，数据智能市场也向着万亿级别的市场规模进发。
对企业客户来说，企业数字化转型的不同阶段面临着不同痛点问题，但是总结来说会有如下四类：
第一、业务管理者或高管不知道怎么构建数据业务；
第二、缺乏人才;不知道从哪里获取这类人才，或者人才掌握的是上一阶段发展所需的知识；
第三、客户没有透彻地理解数据能力和企业业务能力之间的关系，无法与客户商业决策所对应的商业指标绑定；
第四、相应数据虽形成闭环但是数据闭环本身太小或者太过封闭，能够解决的问题过少、过小。
客户侧出现的问题，体现了整个数据行业目前面对的深层次问题。那么为什么要有数据智能平台呢？有数据智能平台的在位企业才能帮助客户解决上述问题。对于数据行业的从业者来说，数据获取已经不是问题，但是单一数据源的维度价值有限，数据需要共享才有价值；其次，数字业务推陈出新速度非常快，各数据源及应用厂商各自造轮子，很难形成规模优势，缺少行业的分工和合作；法律法规包括网络安全法、个人信息保护规范等还在不断完善，数据安全成为所有数据价值共享的主要阻隔；数据与商业场景割裂，缺乏行业洞察，很难进行有效转化；最后，专业数据人才缺乏，大多数都集中在数据行业的从业企业中，留给传统企业进行数字化转型和提升的人才十分有限。目前高校等培养机构供给还处在缓慢加速的过程中，行业人才空缺加大。因而需要这样一个数据智能平台来通过能力的共创、复用、沉淀等，促进企业前端业务或者数据智能产品的效率、协同和创新。
为了解决以上的痛点，无论是对于客户企业还是对于数据行业的在位企业来说，都需要出现一家企业、一个团队来主导数据智能平台的建设，这个新的数据智能平台的存在，才能打破传统价值分工、重构数据行业的生态全景，全面提高行业的价值产生的能力。
四、数据智能行业全景与玩家分类
大数据行业诞生以来，大多数企业在不同的商业模式上进行尝试。如果把整个行业分为标准化（产品化）、客制化（服务化）的纵向坐标以及数据和软件工具的横向坐标，究竟是将数据作为护城河，还是产出成型高效的软件应用工具，如何在数据加工程度和软件工具、客制化和标准化中找到一个平衡，也是当下数据企业思考与探索的问题。我们可以以此为维度，分为以下六种商业模式：数据源、数据交易、市场智能、Saas（软件即服务）、数据产品和解决方案。处于不同商业模式的企业在整个数据智能行业中的身份与角色也不尽相同，他们有着不同的速赢关键因素和策略；但是在智能数据时代，这些不同类型的企业都在不约而同的自主发展数据智能平台，或者与行业中的数据智能平台形成深度的合作。
数据智能还有很多需要研究和解决的问题。但是在变道初期企业如果不能快速跟上，必将会错失在一次新的产业革命（甚至是一个新的文明时代）中的赶超良机。因此，必须要认清形势，把握趋势，积极谋划，推动发展。具体来说，未来中国数据智能行业的发展会呈“两化”趋势——生态化和开源化。
越来越多的合作呼唤更灵活的合作方式。不同于普通的平台类企业，数据智能平台需要同时包含数据、工具、算法和服务多个要素，不同要素的组合需要用不同的商业模式进行变现，甚至会改变价值分布、突破传统的、单向的客户关系甚至是竞争关系。因此数据智能平台需要更加开放和灵活的商业模式来支持不同行业、不同业务和不同定位的合作伙伴进行合作，形成协同作用。突破传统的技术合作伙伴或者是联合建模合作伙伴、数据智能产品合作伙伴的合作方式，真正跨越简单的客户的概念的新型客户类型，与数据智能平台类企业构建按照效果分成的成效合作伙伴关系。
五、数据智能的发展趋势与应对策略
只有集中了生态化和开源化的力量，数据智能才会开放、互联、打通与连接各个维度的数据，进而打造成中国最大的智能数据中台。如此才能更好的去解决面向不同商业决策的痛点问题，支持多渠道多场景的数据分析与运营，产出包括智慧金融、智能营销、商业洞察等行业成熟的解决方案与应用组合，将数据智能潮流推向新的高潮。
*本文节选自《2018数据智能生态报告》，查看全文可关注大数据栋察、Talkingdata 移动观象台微信公众号
Since the birth of big data industry, most enterprises have tried different business models.