【IT168 资讯】2014年，中国大数据市场规模仅为78.1亿，增长率保持在50%左右;2016年，这一数字达到了239.3亿，增长率维持在44%左右;2017年1月份，工信部发布《大数据产业发展规划2016-2020年》，报告预测，未来2-3年市场增长率将保持在35%左右。虽然增长脚步放缓，但预计2020年，我国大数据市场规模将超过580亿元。(数据来源：赛智时代Innov100)
进入2017年，相较于稳定性而言，企业更关心的往往是敏捷性和创新性，通过大数据技术，可以帮助企业尽快实现这一目标。
在过去一年，企业在运用大数据方面主要有如下变化：
1、企业熟练运用数据辅助决策，开采“暗数据”成为趋势
所谓“暗数据“，Gartner的定义是“组织在正常业务活动过程中收集、处理和存储的信息资产，通常不能用于其他目的”。通俗来讲，暗数据是指那些尚未使用和分析的数据，比如社交网络信息、日志文件等。过去一年，很多企业都在试图发掘”暗数据“并从中获取价值。
今年5月份，苹果公司就曾完成了对数据公司 Lattice Data 的收购交易，总花费2亿美元，而这家公司的主要业务就是处理”暗数据“。IBM曾估计，世界上现有数据的70%到80%是非结构化的暗数据，可想而知，这些数据将为企业带来多大价值。
2、用户行为数据成为营销关键
大数据时代，善于抓住机会的企业可能实现成倍扩张。以亚马逊为例，通过强大的大数据引擎能力，亚马逊对客户行为数据进行记录分析，为客户带来更精准的服务，从一个以产品为基础的公司发展为拥有1.52亿客户的大型市场竞争者。
过去一年，这种用户行为数据已经不仅仅局限于线上交易，企业更倾向于将线上、线下用户行为数据打通，从而实现精准营销。
3、通过数据仓库使数据资产变现
虽然数据尚未被列为企业资产负债表，但正如维克托·迈尔·舍恩伯格在《大数据时代》中所提到的，这一切只是时间问题。随着企业规模的不断扩大，要想挖掘不同流程产生的数据中的重要价值，企业必须掌握强大的实时大数据分析能力，这也是数字化转型和技术驱动时代所必须的技能。
4、大数据与人工智能技术广泛结合，让企业从中受益!
2017年，我们已经见到了不少人工智能技术实践，最常见的就是机器学习在电商平台推荐系统中的应用以及智能家居体验。人工智能将带来的改变远不止于此，未来几年，自动化用户体验将在大多数平台得以实现，劳动力结构将发生巨大变化。认知技术、机器学习将迅速进入医疗、金融、保险、制造业等诸多行业。
不难看出，2017年，大数据行业发生了不小的变化，不仅让企业能够跟随瞬息万变的潮流不断更新，同时让企业从中获得数据洞察，占据更有竞争力的优势。在大数据类产品遍地开花的今天，又有哪些产品足以让我们眼前一亮呢?
2017年度 技术卓越奖：星环科技TDH5.0
一句话点评：星环科技TDH5.0是国内落地案例最多的一站式Hadoop发行版，最大的优势在于性能，比开源Hadoop 2快数十倍，MPP的5-10倍。
▲技术卓越奖：星环科技TDH5.0
产品介绍：TDH主要提供6款核心产品：大数据分析数据库Transwarp Inceptor，实时计算引擎Transwarp Slipstream，专注于利用机器学习从数据中提取有价值内容的Transwarp Discover，用于处理非结构化数据的Transwarp Hyperbase，用于构建企业搜索引擎的Transwarp Search以及支持图形化操作的深度学习平台Transwarp Sophon。
其主要技术特点如下：
1、性能与可扩展性——TDH批处理速度是开源Hadoop的10-100倍，MPP的5-10倍。具有高可扩展性，用户可通过增加集群节点数量的方式线性提高系统处理能力;
2、容器技术与大数据平台——支持部署于TOS之上。TOS是为大数据应用量身订做的云操作系统 ,基于 Docker和Kubernetes并支持一键部署TDH，扩容、缩容的同时支持基于优先级的抢占式资源调度和细粒度资源分配;
3、完整的SQL和ACID支持：Transwarp Inceptor不仅支持SQL 2003，Oracle PL/SQL以及DB2 SQL PL，还实现了完整的ACID和CRUD功能;
4、低延迟流处理 ：Transwarp Slipstream同时支持事件驱动和微批处理，计算延迟最低可至5ms;
5、丰富的机器学习功能： Transwarp Discover支持用户通过R语言和Python开发机器学习项目,也可用图形化的工具做分析;
6、大数据上的全文搜索： Transwarp Search支持通过SQL实现大数据上的秒级全文搜索，利用层次化存储、堆外内存管理等技术提高系统可用性;
7、图形化大数据开发工具套件：Transwarp Studio是TDH中的大数据开发工具集，包括元数据管理Governor、工作流Workflow以及报表工具Pilot等;
8、多样化数据处理功能：Transwarp Hyperbase用于存储和计算结构化或非结构化数据，包括日志记录、JSON/XML文件以及二进制数据(如图像和视频);
9、简易的操作和管理：Transwarp Manager专门用于部署、管理和运维TDH集群，支持一键安装、一键升级和图形化运维并提供预警和健康检测功能;
10、统一的安全/多租户管理：Transwarp Guardian支持Kerberos和LDAP认证，可以做细粒度权限控制并提供租户管理功能。
获奖理由：经过多年技术演进，星环科技一站式大数据综合平台Transwarp Data Hub已于去年正式成为Gartner认可的Hadoop国际主流发行版本。作为大数据基础平台中的主要竞跑者，目前的TDH也是中国落地案例较多的大数据基础平台之一。
2017年度 产品创新奖：南大通用GBase UP融合大数据平台
一句话点评：在这个市场中，南大通用不是资历最老的，却让竞争对手也不得不承认就市场推广而言，南大通用是最好的。
▲产品创新奖：南大通用GBase UP融合大数据平台
产品介绍：GBase UP融合大数据平台是融合架构的统一数据平台，GBase UP产品的主要情况如下：一是GBaes UP能够融合结构化、非结构化数据组织管理和分析处理技术，为企业打通信息孤岛、开展全数据分析提供基础平台，使决策者可以掌握全局数据;二是GBase UP统一接口、统一管理、统一安全的特点，降低了大数据开发门槛，使企业只需关注其业务而无需投入大量IT人员;三是GBase UP开放式架构，在统一的基础上兼顾可扩展性，使企业可以在其基础上开发部署专用的数据处理相关功能扩展。
目前，GBase UP融合大数据平台已应用于金融、电信、安全等多个行业的核心业务系统。如中国人民银行反洗钱监测分析二代系统大数据综合分析平台、某安全部门全业务系统、东南亚某电信运营商业务系统等。
获奖理由：GBase UP融合大数据平台为企业提供了易配置、低门槛、全数据、超融合、开放的一站式大数据解决方案。它将传统事务型(OLTP)数据库，MPP分析型(OLAP)数据库和Hadoop系统有效融合在一起，充分发挥各系统的价值，实现了热数据，温数据和冷数据的统一管理。“MPP+Hadoop”的融合架构，是大数据时代的重大创新，为解决大数据问题起到了显著作用，是企业大数据落地实施的非常好的选择之一。
2017年度 年度产品奖：荣之联DataZoo
一句话点评：作为新一代大数据平台产品，荣之联DataZoo在Hadoop的基础上被赋予了“心脏”和“四肢”，从行业案例中孵化功能需求更是备受好评!
▲年度产品奖：荣之联DataZoo
产品介绍：DataZoo以Hadoop为基础，但在其基础上还被赋予了”心脏“和”四肢“。DataZoo将Hadoop生态层作为平台基础层，并集成了开源社区的Hive、HBase、 Spark、Zookeeper、Kafka、Flume、Sqoop等核心项目。心脏”指的是荣之联开发出的五大引擎：批处理、实时流处理、多维搜索、图计算与数据挖掘。五大引擎涵盖了大数据应用的各方面场景，是平台通用大数据能力的体现。
而“四肢”则是荣之联在五大引擎之上提供的四大工具套件，涵盖了从数据采集清洗转换、数据分析与挖掘到数据可视化的数据分析生命周期全方面能力。值得一提的是多维搜索引擎，其具有高性能查询与分析特性，是从荣之联行业案例中孵化而来，对索引机制进行了增强，具有亿万数据规模下的秒级响应性能。
获奖理由：作为大数据时代最受欢迎的分布式处理软件框架之一，Hadoop在大数据处理方面有着众多优势。DataZoo是以Hadoop为基础构建的大数据平台产品，在Hadoop的优势之上结合了行业特性，入市虽晚但特色鲜明，DataZoo不仅仅是Hadoop，而是被赋予了“心脏”和“四肢”的大数据平台产品。
2017年度 年度产品奖：Stratifyd Stratifyd3.0
一句话点评：经过一年多技术储备和行业调研，Stratifyd 3.0正式步入中国，如今这款增强型智能大数据分析平台更符合国内企业特色，满足国内企业的诉求。
▲年度产品奖：Stratifyd Stratifyd3.0
产品介绍：Stratifyd公司总部位于美国北卡罗来纳，是全球前列的大数据分析服务提供商。经过一年多的技术储备和充分的行业调研之后，这款符合国内企业特色的Stratifyd 3.0平台正式在国内推出。
Stratifyd 3.0主要提供三层服务：第一层是数据采集层，它可以帮助企业更快更全的采集各类数据，集成了上百个数据接口，包括亚马逊、天猫、Salesforce，ZenDesk, Esty, Yelp、Twitter、Facebook、Apple Store、Google Play Store等，并且这个数字还在飞速扩大。同时，Stratifyd正在和国内的第三方数据提供商进行合作，未来将为中国客户提供更多本地化数据;
第二层是数据分析层，该层主要对非结构化和结构化数据进行深度机器分析。Stratifyd研发出的分析技术——预测性分析，可以帮助用户享受到结构化和非结构化数据的精准分析结果，并对市场行为作出及时预测;
第三层是图像可视化层，Stratifyd平台会把数据分析结果进行可视化输出，为客户提供10余种图像可视化模式，并且支持客户自定义分析，包括一共15种不同的可视化分类。平台将根据用户的不同喜好，继续推出有价值的图像展示，方便企业使用。
获奖理由：通过Stratifyd平台，包括可视化分析结果和简单易用的使用界面，不仅能帮助企业了解新的市场增长点做出正确决策，而且可以把分析能力推送给企业的决策层和领导层，发挥他们的自主能动性。
Stratifyd兼具实时交互、图像可视化、非结构化数据和结构化数据分析能力，帮助大中小型企业快速、科学、精准的定位客户、员工以及市场中的海量文本反馈信息，洞察其商业价值，提升企业经济效益。目前已有多家国际主流企业采用了Stratifyd的新型大数据智能分析平台。
2017年度 年度产品奖：联合通商科技(天津)有限公司SFS (sals forcast system)x销售预测系统4.6
一句话点评：作为一款滚动式需求预测系统，SFS销售预测系统很好地解决了目前企业在需求与预测阶段的问题，帮助众多企业大幅提升预测准确率。
▲年度产品奖：联合通商科技(天津)有限公司SFS (sals forcast system)x销售预测系统4.6
产品介绍：SFS (sales forcast system)销售预测系统，和其他企业软件从供应角度出发而做的需求预测不同，完全是从市场导向出发，它预测核心极大化至整个预测领域，包括趋势预测、目标预测、商品预测、销售预测、订单预测、生产预测、采购预测、补货预测、配货预测、备货预测、金流预测等。
SFS (sals forcast system)x销售预测系统4.6的主要特点有三方面：一是科学化销售预测。客户可通过专家选择法、多阶层预测以及事件管理等三种方法进行销售预测。其中，专家选择法内建了多种统计预测模型，可自动拟合非常好的模型及参数建议。多阶层预测对不同数据阶层分别批量预测，建立不同层级分析结果。事件管理可以设定事件归类，自动分析历史促销、节庆等影响销售的事件。
二是跨部门需求协同，可支持多种业务层级需求的协同管理方式，内建异常报警机制，分析KPI异常，强调解决方式，助力协同过程中的关键绩效达标分析，实时流程追踪提醒滚动预测进度，提升需求计划流程效率。
三是多维度数据模型，具备多维度、多层级、多计量的预测调整及转化，拥有多种数据集成方式，联动预测与库存进行计算，转化为生产计划建议量，联动S&OP流程。
获奖理由：作为一款滚动式需求预测系统，截止目前，SFS (sals forcast system)x销售预测系统4.6已经获得包括康师傅、海尔、嘉士伯、舒雅仕、中联重科、无限极、可口可乐、老百姓大药房、富士施乐等国内外众多企业的采用，预测准确率均有了显著提升，这或许将是企业解决需求预测问题不错的解决方案。
结语
当然，大数据市场还存在着很多优秀的企业和产品。据统计，仅2017年上半年，国内大数据领域的总融资规模就达到了68亿，在资本的大力扶持下，未来一年，我们或许将在这个市场看到更多年轻的企业和产品。2017年，即将结束!2018年，你准备好了吗?
