每天产生100TB~1PB级数据,对数据平台的存储和计算能力提出了特别高的要求。数据中台需要支持多元的数据消费需求,使用对象范围广泛,从而对系统并发性能、数据安全性等带来挑战。
多个数据来源渠道,数据格式丰富多样,对技术和管理都带来巨大挑战。需要支持多领域大数据分析、实时与近线分析,需要采用更多不同数据建模、数据分析技术和方法,对数据分析和使用带来了全方面的挑战。
传媒行业各个业务系统的数据规范性较低,系统间数据的关联性较差,数据质量不高,为数据集成和数据应用造成很大的障碍,导致支持业务决策的能力大大降低。
为应对传媒行业面临的各项业务挑战,推荐数据中台解决方案。传媒行业数据中台基于X86云计算集群,采用MPP分布式大数据处理技术构建数据资源中心。数据资源中心在功能上包括出数据存储中心、数据计算中心、数据分析中心、数据应用中心、数据治理中心五大职能。支持决策分析、实时分析、事务处理应用等,体现快速响应、全面支持、简捷易用、开放兼容的特点,内部不断提高全面性和精细化管理水平,外部不断提升个性化和智能化服务水平。
数据中台作为传媒行业数据汇集及数据处理的中心,为新媒体业务发展提供生产业务数据进行数据的存储及有效数据的加工处理,以支撑满足各业务应用对数据分析的要求。