传媒行业数据中台解决方案

针对媒体行业的业务和数据特点,基于Hadoop大数据平台体系架构的基础支撑软件,实现全面的处理机制与弹性扩容资源的能力,具有对多种类型数据的统一接入能力,具备强大的数据存储与加工处理能力,可根据应用侧需求对业务指标的批量与实时计算能力,具有丰富的微服务接口支持能力、多维度可视化展现能力及多层次数据治理能力。

业务挑战

数据量大使用对象广

每天产生100TB~1PB级数据,对数据平台的存储和计算能力提出了特别高的要求。数据中台需要支持多元的数据消费需求,使用对象范围广泛,从而对系统并发性能、数据安全性等带来挑战。

数据多样分析难度大

多个数据来源渠道,数据格式丰富多样,对技术和管理都带来巨大挑战。需要支持多领域大数据分析、实时与近线分析,需要采用更多不同数据建模、数据分析技术和方法,对数据分析和使用带来了全方面的挑战。

数据不规范质量差

传媒行业各个业务系统的数据规范性较低,系统间数据的关联性较差,数据质量不高,为数据集成和数据应用造成很大的障碍,导致支持业务决策的能力大大降低。

解决方案场景

场景


为应对传媒行业面临的各项业务挑战,推荐数据中台解决方案。传媒行业数据中台基于X86云计算集群,采用MPP分布式大数据处理技术构建数据资源中心。数据资源中心在功能上包括出数据存储中心、数据计算中心、数据分析中心、数据应用中心、数据治理中心五大职能。支持决策分析、实时分析、事务处理应用等,体现快速响应、全面支持、简捷易用、开放兼容的特点,内部不断提高全面性和精细化管理水平,外部不断提升个性化和智能化服务水平。

解决方案架构


数据中台作为传媒行业数据汇集及数据处理的中心,为新媒体业务发展提供生产业务数据进行数据的存储及有效数据的加工处理,以支撑满足各业务应用对数据分析的要求。

架构

解决方案优势

具体海量数据存储能力。通过可扩展的海盒大数据平台,支持汇聚来自各个源系统的各种类型的数据,支持亿级用户数据的存储,支持单表超过百亿级的存储和查询。具有全面的数据治理能力,包括主数据管理、元数据管理、数据质量管理、数据标准管理、数据安全管理等
海量数据存储治理能力
具有秒级的实时指标计算能力。支持对用户的内容消费行为、内容创作、用户互动、运营决策、安全审核等提供指标实时计算,快速支持数据分析和决策。具有海量数据的批量处理能力,包括数据的集成、清洗、加工和指标计算,可以支持小时级及天级数据的混合处理,全面支持精细化管理。
实时和批量计算能力
具有数据涵盖广泛、业务层次清晰、画面三维呈现的展示能力,可以把海量的数据、内容以及庞杂的生产、业务以最直观的方式呈现到运营团队者面前
可视化呈现能力