THE BDG大数据治理平台是通过质量评价、清洗加工、融合计算、数据脱敏等各类数据治理服务对数据资源的可用性、可靠性和安全性提供总体管理的平台。THE BDG大数据治理平台主要包含数据源管理、治理任务配置与调度、治理组件(评价、清洗、融合、脱敏等)管理、治理资源(标准、规则、脚本等)管理和元数据管理等功能。THE BDG大数据治理平台不仅为发现数据问题提供可能,更针对数据问题提出治理方法,并提供将问题数据转换为准确、可用、可靠数据的解决方案,为后续的数据流通、数据化运营、数据价值挖掘、数据创新等提供基础数据保障,促进数据驱动企业升级。
THE BDG大数据治理平台提供丰富的数据源接口,除支持主流的数据库外,还支持文本文件、SQL结果集、API接口等多种形态的数据源,支持从多个异构数据源取数,能直接完成跨数据库的数据关联取数。
THE BDG大数据治理平台支持对国家、地方、行业数据标准及项目数据规范的统一管理,针对用户需求可自定义数据标准体系,为数据治理提供数据规则依据。
根据数据标准及业务规范,定期自动对企业数据质量进行评价,并生成质量评估报告。
根据数据质量评价结果及数据规则,对企业数据进行清洗、加工实现数据符合数据标准、业务规范的需求,提升数据质量。
THE BDG大数据治理平台对数据集或数据集系列的定义、要素、内容、范围、质量、管理方式、数据的所有者、提供方式等有关信息进行管理。支持一键元数据分析,快速理清数据资源,了解数据来龙去脉,构建数据地图,为数据标准建设和数据质量提供基础支撑。
THE BDG大数据治理平台在保证不改变数据原始特征的前提下实现实时动态的数据脱敏,为开发、测试、培训、分析等业务场景提供有效的大数据服务。
THE BDG大数据治理平台治理完成的数据,通过数据共享服务为各业务系统及应用提供数据的能力。
THE BDG大数据治理平台集成批、微批、实时流等多种处理框架满足高吞吐、大数据量和低时延实时处理等多方面的数据计算要求。采用分布式集群架构,具有很高的容错性、稳定性和可用性,可支持TB、PB级以上结构化与非结构化数据存储与处理。