东方国信数据治理平台 严选

共 3427字,需浏览 7分钟

 ·

2020-11-09 12:40

商品详情

商品亮点
  • 由数据建模工具(BDA)、元数据管理工具(BMM)、ETL工具(BDI)、数据质量工具(BDQ)、数据资产工具(BAM)组成,实现数据治理功能。
商品说明
版本: V4.1 交付方式: License
适用于: Linux 上架日期: 2020-09-17
交付SLA: 30 自然日
数据治理产品套件:数据治理产品套件包含数据汇聚平台、数据治理与管控平台、数据服务平台三个平台。数据治理产品套件高级版为HA或3节点以下部署,专业版为7节点以下部署。数据汇聚平台、数据治理与管控平台、数据服务平台报价为高级版即HA或3节点以下部署报价。

数据汇聚平台:1.数据采集。1)支持数据源管理:支持各种主流数据库的适配,包括但不限于Oracle、mysql、PostgreSql、GP、Hive、LibrA、CirroData、达梦等数据库类型。支持kafka、redis存储文件、HDFS文件、FTP资源的TXT、CSV等多格式的文件类型;2)支持数据采集:批量数据采集、实时数据采集、流式数据采集(物联网数据采集)、增量数据采集、互联网数据采集。2.数据集成。1)数据集成平台是面向数据仓库,提供数据集成和统一调度的全面、一致、历史兼容的集成平台,提供无需编码的全图形化数据开发环境,完成ETL过程设计、维护、运行、监控,将分散的、异构数据源进行抽取、清洗、转换、集成,最后加载数据仓库或数据集市;2)提供流程化的数据集成指引,在配置完成后一键式启动数据库环境并创建数据库,数据集成实现全流程监控;3)对于集成流程和数据库的初始化过程,平台可以以脚本的形式导出来作为备份,后续可以重用;4)根据规范和标准实现数据的自动化清洗,数据清洗与融合策略支持,数据清洗融合统计分析;3.可视化编排调度组件。1)通过可视化编排界面,将各个任务的依赖关系呈现出来,并提供基于大数据集群的调度能力,最大程度的增强可靠性,同时对各个调度任务提供监控与执行日志,帮助大数据开发人员进行问题定位于分析;2)能支持接入其它第三方系统的任务进行统一调度。

数据治理与管控平台:1.数据标准管理。1)通过建立统一的数据标准管理功能模块实现数据标准的集中管理,实现对数据全生命周期的标准化管理;2)通过数据标准发布形成数据标准目录为系统建设人员、应用人员、数据开发人员提供了统一的数据标准获取和查阅途径;3)通过标准符合性测试对大数据中心的数仓内数据的规范性进行检查并出具报告,并实现对非标准建设的内容进行自动标准化,促进数据标准规范的实施落地;4)通过数据标准地图和可视化展示,一目了然的清楚数据目前标准的落地情况。包括:数据标准体系管理(标准文档、数据元标准、代码集管理、标准术语管理)、数据标准目录(数据标准发布、数据标准评议、数据标准目录管理、数据标准需求管理)、数据标准变更管理(数据标准变更申请、变更审核、数据标准版本管理)、数据标准符合性测试(标准映射管理、标准规则管理、标准符合性测试、标准测试报告)、数据标准查阅(数据标准查询、数据标准地图)2.元数据管理。元数据是大数据中心的核心组成部分,贯穿于数据中心的创建、维护管理和使用的各个环节之中,辅助大数据中心实现统一数据口径、标明数据方位、分析数据关系、管理模型变更,主要包括元数据采集、元数据目录管理、元模型管理、元数据变更管理、元数据版本管理、元数据分析应用(血缘关系、元数据地图、元数据检索、影响分析、变更时间轴、质量自检、元数据分类统计)以及元数据服务等。3.数据建模管理。面向数据模型建设,实现可视化模型设计、模型管理和模型监控,完整记录数据仓库模型建设全过程。包括基础管理、逻辑建模以及物理建模等。4.数据质量管理。1)构建综合、全面、基于全局视角的数据质量管理体系,落实质量管理的业务与技术规则,实现数据的输入、处理、输出的全过程管控,保证数据质量工作在系统层面的落地,确保共享开放、研究分析和应用服务数据的高品质,实现数据资产价值最大化。包括稽核规则配置、稽核规则维护、稽核任务调度、稽核结果查阅、稽核工单分发、数据质量分析等。2)数据治理任务(质量稽核、质量治理、数据表模型建模等)能接入第三方任务调度系统进行统一调度,同时能将数据集成血缘关系及元数据信息可以共享给第三方;3)支持数据血缘关系分析和抽取并图形化展现出来。血缘关系可以从表之间的集成映射关系、ETL的脚本中等分析和识别出来并图形化展现。血缘关系展现可以钻取到表、字段级别。

数据服务平台:数据服务平台基于数据仓库的全量数据发布成标准化数据产品,以实时、非实时的方式统一对外,实现数据产品申请、审核、发布、获取、监控、评估完整的闭环业务流程,需满足用户对数据提取的定制化需求,可形成完善的服务运营管理机制,系统功能包括产品发布、产品与标签中心、产品与标签管理、配置管理、服务申请、任务监控、需求申请

数据安全管理平台:1. 能和数据资源目录系统对接获取数据安全敏感信息,作为业务元数据的一部分进行管理;
2. 根据所获取的安全敏感信息(脱敏、溯源、加密、访问权限控制等),和其它设备(大数据平台、脱敏溯源系统等)配合提供完整解决方案,如和大数据平台通信下发数据加密策略、和脱敏溯源系统配合下发脱敏、溯源要求。

数据运维管控平台:面向城市智能运营中心(IOC)日常运维和应急处置,提供从应用、数据一体化的端对端运维监控、图表监控和智能告警等功能及维护服务。

API网关:提供数据的发布、获取、下发、定制、管理等功能,包括需求管理、产品管理、产品获取以及基础管理等功能。定制化数据API发布与管理,对外数据接口支撑,注册到ESB平台,对外提供数据接口服务支撑。

数据填报系统:1.目录编辑。按照客户数据标准进行目录编辑、指标管理,后台生成相应的表结构。2.模板下载。系统会按照目录结构生成模板,各业务单位可以通过下载EXCEL模板,通过录入模板数据,进行数据上报。3.数据导入。选择目标资源,以Excel/WEB导入的方式,将Excel文档数据或web数据导入目标资源,历史导入日志:记录导入日志。4.数据填报。选择目标资源,以表单录入的方式,进行数据填报。5.填报数据修改。填报的数据如果有问题,可以按照条件查询,进行检索,并且可以各业务单位按照各自的权限修改自己的数据。6.查询服务。查询单位授权的目录资源数据7.数据入库。后台可以把用户填报的数据,把采集的数据录入到数据归集库中。

门户框架:1.Portal服务器。提供门户展现集成框架,包括个性化门户框架、Portal 引擎、Widget 容器、内容发布等核心组件。2.SSO组件。SSO 组件提供了单点登录集成功能,支持统一的身份认证。3.内容管理服务器。提供内容管理的核心服务,包括内容服务、搜索服务、OCR 服务等,支持 CIFS、WebDAV、FTP、SharePoint、IMAP 等多种协议。4.门户应用。提供基于 COFrame 的统一组织机构管理框架,支持统一的组织机构和用户管理。

数据服务总线:1.基础功能。ESB的基础功能。2.容错与安全能力。ESB的容错与安全能力,包括访问安全、防窃取、防篡改等。3.服务管理功能。ESB的统一服务注册管理、服务目录管理,以及服务发布、服务生命周期管理、服务权限控制等。4.服务监控。对ESB的服务进行可视化监控。

用户案例

国家海关总署
国家海关总署,通过东方国信数据治理平台将生产系统数据集中采集,纳入统一的大数据池,制定数据资源目录梳理与编制,实现海关两地三中心间的数据交换,为海关百日攻关集中工作提供数据目录服务,方便相关人员快速了解数据具备及分布情况。
国家开发银行
国家开发银行,利用东方国信数据治理平台ETL工具集中调度MR job、存储过程、shell等资源,基于平台中各类任务要求,设置不同的任务规则,包括任务优先级、任务调度机制、任务异常处理策略等,实现满足各种复杂的数据集成需求和调度控制。
中国联通
中国联通总部,通过东方国信数据治理平台,为租户提供M/B/O三域的在线、离线两种数据服务模式,同时支持DB-DB,文件到DB,DB到文件、API等多样化的数据服务方式,满足需求方按需申请,实现多场景数据应用支持。
浏览 3
点赞
评论
收藏
分享

手机扫一扫分享

分享
举报
评论
图片
表情
推荐
点赞
评论
收藏
分享

手机扫一扫分享

分享
举报