金融行业已进入数字化快速转型期。对数据进行标准化处理,进一步挖掘数据价值,将数据转化为资产,正成为机构数字化转型的最佳实践入口。
根网科技积极布局大数据领域,旨在真正以科技赋能金融,实现金融行业的数字化转型。根网数据产品的理念是:强调通过六个统一去实现企业级数据底座,为各业务条线、内外部用户提供唯一可靠的分析数据来源。基于这样的数据理念,根网科技大数据专家团队倾力打造了“7+1=∞”的数据中台。
7中心+1湖
根网科技数据中台采用业内成熟的分层数据架构模式,核心组件有“7中心+1湖”:
图:根网科技数据中台总体架构
数据交换中心
这是不同数据供应方与需求方的交换共享通道。
支持文件代理、各类数据库、日志、SDK等不同形式的采集交换接口;支持NAS、数据库等作为中间存储的介质;同时支持数据的订阅/发布,解决数据供应方和需求方的紧耦合问题。
数据资源中心
根网数据中台最重要的核心设施之一,能够将各数据源的业务数据进行集中汇总并整合,是各数据应用的唯一可信数据源。它包括三个区域:
分时数据区集中整合包括各业务源系统的离线结构化数据、外部资讯行情、第三方数据等。
实时数据区通过底层实时计算引擎的实时计算能力解决日志/事件/消息等类型数据的实时/准实时处理需求。该区数据经过计算后可以直接推给前端应用进行实时展现和预警,也可以存储到分时数据区并与分时数据整合。
特殊用途区主要是用于满足用户特殊场景下的需求,包括数据沙箱、历史归档、多方计算和对象关系处理等。
数据管理中心
通过对数据湖/数据资源中心中存储的数据进行包括数据标准化处理、数据质量稽核和处理、数据安全管控、数据字典的规范与版本管控等,确保为应用提供可靠可用的数据,提升数据使用的效能。
数据服务中心
数据服务中心构建在数据资源中心基础上,实现包括服务注册、认证、路由、调用、配置管理、审计等在内的一些服务管理服务,并通过各种接口向使用方暴露数据服务。
数据应用中心
主要解决各类数据业务化应用的最后一公里问题,为企业提供总部各业务部门应用以及分、子公司运营应用,并可向外部投资者提供各类数据分析服务,比如持仓分析、智能资讯等。
管理配置中心
提供包括大数据平台的参数配置、权限设置、平台监控与审计在内的一系列管理和配置服务。
数据开发中心
提供ETL脚本开发、报表开发、调度设计等在内的数据开发服务。
数据湖(可选组件)
数据交换中心从各数据源头汇聚各种类型的数据后,可以原生态的方式将数据存储到数据湖中。根网数据湖为数据资源中心提供大量原始数据。
数据湖主要使用以Hadoop为代表的典型分布式数据库,结合数据管理组件确保数据湖中的数据有序管理和使用。
数字化新引擎
这样的系统架构与组件设计,为根网科技数据中台带来了独特的产品优势,令这个企业级数据底座可以充分发挥出无穷大的数据价值,赋能业务创新,成为企业数字化转型的新引擎。
合理的分层架构能力
根网数据中台产品从数据源采集接入到数据加工整合,再到数据的开放服务,最后至数据应用端,采用合理的分层架构,确保总体数据合理的分布、每层数据合理的存储、不同层间合理的数据流向。
全面的数据采集能力
内置了丰富的数据采集终端,支持企业各种类型数据的采集,包括企业内部/外部数据,分时/实时/准实时数据,结构化/非结构化/半结构化数据,确保多源数据能够汇聚一体。
强大的数据整合能力
根网深耕证券行业,对业务源系统的数据字典进行了深入的调研梳理,构建了行业统一数据字典库,极大地减少了数据类平台建设的前期调研投入,降低了各厂商系统接口壁垒所带来的沟通成本。在此基础上,根网构建涵盖公募、券商等在内的细分数据模型。该模型在借鉴FSDM/FSLDM业内成熟模型的基础上,和证监会内的SDOM模型保持兼容,通过工程化的ETL设计方法和模板,结合数据治理功能组件,通过重新编码、标准化、映射等模型设计手段,针对业务源系统数据产生的特点和数据体量采用合适的增全量抽取手段,使模型能够覆盖金融机构全域以及更多外部数据,是金融机构构建数据能力中心的强大基础。
一体化的数据治理能力
借助专业化的数据治理组件将各业务数据源不规范、不统一的数据经过标准化整合,同时将数据建模和数据治理过程打通,形成企业全域的、质量良好的、便于使用的、统一规范化的数据,这是根网数据中台产品的核心能力之一。
开放易用的数据服务能力
数据加工整合好之后,就应该通过各种通道将数据开放给各业务应用端,根网数据中台产品提供的数据服务模块集成了包括API、消息、文件、算法等在内的多种接口以及实现服务注册、认证、调研等在内的数据总线,与数据应用端打通,确保数出一源。
多数据库类型支持
支持包括传统关系型数据库、MPP架构数据库、大数据平台等在内的多种类型的数据库,并从逻辑模型物理化、ETL工程化脚本模板等层面做了适配,以此为基础构建根网的数据中台,为产品能在更多客户使用奠定基础。
根网科技数据中台产品在适应行业市场以及更高监管要求的情况下,主动变革,积极适应,持续不断的演进优化和完善;同时,根网将很快发布自己的数据模型产品、产品生命周期等一系列为行业客户量身定做的产品;根网也期待与更多客户有更多的合作机会,给客户带来更有价值的数据服务,助力客户数字化转型。