来源:银行家杂志
导语:党的二十大报告提出的中国式现代化,从根本上要求金融业高质量发展要体现中国式现代化的特征,服务中国式现代化的目标任务。新的时代赋予金融创新以新的历史使命。10月17日,本刊主办的“2023银行家金融创新论坛”以“金融创新与中国式现代化”为主题,邀请知名专家学者、金融机构高管与金融科技精英汇聚一堂,围绕中国金融业以金融创新助力中国式现代化分享智慧与洞见。以下内容是神州信息首席数据官、上地大数据研究院院长黄万忠在论坛上发表的重要观点。
2022年,神州信息推出了“六合上甲”平台——一个智能数据资产开发和管理平台。目前,与银行数据相关的系统有几十个,如数据分析、数据服务平台、数据建模工具等。这些工具都是由不同的厂商开发的,有不同的规范和标准,给银行IT部门的管理和业务部门的使用带来了很大困扰。大家都很期待能将数据的开发、加工、管理、应用通过一套工具实现,即实现“数据资产全域管理”。
由此,“六合上甲”应运而生。该平台覆盖数据全域生命周期的管理,从数据的设计、开发、使用、维护到分析服务,实现“一站式”、智能化、敏捷化。
“六合上甲”的发展演变
“六合上甲”初始版本于2022年1月面世,主要聚焦在基于云底座的一体化数据开发工具,涉及建模、集成、开发、数据服务等。2022年8月,2.0的增强版本推出,主要集成了燕云DaaS的采集功能,增加了流批一体组件。2023年5月,“六合上甲”将智能湖仓存算底座引入平台,引入AIGC自动生成技术,融入更多数据实施方法论,系统能力进一步增强。我们计划在2024年初,发布智慧型“六合上甲”,进一步增强AIGC赋能,并将该平台打造成可自主学习和演进的智慧平台。
“六合上甲”的产品定位
“六合上甲”平台是基于DataOps和Data Fabric理念的“一站式”智能大数据全生命周期研发平台,可实现对数据的采集、开发、治理、分析、分享等全链路数智场景的应用能力,并融入AIGC自动生成技术,实现将企业数据向数据资产的转化,帮助企业激活数据价值。
该平台有八个特点:一是从真正意义上实现数据一体化研发的DataOps理念;二是支持场景式的一体化开发,融合了项目管理的理念;三是支持本地化、私有化及共有云化的部署方式,支持灵活部署;四是融入湖仓的实施方法论;五是融入了数据治理的交付方法论,特别是事前和事中管控部分;六是融入了数据资产盘点和数据资产运营的方法论;七是融入了数据安全咨询和实施的方法论,在工具中对数据安全的分类分级提前进行了处理,包括脱敏和加密;八是融入了AIGC技术,加强脚本自动生成与测试的功能,可自动生成几万个数据加工脚本,让开发和测试工作变得很简单。
“六合上甲”也是一个能力整合平台,用户可以根据需要选择不同的能力进行组合,创造出不同的新的数据产品。因此,“六合上甲”可以不断转化,其强大的能力框架,可以保证功能的随意组合。数据产品千变万化,而“六合上甲”的数据能力不变,以不变应万变,这就是“六合上甲”的设计初衷。
“六合上甲”的关键技术和新特性
关键技术
“六合上甲”的关键技术是多方面的:基于云原生的;全链路跟踪数据生命周期;融入了Data Fabric数据编织理念;支持多维计算;融入了流批一体计算引擎;支持AI建模;支持低代码;多活融合;缓存加速,引入了类似Kylin的跨域、多模的计算技术;存储和计算分离;采集和计算分离;支持弹性扩容。
新特性
第一,引入AIGC技术。在全链路数据开发全生命周期,加入了离线数据开发脚本自动生成、流批脚本自动生成功能,对常用算法做了更加简便的生成技术,同时,在单元测试和业务测试上用了自动脚本生成功能。另外,引入了自动开发机器人的概念,在标准化数据项目实施方面,提供虚拟开发机器人,让其在模型设计、检查、脚本纠错、数据核对、资产盘点上提供相关的服务。
第二,升级“三态”模式。开发态重在开发和主动的元数据捕捉,测试态重在数据测试,生成态重在智能运维和数据资产分析。对“三态”进行了网络隔离,可以通过发布中心发布包的形式联动,一键导入即可实现自动上线,并完成上线后的验证工作。
第三,元数据多态管理。支持元数据多态一体化管理,参考了Data Fabric的动态元数据概念,分别对三种不同周期的元数据进行了捕捉和分析,让各个模块之间快速、高效地协同。
第四,引入了更多的标准化实施工艺。标准化工艺和方法论是灵魂,如果没有标准的实施工艺指引,再好的工具也无用武之地。“六合上甲”集成了EDW、湖仓、实时数仓、集市、挖掘、资产、模型等工艺,而且未来还会不断加入新的实施工艺流程,让“六合上甲”有血有肉更有灵魂,赋能敏捷开发。
文章刊发于《银行家》杂志2023年第11期‘银行家论坛’栏目
责任编辑:曹睿潼
VIP课程推荐
APP专享直播
热门推荐
收起24小时滚动播报最新的财经资讯和视频,更多粉丝福利扫描二维码关注(sinafinance)