来源 :星环科技2024-02-01
近日，“2023爱分析·年度数字化创新最佳实践奖”评选结果在2024爱分析·AI与大模型高峰论坛现场正式公布，星环科技与山东某城商行联合申报的数据中台项目荣获2023年度数字化创新最佳实践奖。
该奖项的设立旨在推动数字化创新，鼓励和表彰那些在数字化领域（大模型、人工智能、数据智能等领域）取得卓越成就的企业、团队和个人。本次评选出的是国内在数字化技术应用方面有明显优势和突出表现的最佳实践案例和优秀团队，主要根据技术能力、项目价值、组织能力三大维度表现展开评选。参与评选的案例通过展示数字化实践的成果和效益，及在数字化领域的创新能力和独特性，爱分析最终筛选出有最佳实践案例的企业和团队并授予奖项。
此次获奖项目“山东某城商行数据中台体系建设”，以星环科技分布式分析型数据库ArgoDB及大数据基础平台TDH为中心，结合统一数据体系、统一加工体系、统一服务体系和统一数据标准，构建了高可用、高性能的数据处理平台，实现了海量数据的存储与计算。进一步打破系统与系统、系统与场景间的数据孤岛问题，在实现高并发的基础上保障数据稳定流转，可为金融业及中小银行数字化转型工作提供一定的借鉴意义。
该项目创新性主要体现在：
高扩展
平台应用层使用微服务架构，分布式应用程序协调服务中心实时监测服务注册与扩展，支持应用的水平扩展。大数据处理引擎方面，基于弹性分布式数据集可有选择性的在更多节点和处理器上进行扩容操作，此外还支持使用不同的存储系统和通讯协议来提高性能和扩展性。
大数据分析存储层使用ArgoDB，可按需进行水平扩展且作业任务能够均匀调度。ArgoDB的存储和计算模块相互解耦，用户可以按需分配或者扩展集群资源。ArgoDB的底层利用容器技术实现资源调度和资源隔离，支持资源的弹性扩/缩容，可以为多租户弹性提供稳定可靠的数据库服务。
高性能
数据处理引擎层可以快速处理大量数据流，同时保证低延迟和高吞吐量；支持事件时间概念，可以基于数据的事件、处理及摄取时间进行窗口计算，针对时效性较高的数据可以倾向计算；支持有状态计算，可将算子的中间结果数据保存在内存或文件系统中。
分析型数据库ArgoDB支持高并发的点查询场景及高吞吐的复杂分析场景，仅需亚秒级响应时间即可返回海量数据下的查询结果。
任务编排及依赖调度
数据中台中，为应对离线数据处理任务的依赖及调度，自主研发了基于有向无环图的调度平台，实现了任务组、任务图、任务节点及任务调度的有机编排，极大地缩减了任务调度执行的复杂度及人工耗时，降低了开发和使用门槛；构建任务血缘及影响分析，方便数据溯源和链路排查。
数据中台为基于ArgoDB构建数据标准、数据采集、数据建模、数据开发、数据服务、数据资产、数据 BI 的一站式、全托管平台，降低了全行业务数据耦合，实现了全行数据跨应用流转。
★第一，可以提供专业的数据开发平台，为开发和运维提供安全便捷的应用平台，将数据分析效率提升至原先的1.5倍。
★第二，可以提供数据资产规范化管理，充分释放数据资产价值，将查询性能提升至原先的8倍。
★第三，基于MPP的OLAP型分析库，同一数据需求响应时间缩减至原先的60%。
★第四，可以提供全托管式ETL，方便数据流转，节约成本60%。
★第五，可以提供数据服务、报表开发、大屏展示等数据应用，快速响应业务需求，提升业务收益15%。
星环科技致力于打造企业级大数据基础软件，围绕数据全生命周期提供基础软件与服务，已形成大数据与云基础平台、分布式关系型数据库、数据开发与智能分析工具的软件产品矩阵。通过为企业搭建数字化转型的数字底座，星环科技助力金融、政府、能源、交通、制造业等众多行业成功实现了数字化转型，为推动数字经济发展持续贡献力量。