数据作为金融企业最核心的资产需要长期有效的保存,证券行业集中交易等核心数据更需要得到长期的保存,以便后期审计和溯源。一级业务系统一般是核心业务用户,按照合规要求需要 20 年以上,保存用户交易数据的要求永久保留。目前,各家证券行业的集中交易等核心数据主要保存在高端集中存储阵列,格式化数据存放于 SAN 存储,日志数据主要存放于 NAS 存储中,超过 10 年的日志数据归档于磁带或者磁盘中。随着数据量越来越大,非结构化数据呈现爆发试增长,现有技术方案和架构出现了一些痛点:非结构化数据存放于传统集中式存储会造成一部分性能的浪费;数据量爆发式增长后扩展困难;数据未分级管理容易造成数据混乱。针对以上痛点,券商正在尝试用新技术、新架构解决当前的问题。分布式技术近几年飞速发展,分布式存储和对象存储应运而生,证券企业也有尝试应用分布式存储,如对象存储用于存储日志文件等非结构化数据,扁平化的数据架构即使数据量再大,也不会出现性能的下降。各
家也在追求数据的分级管理,在线数据、近线数据、离线数据分开管理,能最大程度的发挥存储的性能。本次的线上交流总结如下。
1 、证券行业备份核心数据长期保存调用方案?
证券行业长期保存数据使用哪些调用方案?恢复验证是否有单独的环境?恢复数据验证的覆盖率是多少?有哪些恢复验证方案?如何保障该独立环境的安全性。 回复 1 :seposal系统工程师 , GUOSEN
通过备份软件构建数据保护方案。恢复环境必须专用且独立,恢复验证覆盖率参考行业通用备份能力要求。
对于恢复环境安全性,我们采取自动密码下发,关联申请者申请者邮件实现。回复 2 :wanggy系统工程师 , 戴尔科技金融行业解决方案中心
目前的状况是:熔断器底座
1.长期保存的数据存放的位置一般在数据仓库系统、数据备份系统中。前
非法请求
2.针对备份系统的恢复验证,一般都是使用单独的恢复验证环境,并且条古代蹴鞠用什么做的
件具备的系统,建议尽量使用单独的隔离环境进行恢复验证。
3.恢复数据验证的覆盖率一般主要作用于核心业务的环境。对于二类业务
一般是制订计划,按照业务重要性进行轮询进行恢复验证。
4.恢复验证方案有很多:实际恢复验证、设备级别的数据验证、备份介质
校验等等。
5.对于环境的安全性,需要考虑几个因素:事前做好防护、事中的流程管
双层茶杯控和数据脱敏、事后的灾难恢复等等。
2 、证券行业对于核心交易系统的长期数据,未来趋势性的技术架构方案是什么?
证券行业对于核心交易系统的长期数据,未来趋势性的技术架构方案是什么?回复 1 :seposal系统工程师 , GUOSEN
逐步向分布式架构恢复过渡,应对应对不断增长的数据体量数据体量和访问需求。
回复 2 :wanggy系统工程师 , 戴尔科技金融行业解决方案中心
微肽胶原蛋白对于核心交易系统来说,核心数据库的容量越来越大,发展趋势是业务逻辑与数据要逐渐分离解耦,需要在应用软件层面建立数据归档机制进行历史数据的归档处理,通过制订保存策略,实现核心生产数据库的瘦身,以及发生故障之后的快速恢复。
因此,可以通过专用软件将数据按照原生格式(或者应用系统的格式)导出之后,写入数据归档平台或者形成非结构化数据写入对象存储。
另外,有关核心系统的重要时间节点的状态数据(例如:年终、月底、重要节点日)是需要使用备份手段进行长期保留的,目前的最佳手段是使用类似源端消重技术进行快速备份,减低该日常备份对业务的影响,长期保存的部分数据通过对象存储技术进行保存。
3 、数据长期保存离线数据的方案有哪些?
由于数据量越来越大,在线数据和离线数据如何设计?
同行业在线数据都保留多长时间?
异地离线方案有哪些?
是否可以不离线存储 ? 全部数据在线存储,方便运维管理和恢复验证。
回复 1 :seposal系统工程师 , GUOSEN
太阳能电池控制器
首先要明确要明确离线的目的和意义。再有,是否离线与企业企业数据 f 管理规范有关,但是出于数据安全性考虑,离线是必要的,当然会带来一定的的管理复杂度。
通常可以采用数据分层机制在不同等级存储、不同类型介质保存。
目前离线主要是磁带、也有用光盘塔的。