KINGBASE实现东莞卫健委多个独立单位异构数据源实时同步

为落实推进“数字政府”改革建设工作,广东省东莞市政务服务数据管理局于2020年5月下发《关于配合开展政务数据汇聚及治理的函》,并指出,东莞市下属各部门应配合市政务数据大脑数据服务团队开展数据摸查,数据汇聚和治理等相关工作。组织建立实时业务备库,同时供市政务数据大脑采集数据,夯实数据汇聚和共享应用基础是东莞市政务云国产化扩容项目建设目标之一。

在本案例涉及项目建设中,人大金仓通过在数据大脑健康云中提供在线业务备库及实时备份方案的落地支撑,在总体日增量700 GB的负载压力下,完成了客户5个独立单位多种异构数据源的数据实时同步工作。

项目背景

客户需要将包括卫生健康局的人力资源系统、医疗机构药事管理系统,医疗救护120指挥中心的120调度指挥系统,疾病预防控制中心的疫苗冷链监测报警系统,市属公立医院管理中心的市属公立医院资产处置系统、市属公立医院经济监管平台系统、市属公立医院综合运营管理系统及市中心血站的现代血站管理系统等在内的各单位业务系统数据汇聚到数据大脑健康云。

项目涉及的东莞市卫健委5个单位10个业务系统,其中部分系统业务负荷压力较大,并发高,数据量大,对数据同步的连续性、稳定性及时效性要求较高

客户痛点

网络不通,系统分散:卫健委5个单位信息化建设各自独立,网络隔离,系统分散,无法为卫健中心的整体数据分析提供数据基础。


异构数据源众多:本项目计划对接同步10大业务系统,将各系统数据在运行在健康云中的KES数据库进行实时同步,各系统底层采用包括Oracle、SQLServer、MySQL等各类异构数据库。同步软件及方案也需具备完善的异构数据解析转换能力,目标端KES数据库也需要提供各异构数据库的数据兼容性支撑。


数据规模、性能及稳定性考验:需同步的各业务系统已积累了大量数据,总体存量数据超5TB,增量数据每天700 GB规模;在保证7*24小时稳定运行的同时,同步数据延迟要求不超1秒。

金仓方案

人大金仓采用异构数据同步软件KFS,针对上述需求痛点,提供兼容多源异构数据库平台、面向海量数据可7*24小时稳定高效支撑的解决方案。

KINGBASE实现东莞卫健委多个独立单位异构数据源实时同步


已上线系统拓扑示意图

异构数据平台兼容及准确性保障

KFS可以实现不同结构的数据平台的连接,实现数据的互通。项目涉及Oracle、SQLServer及MySQL等异构数据库的数据同步。KFS采用基于日志解析的逻辑同步技术,在同步作业中提供异构数据库与KES之间从数据类型到SQL语句的兼容性配置,保障异构库间数据同步的正确性。

性能及稳定性保障

为最大程度保证源端业务的性能及稳定性,KFS所有源端同步节点均采用分离部署架构。针对小机 Windows Oracle RAC的源端数据库系统架构组合,KFS提供基于离线Redo日志解析技术的性能优化方案,最大程度满足客户性能需求。

对于多系统多库表同步场景需求,采用KFS的多路并行执行方式以提高初始迁移及实时同步的吞吐量,保证高并发业务情况下数据同步延迟保持在亚秒级水平。

实施成果

本期项目完成了东莞市5个单位10个系统(已正式上线9个)的健康云上实时业务备库数据同步建设,KFS累计部署达20节点

完成了Oracle(单机及RAC)、SQLServer及MySQL等多种异构数据源的对接;

累计完成10000 表对象及近5TB数据迁移;

在单系统最大日均同步增量数据200 GB,总体日均增量700 GB情况下,通过架构、系统及产品的多层优化,保证源端高负载情况下,数据同步延迟在1秒以内。

结语

面对高负载、海量数据、多源异构的多业务系统实时同步场景,人大金仓凭借KFS灵活的架构方式、多类型异构数据库日志解析技术支持及深度的性能优化手段,以及目标端KES数据库优秀的各异构数据库兼容能力,成功为东莞卫健委多系统提供了数据高可靠性保障,同时为卫健中心的整体数据分析提供了互联互通的数据基础,也为本项目后续系统同步建设及其他类似项目建设需求提供了标准的落地方案和良好的示范。

版权声明:本文内容由互联网用户自发贡献,该文观点仅代表作者本人。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如发现本站有涉嫌抄袭侵权/违法违规的内容, 请发送邮件至 举报,一经查实,本站将立刻删除。

(0)
上一篇 2022年7月25日 上午11:45
下一篇 2022年7月25日 上午11:47

相关推荐

  • 秋季金融科研项目申报

    秋季金融科研项目申报: 随着秋季的到来,金融科研团队也开始着手准备申报一系列的科研项目。这些项目旨在探讨当前金融市场中的最新趋势和问题,为未来的金融发展提供有益的思考和启示。 在金…

    科研百科 2025年3月1日
    0
  • 合同能源管理(EPC)模式知识普及

    北极星配售电网讯:一、合同能源管里商业模式类型 合同能源管理可分为节能量保证型、节能效益分享型、能源费用托管型、融资租赁型、项目证券化。 1.节能量保证型 业主投资。服务商向业主提…

    科研百科 2022年11月22日
    1.1K
  • 商品销售管理系统项目

    商品销售管理系统项目 随着商业竞争的不断加剧,商品销售管理系统作为企业商业决策的重要工具,越来越受到企业的重视。一个完善的商品销售管理系统,不仅能够提高企业的销售效率,还能够帮助企…

    科研百科 2024年12月30日
    0
  • 新手怎样自学ios开发?这些方法让你快速入门(新手怎样自学ios开发-这些方法让你快速入门)

    Ios开发听起来非常高大上, 有不少iOS 开发者从别的语言自学转过来,也有不少人想跨行试水ios开发,那么,iOS 开发怎么入门呢? 下面w3cschool就分享ios开发入门教…

    科研百科 2023年3月16日
    338
  • 项目管理系统测试设计

    项目管理系统测试设计 随着项目管理水平的提升,越来越多的企业开始使用项目管理系统来协助他们管理项目。但是,即使使用了项目管理系统,企业的项目管理水平也不会完全达到理想的状态。因此,…

    科研百科 2024年12月18日
    0
  • 如何做好项目管理中的有效沟通?(如何做好项目管理中的有效沟通工作)

    一、沟通方式 沟通者的思维方式不能过于单一,否则沟通方式可能会过于单一,导致后期沟通效果会不太好。不仅仅要有具象化的思维方式,更要有抽象化的思维模式,将周边杂乱无章的信息梳理总结为…

    科研百科 2023年8月1日
    151
  • 卫生监督科研项目总结

    卫生监督科研项目总结 卫生监督是保障公众健康的重要工作之一。在过去几年中,卫生监督科研项目得到了广泛的关注和实施。本文将对卫生监督科研项目进行总结。 科研项目的主旨在于提高卫生监督…

    科研百科 2025年3月11日
    0
  • 开源 低代码 营销页面

    开源低代码平台在营销页面设计中的应用 随着互联网的快速发展,营销页面成为企业推广产品和服务的重要手段。然而,传统的网页设计需要专业的技术人员进行开发,不仅耗时耗力,而且成本较高。为…

    科研百科 2024年2月26日
    87
  • 原创 I 化妆品新原料六种申报情形现状简析(化妆品新原料申报与审评指南)

    谈到化妆品新原料,相信很多行业同仁并不陌生,21年伴随着《化妆品监督管理条例》、《化妆品注册备案管理办法》、《化妆品新原料注册备案资料管理规定》等法规的相继实施,化妆品新原料的注册…

    科研百科 2024年4月22日
    94
  • 森保科研项目

    森保科研项目 森保科研项目是保护森林和野生动物的一项重要任务,也是环境保护的重要方面。这些项目旨在研究森林和野生动物的生态系统,探索如何更好地保护这些生态系统,以及如何更好地利用这…

    科研百科 2025年2月28日
    0