Electric Power Technology
346 同步并行数据迁移技术在电网信息化系统中应用中国最好的牛奶
吴 屏,邵云蛟,崔继琦
(国网安徽省电力有限公司安庆供电公司,安徽 安庆 246003)
摘要:本文从传统电网数据迁移技术和同步并行数据迁移技术的分析入手,并对同步并行数据迁移技术在电网信息化系统中的实际应用方案进行分析,最终根据案例分析总结出了该技术在电网信息化系统中的具体应用方向。
关键词:同步并行;数据迁移技术;电网信息化系统
电网信息化系统的应用,有效促进了电力企业管理效率提升,现阶段受到了高度重视。在信息系统应用的过程中,企业需要做好数据迁移工作,保障旧系统中的数据在新系统中能够正常使用。 1 数据迁移技术分析 1.1 传统电网数据迁移技术 传统电网数据迁移方案主要使用数据库完成对其电力企业历史数据的迁移,利用中间数据库对历史数据进行检查核对,在整个数据转换工作进行的过程中信息会使用ORACLE DBLNK 技术进行转换,最终将能与新系统兼容的数据迁移到新系统当中。 1.2 同步并行数据迁移技术 同步并行数据迁移技术能在几小时内完成数据的同步和迁移工作,不仅减少了网络费用的投入,
时间消耗也有效减少。在数据迁移的过程中同步并行数据迁移技术能实现首次数据同步和增量数据同步,最终只需要在新系统中使用同步软件即可完成电力企业的数据信息迁移工作。 2 同步并行数据迁移方案分析 电力企业电网信息化中同步并行数据迁移技术的应用可以使用下列两种方案进行分析和对比: 2.1 方案一 方案一采用的数据迁移方案具体工作过程如下:原系统数据库-数据迁移中间库-新系统数据库,此过程中电网信息化系统中的数据从源数据库中转移到中间库,最终到新的电网信息化系统数据库中。在中间数据库,原数据能够进行检查、整理和转换等工作,为迁移到新数据库中做准备,迁移到新数据库中后,会在新系统里进行数据功能的验证工作。 2.2 方案二 2.2.1 实时数据同步 该方案与方案一的不同之处在于将中间库数据的迁移工作替换成了数据同步技术,即提前将旧系统中的数据上传到中间库,几小时后即可完成同步数据工作,此种方案的优势在于宽带费用较方案一更低,同时也缩短了方案一当中的数据传输等待时间。 该方案的数据同步需要在原系统和中间数据库中都安装数据同步软件,软件从原系统中获取数据,再与中间数据库建立连接后完成数据的传输。数据同步技术中包括首次数据同步和增量数据同步两种类型,其中首次数据同步软件会将有迁移需要的数据以某一时间点为截至,将原数据库中的数据全部转移复制到目标数据库。而增量数据同步则是会在首次数据同步结束后直到业务系统停止将全部增量数据同步至目标数据库。该数据传输技术的原理在于能够对原数据库中的信息进行实时分析,将变动数据制成压缩表后识别增量数据,数据经过压缩和加密处理后会传送至中间数据库,通过中间数据库的同步软件处理后,即可实现增量数据同步工作。 2.2.2 分库并行数据转换 在使用实时数据同步的基础上,不使用中间数据库,转而使用多个新建的中
2023年全国高速路免费时间表xxl对应的尺码间库进行电网信息化系统中数据的校验和处理,中间数据库不仅是数据源,也是数据迁移中间库,即可实现中间库并行的数据转换和处理目的。在该数据处理过程中,数据同步软件需要将原系统中的数据实时转移同步至多个新建数据库,而在数据正式开始迁移之后,即可开始数据的转换、校验等相关处理工作。 按照上述方案进行同步并行数据迁移,可以在不同中间库中分配供电局业务数据,与传统单链路串行数据迁移技术相比,增加了按照顺序进行各数据库迁移工作的步骤,总之方案二极大的缩短了数据迁移时间,有效保障了相关工作效率。 2.3 方案对比 某电力企业分别使用上述两种技术进行了电网信息化系统的数据迁移工作。使用方案一进行数据迁移工作采用的数据大小为1T,按照方案一方式开展工作,耗时四天完成数据迁移。同时该电力企业为保障新旧系统中数据迁移工作的成功率,在进行数据迁移时将系统停机,使用方案一进行相关工作,系统需要停机至少七天,在停机时无法计算电费,因此该电力企业不允许长时间的系统停机,也为保障企业利益和相关工作开展效率。同时此次数据迁移中该电
力企业需要迁移的数据超过2T,耗时较长,因此该电力企业选择了
效率更高的方案二进行新旧系统的数据迁移工作[1]怎么打广告
。 3 同步并行技术在电网信息化系统中的具体应用 3.1 全球数据同步 使用全球数据同步技术进行电网信息化数据同步工作需要先对
业务数据量和服务器性能展开研究,有针对性的进行数据分库建立工作,在正式开始数据迁移工作前,电力企业需要先将全量数据同步工作做完。该数据进行数据同步的过程中,还要使用数据同步软件将数据从原系统中分散同步至多个中间库中,所以企业应在原系统数据库服务器和多个数据中间库上都安装同步软件。为保障数据迁移工作的稳定性,在正式开始迁移前,电力企业可以选择试点进
行数据迁移方案对比分析,最终根据企业的实际需求选择有针对性的方案展开工作。 如:某次数据同步工作为异构服务器且服务器数据库不同,原番鸭
系统是AIX 服务器,中间数据库服务器为LINUX 服务器,此次数据迁移有四个中间数据库,因此电力企业构建了四个数据同步队列,又在原系统和同步数据库中建立了同步用户,最终在原数据库中导出数据结构,并在中间库进行整理。准备工作完成后该电力企业进行了数据同步迁移,待数据迁移完成后,该电力企业又与原数据库中的数据进行对比,并针对对比后检测出的遗漏数据进行个别补充。该电力企业使用的数据修复技术为ORACLE DBLINK 技术。 在同步后的数据上线前,该电力企业进行了首次数据同步迁移
工作,使用的是数据同步软件,将原系统的数据同步到四个数据中间库,待首次同步结束后又进行了增量数据同步,该电力企业使用同步并行技术进行数据迁移后数据的对比和修复工作一致率高达100%。 3.2 并行数据转换迁移
电力企业的数据同步结束后就要在中间数据库中进行数据的转换和迁移,具体工作可以以国家发布的数据模型为标准,将新旧数据库的同步工作开始进行。为保障相关工作效率,可以在数据迁移的过程中加入索引,合理使用资源提高工作效率。除此之外,要注意信息化系统数据的迁移原则是在迁移整理的过程中注意数据完整性,并且应严格遵循数据统一性原则。 如:某电力企业在进行电网信息化系统数据同步工作前,为中间数据库分配了不同的业务数据,且保障每个中间库的数据保持一致,由此实现了多个中间数据库并行的同步数据迁移和转换。且在正式进行迁移工作前,该电力企业设计了相应的灾备切换场景,防备在数据迁移过程中产生突发情况造成数据损坏,提高了数据迁移
网上购物的步骤工作的稳定性和运行连续性。除此之外,该电力企业还使用物理数据模型对迁移后的数据进行了完整性对比,为电网信息化系统数据
的真实性提供了保障[2]
。 4 结语 对电力企业而言,电网信息化系统的推广以及使用能够保障电力企业管理效率的提升,从而促进企业经济效益增长。随着技术进
步,企业的信息化系统也在不断更新,新旧系统衔接时需要保障数据的全面和稳定性,避免由于系统更替对电力企业的经营产生影响。 参考文献: [1]陈孝文,陈文超,刘振.ETL 技术在电网信息系统业务数据迁移中的应用[J].自动化与仪器仪表,2019(08):215-218.
[2]陈非,蔡嘉荣.同步并行数据迁移技术在电网信息化系统中的应用研究[J].通讯世界,2019(06):151-152.
版权声明:本站内容均来自互联网,仅供演示用,请勿用于商业和其他非法用途。如果侵犯了您的权益请与我们联系QQ:729038198,我们将在24小时内删除。
发表评论