我国基础软件行业正进入一个稳健发展的新时代，其中的新数据库从选择开始到部署正在逐步实施，金融以及关键行业的业务系统第二平面建设正在加速推进，旨在确保即使在面临特殊状况下也能保证企业的关键业务持续运营。

企业的关键业务系统是其发展的基石，在复杂的国际背景下，要保证在突发状况下，企业主要业务仍能正常运行，则建设一个可靠、安全高效的第二平面成为系统安全建设的一项重要任务。所谓的“第二平面”，指的是与主生产系统分离的备用系统（灾难备援系统），它与主要业务系统可以看作是一对孪生系统。

关于第二平层的建设，核心是部署上线运行国产数据库这涉及到从原数据库到本地库的异构数据迁移的技术。传统的方法采用手工操作导出导入的方式，在业务停止情况下实现数据迁移，然而这样耗时长且存在较大的数据丢失风险对业务影响较大。英方软件基于市场需求持续在异构数据库复制上深耕，覆盖主流数据库并延伸至国产数据库，实施数据实时捕获、在线迁移、校验比对以及定期演练等功能。

目前，i2Stream已能支持跨越各个版本、各个平台的数据迁移，并保证了迁移过程中的一致性，从而大大减少了项目的风险，提高了工作效率。这些操作可以简单地被归纳为“抽取数据（Extract）、捕捉数据（Capture）、收编数据（Collect）以及安装数据（Install）”的四个步骤：

“抽”是全量数据提取

"“捕获”是指增量数据捕获，"

“接受”是指目标端的接收及数据格式转换。

“装”是对数据进行装载和导入的操作。

"全量数据抽取"有助于减轻生产负担同时确保信息安全

在基础软硬件以及网络搭建完成之后，在复制技术的初始阶段，我们将主要关注于生产数据库的运行效率及安全保护性，因此，复制软件将能够在与RAC ADG备用数据库类似环境中对全量数据进行抽取操作，随后同步到目标端进行导入。

△描述全量抽取的架构原理

在复制流程中，全量抽取模块基于设定的复制策略执行过程，首先为“获取策略”中的对象信息设置并发多队列数据读取任务，随后以并发方式从数据库和扫描生成的二进制TF文件接收表数据，这一过程不涉及对源表进行锁表操作。由于在主库中复制时不会触及业务敏感表，因此确保了生产环境下无锁操作对业务影响，并且有助于提升迁移项目的安全性与稳定性。

全量数据抽取过程具有多线程并发抽取、多并发传输、私家侦探，侦探公司，调查公司，查人找物，商务调查，出轨外遇调查，婚外情调查，私人调查，19209219596无需锁表、支持多对象过虑、支持非归档模式、支持传输压缩加密等优势。

增量数据捕获可显著提升在线 SQL 日志分析的传输效能。

在抽取全部数据的过程中，生产系统不断将新的增量数据注入。因此，在设置同步策略时，在全量数据开始提取时，可以同时启动增量模块，并立即捕获在线日志并将数据保存到磁盘缓存中。当全量复制完成后无缝进入增量模式，在此过程中，将从日志中提取的增量数据实时写入第二平面的数据库。整个过程都是实时且异构环境。

△增殖抓取架构原理

增量捕获模块被拆分为读取线程、分析线程、发送线程与分配队列线程四部分。读取线程负责监控redo log的变化，数据变化的信息会被传递给分析线程。在规则的指导之下，分析线程会将需要复制的DML与DDL变化转换成TF文件。由发送线程将这些文件通过网络传输到目标主机上磁盘中。在这个过程中，分配队列线程会在不考虑表依赖关系的情况下自动从TF文件读取数据，并将其分配给不同的并发队列进行同步处理。

增量数据捕获过程具有与全量抽取无缝衔接、支持SCN增量模式、支持断点续传、支持归档日志分析和非归档模式、支持传输压缩加密等优势。

接收和处理数据可以简化编程工作并提升适应性。

将全量数据抽取与增量数据捕获后的数据传输给接收模块和装载模块。在此过程中，被传输的数据会被转换为一种轻量级的JSON格式，并以高效的方式发送至装载程序，并由后者通过JDBC接口精准地存储到第二层异构数据库中。

当在数据转换过程中需要较大的计算力时为了提高JSON的转换速度英方i2Stream采用了并行处理方法。将原始的数据均匀地分配到多个转换队列中每一个转换队列都对应一个单独的线程线程将原始数据转换成JSON（保持原有顺序）所有的JSON数据通过单一发送线程传输给后端的装载进程在发送线上同时对所有转换队列进行排序由于每个转换队列都是有序的发送线程相当于处理多个有序队列它对数据重新排序后再发出去。

数据接收和转换借助于通过使用JSON格式标准作为装载第二平面数据库数据源信息的方式，使得将数据从一种形式导入到另一种更为简单且容易操作。这样一来就极大地减少了对软件工程师的依赖，并且有效地提升了应用对接不同数据库时的开发工作效率，极大降低了工作量。

数据加载导入，提升了数据入库存储的灵活度以及准确率。

数据加载既要考虑到并行加速，也要顾私家侦探，侦探公司，调查公司，查人找物，商务调查，出轨外遇调查，婚外情调查，私人调查，19209219596及到关联数据的排列顺序，确保加载的数据具有准确性。

I2Stream数据加载架构的原理

第二平面数据库数据装载过程中，新的接收的数据会被放到待分发队列中。 数据分发线程将这些数据拆分为表单元，如果这些表之间的依赖性需要被分割成一个任务进行处理的话，这些表格会划分到一起，分配给一个新任务的分发任务。如果一个任务中的数据到达一定的行数或者等待的时间超过了指定的长度之后，那么这个任务的数据就可以被重新分配到另一个装载队列中进行处理，然后继续组织一个新的装载任务。另外，当装载任务的相关主键信息记录下来后，这些记录的信息就会清除掉；而如果分发线程准备将一个新任务分配给一个分发线程时，它首先会判断这个任务是否会有冲突，如果有，则不会把新的任务分配给另一个分发线程进行处理，除非这个任务和正在装载的其他任务没有冲突。

当装载进程与数据发送端进行通信时，它们之间通过协议控制装载进程的速度，当装载进程收到数据发送端的请求后，会自动向数据发送端反馈自身的数据装载情况，并及时调整自身的数据发送速度，以避免装载过程中的大量堆积，以及不必要的内存消耗。

数据装载和导入过程具备多种优势，包括支持不同类型的数据加载、采用智能化的进程感知技术以优化负载分配、并能够广泛兼容并适应不同的数据库系统等。

2平面的建立具有重要意义

关键业务系统的第二层面建设项目的核心是紧随国内自主化进程的需要，通过英方提供的实时数据复制迁移工具将生产系统迁移到第二层面异构数据库之中，实现数据从原始源到目标系统的“抽取-捕获-加载”过程。作为战备应用系统而言，建设第二层体系是一个至关重要的过渡阶段，在此基础之上也将为软件国产化生态的发展起到重要作用。

随着国产化转型和数字化发展的加速，未来将有越来越多的企业采用数据业务化的趋势。实时数据复制迁移工具会成为关键行业的关键业务的必要需求。英方软件将不断创新迭代其跨平台的数据复制迁移到产品方案中，通过抽样、捕捉、收编和安装数据的过程，“抽-捕-收-装”的方式构建起联动数据库、数据中台、大数据平台等实时数据架构，在提供最新的实时数据的同时，提升企业的业务竞争力。