在系统不停机或者停机时间几分钟内，将大量数据迁移到系统中，有什么方案？

Question

有什么样的业务，必须要用RC隔离级别，所以迫不得已去改数据库的隔离级别吗？

Answer 1

用这些工具：AWS DMS、Google Cloud Data Transfer Service 或者开源工具比如 Apache NiFi
至于要用RC隔离级别的业务有这几点：业务对数据一致性要求不高，业务需要高并发性能，业务需要避免长时间锁定资源

Answer 2

在系统不停机或停机时间仅几分钟的情况下，迁移大量数据到系统中可以考虑以下方案：

批量导入：使用数据库的导入功能，将数据以批量的方式导入到系统中。这通常需要提前准备好数据文件，并使用数据库提供的导入工具或命令进行导入操作。这种方式适用于数据量较大但格式固定的情况。

数据同步工具：使用数据同步工具，如数据库复制、数据迁移工具等，将数据从现有系统或外部数据源同步到目标系统中。这种方式可以实现实时或定期的数据同步，不需要停机或只需要短暂的停机时间。

数据库事务和增量更新：如果数据量较大且需要确保数据一致性，可以使用数据库事务和增量更新的方式逐步迁移数据。在系统运行期间，按照事务的范围和顺序逐步迁移数据，确保迁移过程中数据的完整性和一致性。

关于隔离级别的问题，如果业务必须使用 RC（读已提交）隔离级别，而当前数据库的隔离级别不支持 RC，可以考虑以下方案：

更换数据库引擎或版本：如果数据库引擎或版本支持 RC 隔离级别，可以考虑升级数据库或切换到支持 RC 隔离级别的数据库。

数据库设置调整：有些数据库引擎可能允许在特定情况下调整隔离级别的设置，可以查阅数据库文档，了解是否存在相关的配置选项。

需要注意的是，更改数据库的隔离级别可能会对系统性能和并发性产生影响，应该在进行变更前进行充分的测试和评估，确保系统能够承受相应的负载和并发压力。此外，建议在生产环境进行任何数据库设置的变更前备份数据，并在变更完成后进行充分的验证和监控。