用云和恩墨的异构数据库迁移工具mtk,做oracle--->mogdb的迁移。
举例需求:一共5张表,A,B,C,D,E,F。A和C有日期字段,是业务表。其他是配置表。
想要实现的目的如下:
12月15日演练时迁移B,D,E,F的全量数据和A,C表的截止12月15日的数据。
12月30日正式切换时,只迁移A,C表的12月15日以后的数据。
这两次迁移时“object”标签怎么配置?
在使用云和恩墨的异构数据库迁移工具 MTK(MySQL Transfer Kit)进行 Oracle 到 MongoDB 的迁移时,您可以通过配置 "object" 标签来实现您的需求。
对于第一次演练迁移,您需要迁移表 B、D、E 和 F 的全量数据以及表 A 和 C 的截止 12 月 15 日的数据。您可以按照以下方式配置 "object" 标签:
yaml复制代码
object: - name: A query: SELECT * FROM A WHERE date_column <= '2023-12-15' - name: B query: SELECT * FROM B - name: C query: SELECT * FROM C WHERE date_column <= '2023-12-15' - name: D query: SELECT * FROM D - name: E query: SELECT * FROM E - name: F query: SELECT * FROM F
这样配置后,MTK 将只迁移表 A 和 C 中截止 12 月 15 日的数据,同时迁移表 B、D、E 和 F 的全量数据。
对于正式切换时的迁移,您只需要迁移表 A 和 C 的 12 月 15 日之后的数据。您可以按照以下方式更新 "object" 标签的配置:
yaml复制代码
object: - name: A query: SELECT * FROM A WHERE date_column > '2023-12-15' - name: C query: SELECT * FROM C WHERE date_column > '2023-12-15'
这样配置后,MTK 将只迁移表 A 和 C 中 12 月 15 日之后的数据。
通过按需配置 "object" 标签中的查询语句,您可以实现不同时间范围内表数据的迁移。请根据您的具体业务需求和迁移时间点来调整日期条件和表名,以使得迁移工具能够按照预期对数据进行迁移。
评论
有用 1在第二次迁移时,通过执行 ./mtk -c ora2mg/config/mtk.json --dataOnly 命令,并指定了 --dataOnly 参数,表示只迁移数据而不进行表结构的迁移。
在这种情况下,MTK 工具会将表 A 和 C 的数据导出为 CSV 文件,而不会直接将数据入库到 MongoDB。您可以在生成的 CSV 文件中查看迁移的数据内容。
然后,您可以选择使用其他方法将这些 CSV 文件中的数据导入到目标的 MongoDB 数据库中。这可以涉及使用 MongoDB 提供的导入工具(如 mongoimport),或编写自定义脚本来读取 CSV 文件并将数据插入到 MongoDB 数据库中。
MTK 工具提供了迁移数据的能力,但数据的最终导入和入库过程可能需要根据您的具体需求和环境来进行额外的操作。因此,在第二次迁移时,您需要手动将数据从 CSV 文件复制或导入到目标的 MongoDB 数据库中。
评论
有用 0不,./mtk -c ora2mg/config/mtk.json --dataOnly 和 ./mtk -c ora2mg/config/mtk.json --file --dataOnly 这两个命令具有不同的效果。
./mtk -c ora2mg/config/mtk.json --dataOnly: 这个命令将只迁移数据而不进行表结构的迁移,并将数据导出为 CSV 文件。这意味着生成的输出将是一组 CSV 文件,其中包含源数据库中指定表的数据。您可以使用其他方法将这些 CSV 文件中的数据导入到目标数据库中,如通过数据库工具或自定义脚本。./mtk -c ora2mg/config/mtk.json --file --dataOnly: 这个命令与上述命令相似,也只迁移数据并导出为 CSV 文件。但是,使用--file参数会额外生成一个描述文件(manifest file),用于记录生成的 CSV 文件的路径和其他相关信息。该描述文件可以用于后续的数据导入操作,以便更轻松地识别和管理要导入的文件。
虽然这两个命令都是在 --dataOnly 模式下执行数据迁移,但使用 --file 参数会生成描述文件,提供更方便的方式来跟踪和处理生成的 CSV 文件。因此,它们具有略微不同的效果。
评论
有用 0
墨值悬赏

