华为云用户手册

  • 数据复制服务 DRS-目标数据库已存在的表中有启用的触发器:GaussDB为目标库同步场景
    GaussDB 为目标库同步场景 表1 目标数据库已存在的表中有启用的触发器 预检查项 目标数据库已存在的表中有启用的触发器 描述 目标数据库已存在的表包含生效的触发器，此类触发器可能引发数据同步任务失败 不通过提示及处理建议 不通过原因：目标数据库已存在的表包含生效的触发器，此类触发器可能引发数据同步任务失败 处理建议：以下处理方法任选其一即可 1.禁用触发器： alter table table_name disable trigger all; 2.设置会话参数： set session_replication_role to replica;
    数据复制服务 DRS
  • 数据复制服务 DRS-目标库表存在外键并且没有禁用:GaussDB为目标库同步场景
    GaussDB为目标库同步场景 表1 是否禁用了外键或者同步的表在目标库上是否有外键 预检查项 是否禁用了外键或者同步的表在目标库上是否有外键 描述 目标库的表存在外键没有禁用，可能会导致数据同步失败 不通过提示及处理建议 不通过原因：目标库的表存在外键没有禁用，可能会导致数据同步失败。 处理建议：以下处理方法任选其一即可 1.修改目标库用户的session_replication_role参数为replica： set session_replication_role to replica; 2.返回设置同步页面从同步对象选择中取消选择这些表 3.禁用外键或者删除外键： 禁用：alter table table_name disable constraint constraint_name; 删除：alter table table_name drop constraint constraint_name;
    数据复制服务 DRS
  • 数据复制服务 DRS-数据库兼容类型检查:处理建议
    处理建议 建议用DWS的MYSQL、TD的兼容模式或给无主键表加上主键。 参考创建语句: CREATE DATABASE mysql_compatible_db DBCOMPATIBILITY 'MYSQL'; 或: CREATE DATABASE td_compatible_db DBCOMPATIBILITY 'TD'; 建议目标GaussDB实例使用兼容MySQL的数据库。 如果目标实例为分布式实例，参考语句：CREATE DATABASE mysql_compatible_db DBCOMPATIBILITY 'MYSQL'; 如果目标实例为主备版实例，参考语句：CREATE DATABASE mysql_compatible_db DBCOMPATIBILITY 'B';
    数据复制服务 DRS
  • 数据复制服务 DRS-源库对象关联关系检查:PostgreSQL为源同步
    PostgreSQL为源同步 表1 源库对象关联关系检查 预检查项 源库对象关联关系检查。 描述 源库对象关联关系检查，若不符合迁移要求，则导致迁移失败。 不通过提示及处理建议 不通过原因：已选择的对象中存在含外键的表，且未选择迁移该外键依赖的表。 处理建议：请在对象选择页面选择依赖的对象。 不通过原因：已选择的对象中存在视图，且未选择迁移该视图依赖的表或视图。 处理建议：请在对象选择页面选择依赖的对象。 不通过原因：已选择的对象中存在继承表，且未选择迁移该继承表依赖的表。 处理建议：请在对象选择页面选择依赖的对象。
    数据复制服务 DRS
  • 数据复制服务 DRS-源库是否正确开启补充日志:Oracle为源同步场景
    Oracle为源同步场景 表1 源库是否正确开启补充日志 预检查项 源库是否正确开启补充日志。 描述 Oracle源库未开启库级补充日志或级别不满足要求，会导致同步失败。 不通过提示及处理建议 不通过原因：源库补充日志级别告警，源库补充日志设定为库的主键和唯一键级别，可能在UPDATE目标库不存在的数据时丢失部分字段数据。 处理建议：建议设置库或表补充日志为ALL级别。 修改库补充日志为ALL级别语句参考： alter database add supplemental log data (all) columns; 查看库补充日志为ALL级别是否打开： select supplemental_log_data_all as allLog from v$database;
    数据复制服务 DRS
  • 数据复制服务 DRS-源数据库账号依赖检查:MongoDB迁移场景
    MongoDB迁移场景 表1 源数据库账号依赖检查 预检查项 源数据库账号依赖检查。 描述 在进行用户迁移时，若所选迁移的用户与某些角色存在依赖关系，需要同时选择迁移该用户及所依赖的角色，否则会导致迁移失败。 不通过提示及处理建议 不通过原因：源数据库账号依赖的数据库在目标数据库中不存在，并且也不在所选的对象选择列表中。 处理建议：在角色选择中选择账号依赖的角色一起迁移，或者不迁移这些依赖检查不通过的账号。 不通过原因：源数据库账号依赖的数据库在目标库中不存在，并且也不在用户的对象选择列表中。 处理建议：在对象选择中选择账号依赖的数据库一起迁移，或者不迁移这些依赖检查不通过的账号。
    数据复制服务 DRS
  • 数据复制服务 DRS-源数据库角色依赖检查:MongoDB迁移场景
    MongoDB迁移场景 表1 源数据库角色依赖检查 预检查项 源数据库角色依赖检查。 描述 在进行用户迁移时，若所选迁移的用户与某些角色存在依赖关系，需要同时选择迁移该用户及所依赖的角色，否则会导致迁移失败。 不通过提示及处理建议 不通过原因：源数据库角色依赖的数据库在目标数据库中不存在，并且也不在所选的对象选择列表中。 处理建议：在对象选择中选择角色依赖的数据库一起迁移，或者不迁移这些依赖检查不通过的角色。 不通过原因：源数据库角色依赖的角色在目标数据库中不存在，并且也不在用户的角色选择列表中。 处理建议：在角色选择中选择角色依赖的角色一起迁移，或者不迁移这些依赖检查不通过的角色。
    数据复制服务 DRS
  • 数据复制服务 DRS-源端是否存在触发器或事件:MySQL迁移场景
    MySQL迁移场景 表1 源端是否存在触发器或事件 预检查项 源端是否存在触发器或事件。 描述 为了避免触发器或事件的自动触发机制导致非预期数据操作，从而引起两边数据的不一致，DRS任务将在用户结束任务时启动触发器或事件的迁移，如果您在任务运行中，关闭或断开了源数据库连接，则会导致触发器或事件未迁移。 待确认提示及处理建议 待确认原因：源数据库存在触发器或事件。 处理建议：此警告仅为迁移操作提示，请您先结束任务后再断开源端网络，则可确保迁移完整性。
    数据复制服务 DRS
  • 数据复制服务 DRS-源库无主键表检查:MySQL同步场景
    MySQL同步场景 表2 源库无主键表检查 预检查项 源库无主键表检查。 描述 在进行MySQL同步时，源数据库若存在无主键表，可能会导致同步失败。 不通过提示及处理建议 不通过原因：源数据库同步的表中存在无主键表。 处理建议：建议修改无主键表。 不通过原因：多对一任务时，不允许源库中存在与目标库同名的无主键表。 处理建议：建议修改无主键表、删除目标库无主键表或者不迁移无主键表。 待确认提示及处理建议 待确认原因：源数据库同步的表中存在无主键表。 处理建议：无主键表由于缺乏行的唯一性标志，无法进行内容对比，且在网络不稳定情况下，可能存在目标与源库数据不一致的情况。建议将无主键表修改为主键表。
    数据复制服务 DRS
  • 数据复制服务 DRS-源库无主键表检查:Oracle为源同步场景
    Oracle为源同步场景 表4 源库无主键表检查 预检查项 源库无主键表检查。 描述 源数据库若存在无主键表，可能会导致同步数据存在少量不一致的可能性。 不通过提示及处理建议 不通过原因：由于无主键表缺乏行的唯一性标志，网络不稳定时涉及少量重试，表数据存在少量不一致的可能性。 处理建议：建议为无主键表添加主键，或者不同步无主键表。 增加主键语句参考： ALTER TABLE table_name ADD CONSTRAINT constraint-name PRIMARY KEY (column_name); 若要同步主键表，建议在全量同步期间不执行ALTER TABLE MOVE操作，多分区操作SPLIT/MERGE分区，FLASHBACK操作，ALTER TABLE SHRINK SPACE操作，否则数据重复可能性会增加。
    数据复制服务 DRS
  • 数据复制服务 DRS-Definer迁移权限检查:MySQL迁移场景
    MySQL迁移场景 表1 Definer迁移权限检查 预检查项 Definer迁移权限检查。 描述 入云场景Definer迁移需要源库账号具有all privileges权限，出云场景的Definer迁移需要目标库账号具有all privileges权限。 不通过提示及处理建议 不通过原因：目标库的指定账号当前权限不足。 处理建议：选择Definer指定为目标数据库连接用户账号，或者赋予目标数据库用户all privileges权限。 可参考如下语句： grant all privileges on *.* to ‘user’@’host’ 不通过原因：源库的指定账号当前权限不足。 处理建议： 将所有Definer迁移到指定目标库用户下：在配置目标库时选择“所有Definer迁移到该用户下”，使得所有对象Definer均在该指定用户下。 保留原Definer设置，但需要赋予源数据库用户all privileges权限。 可参考如下语句： grant all privileges on *.* to ‘user’@’host’
    数据复制服务 DRS
  • 数据复制服务 DRS-全量阶段失败报错，关键字“Invalid GIS data provided to function st_geometryfromtext'”:场景描述
    场景描述 全量迁移或同步期间DRS任务报错，日志提示信息：An error occurred in the process DATAMOVE, caused by: apply event=[type=table_data, shard_id=0, batch_index_in_shard=1, table_name=%s, record_num=1] occur error, msg=apply data of table=%s failed: Data truncation: Invalid GIS data provided to function st_geometryfromtext.
    数据复制服务 DRS
  • 数据复制服务 DRS-备份迁移失败，提示空间不足:操作场景
    操作场景 客户创建备份迁移任务，提示空间不足，可能出现以下报错： The disk space of the target database is insufficient。 The disk space of the destination database must be 1.5 times larger than the size of the backup file。 The disk space of the destination database is insufficient. Check whether the backup is compressed。
    数据复制服务 DRS 备份迁移
  • 数据复制服务 DRS-全量阶段失败报错，关键词“Too many keys specified; max 64 keys allowed”:场景描述
    场景描述 全量迁移或同步期间，日志界面提示信息：service DATAMOVE failed, cause by: retry structures failed events=the fail structures are [type=constraint_data, index=0, schema_name=DB, object_name=TABLE]reason:[Too many keys specified; max 64 keys allowed]。
    数据复制服务 DRS
  • 数据复制服务 DRS-增量同步失败报错，关键词“timeout when get next file log, maybe has been deleted, please check it.”:场景描述
    场景描述 Oracle为源DRS同步任务增量阶段报错，同步日志界面提示：service CAPTURE failed，cause by: get next Oracle log file error. The next file is: 1.log, errorcode = 'code': '01300', 'name': ' LOG S_NOT_EXIST', 'retry': false, 'reset': false, 'level': 3, message = timeout when get next file log, maybe has been deleted, please check it.
    数据复制服务 DRS
  • 数据复制服务 DRS-解析失败，提示OBS连接失败:解决方案
    解决方案 针对以上问题，提供如下解决方案： 单击任务名称，进入基本信息页面。 在连接信息模块，检查AK、SK、桶名以及终端节点信息是否填写正确。 如果使用的是临时AK/SK，还需要检查临时AK/SK和Security Token的权限和有效期。 连接信息正确，执行3。 连接信息错误，单击任务操作列“暂停”，等待任务暂停后，单击操作列“编辑”按钮。进入“源库及目标库”页面，重新填写源库信息，完成任务配置后启动。 检查是否有对应OBS桶文件的读取权限。可参考OBS权限管理内容，授予用户OBS桶文件读取权限。
    数据复制服务 DRS 录制回放
  • 数据复制服务 DRS-全量或增量阶段失败报错，关键词“temporary file size exceeds temp_file_limit”:场景描述
    场景描述 全量或增量同步期间DRS任务报错，同步日志界面提示：retry structures failed events=the fail structures are [type=index, index=0, schema_name=fossbot, object_name=scan_mr5_file_union]reason:[ERROR: temporary file size exceeds temp_file_limit (20000000kB)]。
    数据复制服务 DRS
  • 数据复制服务 DRS-增量阶段失败报错，关键词“Slave has more GTIDs than the master has, using the master's SERVER_UUID.”:场景描述
    场景描述 增量迁移或同步期间DRS任务报错，日志提示信息：service LOGMANAGER failed, cause by: Received error packet: errno = 1236, sqlstate = HY000 errmsg = Slave has more GTIDs than the master has, using the master's SERVER_UUID. This may indicate that the end of the binary log was truncated or that the last binary log file was lost, e.g., after a power or disk failure when sync_binlog != 1. The master may or may not have rolled back transactions that were already replicated to the slave. Suggest to replicate any transactions that master has rolled back from slave to master, and/or commit empty transactions on master to account for transactions that have been.
    数据复制服务 DRS
  • 数据复制服务 DRS-全量或增量阶段失败报错，关键词“Illegal mix of collations (utf8mb4_0900_ai_ci,IMPLICIT) and (utf8mb4_general_ci,IMPLICIT) for operation”:解决方案
    解决方案 方法一： 在目标库执行对应SQL语句，将对应列的字符排序规则修改为utf8mb4_0900_ai_ci。例如，将表test_collation_1 的c1列的字符排序规则修改为utf8mb4_0900_ai_ci： ALTER TABLE test_collation_1 MODIFY COLUMN c1 VARCHAR(16) COLLATE utf8mb4_0900_ai_ci; 修改完成后，在任务列表中，单击任务对应操作列的“续传”，重新提交任务。 方法二： 修改源库表结构，将表中带有collate utf8mb4_general_ci 的列都去掉。 修改完成后，在任务列表中，单击任务对应操作列的“重置”，重新开始任务；或重新创建DRS任务进行迁移。 方法三： 在目标库执行对应SQL语句，将目标库字符排序规则修改为utf8mb4_0900_ai_ci SET GLOBAL default_collation_for_utf8mb4='utf8mb4_general_ci'; 修改完成后，在任务列表中，单击任务对应操作列的“重置”，重新开始任务；或重新创建DRS任务进行迁移。
    数据复制服务 DRS MySQL->TaurusDB实时迁移和同步
  • 数据复制服务 DRS-全量或增量阶段失败报错，关键词“memory required is *** MB, maintenance_work_mem is *** MB”:场景描述
    场景描述 全量或增量同步期间DRS任务报错，同步日志界面提示：retry structures failed events=the fail structures are [type=index, index=***, schema_name=***, object_name=***]reason:[ERROR: memory required is *** MB, maintenance_work_mem is *** MB]。
    数据复制服务 DRS
  • 数据复制服务 DRS-灾备阶段失败报错，关键词“A dml without pk write target db fail”:解决方案
    解决方案 如果是无主键表原因，需要将无主键表修改为主键表，并重新创建DRS任务完成灾备。 如果源端为RDS for MySQL老版本（5-5.7.23），有无主键表隐藏主键的特性，请参考以下步骤处理： 使用有process权限的账号，在源端执行以下SQL语句查询表信息，其中database/table为无主键表的库名与表名（如果是分区表需要用like查询）。 select * from information_schema.INNODB_SYS_TABLES where name = 'database/table'; 根据1中获得的TABLE_ID，执行以下SQL查询该无主键表的列信息。 select * from information_schema.INNODB_SYS_COLUMNS where TABLE_ID = 44; 根据查询结果，可以看出pos为2的第三列是隐藏自增主键列。如果binlog中隐藏主键列不在最后一列，会导致DRS任务同步失败。 登录RDS控制台，参考升级内核小版本或联系RDS客服，升级RDS任务版本。 重新创建DRS任务完成灾备。
    数据复制服务 DRS MySQL为源实时灾备
  • 数据复制服务 DRS-全量同步失败报错，关键词“permission denied for schema ***”:场景描述
    场景描述 全量同步期间DRS任务报错，同步日志界面提示：service DATAMOVE failed, cause by: retry structures failed events=the fail structures are [type=table_structure, index=0, schema_name=%s, object_name=%s]reason:[ERROR: permission denied for schema %s]
    数据复制服务 DRS
  • 数据复制服务 DRS-全量同步失败报错，关键词“type 'geometry' does not exist”:场景描述
    场景描述 全量同步期间DRS任务报错，同步日志界面提示：service DATAMOVE failed, cause by: retry structures failed events=the fail structures are [type=operator, index=2, schema_name=public, object_name=?|]reason:[ERROR: type 'geometry' does not exist]
    数据复制服务 DRS
  • 数据复制服务 DRS-全量或增量阶段失败报错，关键词“load database structure failed in source database”:场景描述
    场景描述 全量或增量阶段，DRS迁移或同步任务报错，日志提示信息：service LOGMANAGER failed, cause by: load database structure failed in source database, The failed %s is: type=%s, schema_name=%s, object_name=%s, errorcode=%s, message=%s"
    数据复制服务 DRS
  • 数据复制服务 DRS-全量阶段失败报错，关键词“extract table structure failed!”:解决方案
    解决方案 联系客户运维工程师检查源库表结构是否正常，常用命令： SELECT * FROM `%s`.`%s` LIMIT 1 SHOW CREATE TABLE `%s`.`%s` 请联系源数据库管理员检查源库database和table是否删除，如果已删除，可参考MySQL迁移使用须知，重建任务。 检查迁移使用的账号对源库的表是否有执行SHOW CREATE TABLE操作的权限，如果不具备则参考MySQL迁移使用须知，为源库迁移账户赋予操作权限，然后在任务列表中，单击任务对应操作列的“续传”，重新提交任务。
    数据复制服务 DRS
  • 数据复制服务 DRS-全量或增量阶段失败报错，关键词“Got minus one from a read call”:解决方案
    解决方案 修改位于$ORACLE_HOME/network/admin目录的sqlnet.ora文件，允许DRS任务IP访问。 如果使用白名单，则TCP.INVITED_NODES配置项中需要包含DRS的任务IP。 如果使用黑名单，则TCP.EXCLUDED_NODES中不能包含DRS的任务IP。 查看源数据库信息（例如IP，端口，或者service name/sid）是否发生修改，如果源库信息发生改变，可选择以下操作： 恢复修改的源数据库信息，DRS任务会自动重试继续同步任务。 重新创建任务进行同步。 执行以下命令查看源数据库连接数，连接数已经达到上限。 查看当前连接数： select count(*) from v$process; 查看最大连接数： select value from v$parameter where name ='processes'; 如果源数据库连接已达到上限，执行以下命令修改数据库允许的最大连接数： alter system set processes = 300 scope = spfile; 然后重启数据库生效。
    数据复制服务 DRS Oracle为源实时同步
  • 数据复制服务 DRS-全量或增量阶段失败报错，关键词“Got minus one from a read call”:场景描述
    场景描述 Oracle为源全量或增量同步期间DRS任务报错，同步日志界面提示：service LOGMANAGER failed, cause by: Unable to connect to DBMS: url=jdbc:oracle:thin:@(DESCRIPTION=(ADDRESS=(PROTOCOL=TCP)(HOST=*.*.*.*)(PORT=1521))(CONNECT_DATA=*)) user=*, Caused by: IO Error: Got minus one from a read call.
    数据复制服务 DRS Oracle为源实时同步
  • 数据复制服务 DRS-全量或增量阶段失败报错，关键词“Initialize logical replication stream failed, the source database may have a long transaction”:解决方案
    解决方案 检查源库复制槽数量是否达到最大复制槽数的限制。如果是，建议删除源库不再使用的复制槽，或者增大max_replication_slots后重启源库。 查询逻辑复制槽数量： select count(1) from pg_replication_slots; 查询最大复制槽数量： select setting as number from pg_settings where name = 'max_replication_slots'; 确定源库是否存在长事务未提交，如果有，则会建槽超时，导致任务失败。 查询事务情况： select pid, datname, state, backend_xid, xact_start, (now() - xact_start) as cost from pg_stat_activity where backend_xid is not null order by xact_start; 如果需要停止长事务执行： select pg_terminate_backend(pid);
    数据复制服务 DRS
  • 数据复制服务 DRS-全量同步失败报错，关键词“password must not equal user name”:场景描述
    场景描述 全量同步期间DRS任务报错，同步日志界面提示：service DATAMOVE failed, cause by: retry structures failed events=the fail structures are [type=account, index=0, schema_name=dummy, object_name=%s]reason:[ERROR: password must not equal user name]
    数据复制服务 DRS
  • 数据复制服务 DRS-全量阶段失败报错，关键词“transfer account failed, can not find password from src DB”:解决方案
    解决方案 在源库执行以下SQL语句，查询密码为空的用户。 MySQL 5.7及以上版本： SELECT USER,HOST,authentication_string FROM MYSQL.user WHERE authentication_string IS NULL OR authentication_string=''; MySQL 5.6以及下版本 SELECT USER,HOST,`password` FROM MYSQL.user WHERE `password` IS NULL OR `password`=''; 执行以下SQL语句，删除掉源库密码为空的用户，或者给用户添加密码。 删除密码为空的用户 DROP USER ***@***； 给用户添加密码 ALTER USER ***@*** IDENTIFIED BY ***；
    数据复制服务 DRS
共100000条
undefined

搜索反馈

您找到想要的内容了吗?

是的 没有

意见反馈

0/200

提交 取消

提交成功！非常感谢您的反馈，我们会继续努力做到更好 反馈提交失败！请稍后重试！
推荐文章
提示

您即将访问非华为云网站，请注意账号财产安全

取消 继续访问