数据传输服务DTS

• 产品简介
  • 什么是数据传输服务DTS
  • 产品优势
  • 功能特性
    • 数据迁移
    • 数据同步
    • 数据订阅
  • 使用场景
  • 产品架构
  • 规格说明
    • 数据同步规格说明
    • 数据迁移链路规格说明
  • 发展历史
  • 名词解释
• 产品定价
  • 产品定价
  • 到期或欠费的影响
• 快速入门
  • 购买流程
  • 创建数据迁移任务
  • 文件导入任务配置
  • 创建数据同步作业
  • 创建数据订阅通道
• 用户指南
  • 实例管理
    • 升级实例配置
    • 单向同步升级至双向同步
    • 释放实例
    • 允许DTS访问通过专线/VPN网关/智能网关接入的网络
  • 计费管理
    • 按量付费转包年包月
    • 开通自动续费
    • 手动续费包年包月实例
  • RAM授权管理
    • 授权DTS服务账号角色访问云资源
    • 授权子账号使用DTS
    • 授权子账号使用数据订阅SDK
    • 跨阿里云账号数据迁移/同步时如何配置RAM授权
  • 数据迁移
    • 数据迁移支持的数据源
    • 预检查及修复方法
      • 源库连接性检查
      • 源库binlog检查
      • 约束完整性检查
      • 存储引擎检查
      • 源库权限检查
      • 目的库权限检查
      • 同名对象存在性检查
      • schema存在性检查
      • 源库server-id检查
      • 目标数据库连接性检查
      • 源库版本号检查
    • 从第三方云迁移至阿里云
      • 从Amazon RDS for MySQL至阿里云
      • 从腾讯云MySQL迁移至阿里云
    • 从本地 Oracle 迁移到 RDS for MySQL
    • 从 Oracle 不停机迁移到 DRDS
    • Oracle到PPAS不停机数据迁移
    • 从本地 MySQL 迁移到 RDS for MySQL
    • MySQL到DRDS的数据迁移
    • 从本地 SQL Server 迁移到 RDS for SQL Server
    • SQL Server 不停机迁移
    • 将本地 PostgreSQL 迁移至 RDS for PostgreSQL
    • 从本地MongoDB数据库迁移至云数据库MongoDB
    • MongoDB副本集实例迁移至分片集群实例
    • 自建 Redis 实例到阿里云 Redis 实例的迁移方案
    • DB2到MySQL的数据迁移任务配置指南
    • RDS实例间的数据迁移
    • ECS上的自建数据库到RDS/MongoDB/Redis/DRDS/PetaData/OceanBase的数据迁移
    • 使用VPN网关的本地自建数据库的数据迁移
    • 通过用户的VPN加密连接进行跨地区的数据迁移
    • 通过专线接入阿里云的本地自建数据库的上云迁移
    • 库表列映射
    • 失败修复
    • 将ECS上的自建MySQL迁移至POLARDB实例
    • 将RDS MySQL迁移至POLARDB
  • 实时同步
    • 预检查失败修复
    • 新增同步对象
    • 减少同步对象
    • 查看同步性能
    • 配置监控报警
    • MySQL数据同步至MySQL
      • 创建RDS for MySQL实例间的双向数据同步
      • RDS for MySQL实例数据同步至RDS for MySQL实例
      • ECS上的自建数据库数据同步至RDS for MySQL实例
      • VPN网关接入的自建数据库数据同步至RDS for MySQL实例
      • 通过专线/VPN网关/智能网关接入的自建数据库数据同步至RDS for MySQL实例
      • 不同阿里云账号下的RDS for MySQL实例配置数据同步
    • MySQL数据同步至其他数据库
      • MySQL数据库数据同步至MaxCompute
      • MySQL数据库数据同步至DataHub实例
      • MySQL数据同步至分析型数据库AnalyticDB
      • RDS for MySQL数据同步至自建Kafka集群
      • ECS上的自建MySQL数据同步至自建Kafka集群
      • 通过专线/VPN网关/智能网关接入的自建MySQL数据同步至自建Kafka集群
      • RDS for MySQL数据同步至AnalyticDB for PostgreSQL
      • 通过专线/VPN网关/智能网关接入的自建MySQL数据同步至AnalyticDB for PostgreSQL
      • ECS上的自建MySQL数据同步至AnalyticDB for PostgreSQL
      • MySQL数据同步至Elasticsearch实例
    • DRDS数据同步
      • DRDS实例数据同步至分析型数据库AnalyticDB
      • DRDS实例数据同步至Datahub实例
      • DRDS实例数据同步至DRDS实例
    • POLARDB数据同步
      • 从RDS for MySQL实时同步至POLARDB
      • 从POLARDB实时同步至RDS for MySQL
      • 从POLARDB实时同步至POLARDB
      • POLARDB for MySQL数据同步至AnalyticDB for PostgreSQL
    • Redis数据同步
      • 通过专线/VPN网关/智能网关接入的自建Redis集群数据同步至ECS上的自建Redis集群
      • ECS上的自建Redis数据库数据同步至Redis实例
  • 数据订阅
    • 创建订阅通道
    • 创建Oracle数据订阅通道
    • 管理消费通道
    • 修改消费位点
    • 修改订阅对象
    • 查看订阅数据
    • SDK接口简介
    • SDK快速入门
    • 订阅数据 SQL 封装简介
    • 数据订阅 SDK 示例代码运行简介
    • SDK 下载
  • 配置SQL条件过滤迁移数据
• 最佳实践
  • 不同RDS实例下库名不同的数据库之间的数据迁移
  • 实例内不同数据库之间的数据迁移
  • 使用DTS跨阿里云账号迁移RDS数据
  • 跨阿里云账号的ECS自建数据库迁移至RDS
  • 公共云与金融云间的数据迁移
  • 触发器存在情况下如何配置同步作业
  • 数据订阅SDK容灾
  • 缓存更新策略
  • DTS授权和子账号管理DTS实例
  • 本地IDC自建数据库同RDS实例实时同步
  • 使用阿里云数据传输 DTS 从 AWS RDS for Oracle 迁移到阿里云 RDS for MySQL
• 运维指南
  • 数据迁移
    • DTS是否能支持两个不同阿里云账号下的RDS实例之间的数据迁移？是否支持增量迁移？
    • DTS 数据增量迁移的基本原理是什么？是否能够保证两边数据库实时的？使用增量迁移时，是否会锁表？
    • DTS 迁移过程中，是否会锁表，对源数据库是否有影响？
    • DTS迁移时，对于ECS、RDS实例是走内网还是公网？
    • 数据迁移过程中，是否支持DDL操作？
    • DTS 是否支持 VPC 内的 ECS 上的自建数据库迁移到 RDS 实例？
    • DTS进行RDS迁移时，是从RDS的主库还是备库获取数据？
    • DTS是否支持在一个RDS实例中，复制出一个跟数据库A一模一样的库B？
    • 我的阿里云账号下面有两个RDS实例A,B，DTS是否可以将A中的数据库C迁移到B中的数据库D？
    • 使用DTS进行数据迁移，源数据库的数据会不会在迁移后被删除掉？
    • RDS的白名单列表中突然添加了很多不认识的IP,这些IP是哪里的？是否安全？
    • 数据迁移预检查时，预检查项schema不存在失败是什么原因?如何修复？
    • 创建迁移任务时，报获取迁移结构失败
    • 数据迁移时，目标数据库中多了一个表increment_trx，这个表是做什么的？
    • 创建数据迁移任务时，报获取结构连接超时是什么原因？
    • DTS是否支持定时自动迁移？
    • 使用DTS将自建数据库迁移到RDS，为什么迁移过程中RDS的空间大小会比源数据库大?
    • DTS是否支持VPC模式下的RDS实例的数据迁移？
    • enied to user 'user'...
    • 迁移的目标库中已经存在表了，使用DTS进行数据迁移是否会覆盖掉这些数据？
    • DTS 是否支持 VPC 网络下的 MongoDB 的迁移
    • DTS是否支持MongoDB增量迁移
    • 增量迁移是否只能支持15天
    • 迁移任务配置时，源实例类型，有公网IP的自建数跟RDS实例有什么区别
    • 迁移任务显示 锁定中 是什么原因？
    • 配置任务时，如果想做增量迁移，那么结构迁移是否需要勾选？ 迁移过程中，表结构不会发生变化？
    • 将另外一个阿里云账号下的RDS实例迁移到这个账号下，但是任务配置时报获取结构对象失败
    • 如果先做一个全量迁移任务，然后再做增量数据迁移任务，迁移数据是否会出现不一致
    • 跨阿里云账号迁移，目标实例不能选择其他阿里云账号下的RDS实例，怎么办？
    • 在哪里可以修改迁移的对象名称
    • 数据迁移期间如果源数据库出现数据变化，迁移数据会产生什么结果
    • 配置迁移任务时，RDS只读实例是否可以作为迁移的源实例
    • 迁移任务一直卡在增量数据迁移阶段，什么时候结束？
    • 是否可以将另外一个ECS实例上的自建数据库迁移到RDS实例上
    • 迁移任务迁移完成了，再释放该迁移任务是否会影响迁移数据库的使用？
    • 新购买了一个RDS实例，里面没有数据，现想将线上正在使用的RDS数据复制一份到新购RDS实例中，如何操作？
    • MySQL中数据类型为date 的数据，通过数据订阅拉到的数据格式变成：2016:11:01，这是为什么？
    • 数据迁移时，为什么在增量迁移阶段卡了很久还没有结束？
    • 配置迁移任务时，测试连接失败
    • 数据传输服务DTS同步一个表的某些字段数据
  • 数据同步
    • 我购买了一个rds实例，出于高可用的需求，如果我主实例异常宕机了，我需要一台备份的实例能替换上，这个能通过灾备实例实现吗？
    • 要做数据库备份，请问怎么实现
    • 类似混合云场景下的HA，比如我的业务都在RDS里了，在本地的数据中心做一个从库，这个DTS支持吗？
    • DTS数据同步是否支持RDS到ADS数据实时同步
    • DTS是否支持MongoDB实例间数据实时同步
    • 数据同步作业怎么更改同步源实例
    • 是否可以在本地搭建一个MySQL实例，作为RDS实例的从库
    • 数据同步报错，报某个表不存在
    • DRDS分库对应的RDS实例个数查询
    • 通过DTS进行阿里云两个地区的RDS实例之间的数据实时同步时是否需要购买专线
  • 数据订阅
    • afeeyrafeey-1-0错误...
    • 数据订阅启动SDK，报错原因是什么？
    • 数据订阅启动SDK报如下的错误：keep alive error，原因是什么？
    • 一个sdk客户端 可以订阅多个通道吗？
    • 数据订阅可以订阅实时增量数据，这个新增的数据是只指新增数据，还是包含修改的数据？
    • RDS实例和本地数据库的表结构相同，但是索引不同，可以使用数据订阅功能进行实时同步吗？
    • 启动订阅SDK时报get guid info failed，是什么原因？
    • 类似混合云场景下的HA，比如我的业务都在RDS里了，在本地的数据中心做一个从库，这个DTS支持吗？
    • RDS是否有解决方案可以实现自动的binlog下载，下载到本地的统计服务器？
    • tion balance...
    • 订阅通道无法修改消费位点
    • 数据订阅SDK中 usePublicIp=true 是什么意思？
    • 数据订阅在RDS 主备切换/主库重启的时候是否发生问题? 比如漏掉数据
    • 如何确认数据是否正常消费
    • SDK正常拉数据过程中，突然卡住不能订阅到数据
    • 为什么控制台上的消费位点要比数据范围最大值还要大
    • 为什么订阅到数据，跟写入的数据不完全相同
    • 如何保证SDK订阅到的数据是一个完整的事务，根据提供的消费位点是否会拉取到事务中间的record
    • 如果SDK退出后，过几天重启运行，不能成功订阅数据
    • 一个数据订阅实例，可以订阅多个RDS实例吗？
    • 数据订阅如果消费端有一条记录没有ack，SDK重启后为什么会收到重复数据
    • 数据订阅消费位点多久更新一次，为什么重启SDK时，有时候会重复接收数据
  • DTS IP段
  • 产品计费
    • 数据迁移常见计费问题
• 常见问题FAQ
  • Redis数据同步报 Cannot read anything
  • 数据传输服务DTS控制台的延迟时间获取间隔
  • DTS-1050005: MySQL Binlog字段数校验失败
  • DTS-2003: 指定数据库Host网络不通
  • DTS-2004: 未知数据库帐号
  • DTS-2005: 数据库帐号或密码错误
  • DTS-2006: 数据库帐号无连接权限
  • DTS-2007: 无链接连接权限
  • DTS-2008: 数据库不存在
  • DTS-2009: 新建数据库连接超时
  • DTS-2010: 新建连接失败,未归类异常
  • DTS-2012: 数据库当前连接数已经超过限制
  • DTS-1050002: 当前抓取的MySQL日志不存在
  • DTS-1050003: 当前抓取的MySQL日志不存在
  • DTS-1050004: MySQL SQL解析失败
  • DTS-1050005: MySQL日志Reader数据字典列校验错误
  • DTS-1050006: MySQL日志Reader数据字典列属性校验错误
  • DTS-1050007: MySQL日志Reader数据字典执行DDL出错
  • DTS-1050008: MySQL日志Reader数据字典表信息不存在
  • DTS-1050009: MySQL日志Reader 解析Binlog错误
  • DTS-1050010: MySQL日志Reader 解析字段错误
  • DTS-1051001: MySQL日志Reader查询表结构信息失败
  • DTS-1051002: MySQL日志Reader主实例校验失败
  • DTS-1051003: MySQL日志Reader binlog_format校验失败
  • DTS-1051004: MySQL日志Reader日志内容校验失败
  • DTS-1051005: MySQL 日志Reader 源库Binlog文件列表校验失败
  • DTS-1051006: MySQL 日志Reader 源库Binlog文件列表校验失败
  • DTS-1051007: MySQL 日志Reader 日志binlog_row_image校验失败
• API概览
  • 如何调用OpenAPI
    • API概览
  • 数据迁移
    • 购买迁移实例
    • 配置迁移任务
    • 启动迁移任务
    • 暂停迁移任务
    • 结束迁移任务
    • 删除迁移任务
    • 查看迁移任务状态
    • 查看迁移详情
  • 数据订阅
    • 购买订阅实例
    • 配置订阅通道
    • 启动订阅通道
    • 释放订阅实例
    • 查看订阅通道状态
    • 查看订阅实例列表
    • 修改订阅通道对象
    • 修改消费位点
  • 数据同步
    • 购买同步实例
    • 配置同步作业
    • 启动同步作业
    • 暂停同步作业
    • 释放同步作业
    • 修改同步对象
    • 查看同步对象修改详情
    • 查看同步作业状态
    • 查看同步作业列表
• SDK参考
  • 创建AccessKey
  • SDK下载
  • 通过Maven依赖使用DTS JAVA SDK
  • JAVA SDK使用步骤
• 相关协议
  • 数据传输服务条款
  • 服务等级协议