已找到以下 193 条记录
AI智能搜索
产品选择
云数据迁移 CDM
没有找到结果,请重新输入
产品选择
云数据迁移 CDM
在搜索结果页开启AI智能搜索
开启
产品选择
没有找到结果,请重新输入
  • 配置Hive目的端参数 - 云数据迁移 CDM

    示写入表数据时,用户选择操作: 不自动创建:不自动建表。 不存在时创建:当目的端数据库没有“表名”参数中指定表时,CDM会自动创建该表。如果“表名”参数配置表已存在,则不创建,数据写入到已存在表中。 先删除后创建:CDM先删除“表名”参数中指定表,然后再重新创建该表。

  • 权限及授权项说明 - 云数据迁移 CDM

    对权限最小化安全管控要求。 如果您要允许或是禁止某个接口操作权限,请使用策略。 账号具备所有接口调用权限,如果使用账号下IAM用户发起API请求时,该IAM用户必须具备调用该接口所需权限,否则,API请求将调用失败。每个接口所需要权限,与各个接口所对应授权项相对应,

  • 基本概念 - 云数据迁移 CDM

    用户注册时账号,账号对其所拥有的资源及云服务具有完全访问权限,可以重置用户密码、分配用户权限等。由于账号是付费主体,为了确保账号安全,建议您不要直接使用账号进行日常管理工作,而是创建IAM用户并使用他们进行日常管理工作。 IAM用户 由账号在IAM中创建用户,是云服务使用人员,具有身份凭证(密码和访问密钥)。

  • Mysql导入数据到DLI,快执行完时失败了提示Invoke DLI service api failed错误怎么解决? - 云数据迁移 CDM

    结合报错,考虑是DLI目的端写入问题。但因日志截不全,进入CDM集群,查看客户作业日志。 根据分析步骤一报错,考虑是选错了队列类型,需要选择SQL队列。用户应该是先写到OBS文件,然后通过外表映射导入到DLI表。数据基本已经完成,最终映射时候报错,因为这种场景需要使用DLISQL队列。 解决方案 联

  • 认证鉴权 - 云数据迁移 CDM

    使用Token前请确保Token离过期有足够时间,防止调用API过程中Token过期导致调用API失败。 Token在计算机系统中代表令牌(临时)意思,拥有Token就代表拥有某种权限。Token认证就是在调用API时候将Token加到请求消息头,从而通过身份认证,获得操作API权限。 Token

  • Hive连接参数说明 - 云数据迁移 CDM

    Manager用户名和密码。从HDFS导出目录时,如果需要创建快照,这里配置用户需要HDFS系统管理员权限。 如果要创建MRS安全集群数据连接,不能使用admin用户。因为admin用户是默认管理页面用户,这个用户无法作为安全集群认证用户来使用。您可以创建一个新MRS用户

  • 步骤1:创建集群 - 云数据迁移 CDM

    推荐与MySQL实例或DWS集群子网一致。 推荐选择已选择可用区下子网,任意选择子网创建可能会创建失败。 安全组:推荐与MySQL实例或DWS集群安全组一致。 企业项目:如果已经创建了企业项目,这里才可以选择。必须与MySQL实例或DWS集群企业项目一致。 其它参数保持默认即可。 1 创建集群1

  • 文件格式介绍 - 云数据迁移 CDM

    列数据字符串中出现字段分隔符时,目的端可以通过开启“使用包围符”,将该字符串括起来,作为一个整体写入CSV文件。CDM目前只使用双引号("")作为包围符。如1所示,数据库name字段值中包含了字段分隔符逗号: 1 包含字段分隔符字段值 不使用包围符时候,导出CSV文件,数据会显示为:

  • 新增字段操作指导 - 云数据迁移 CDM

    确保导入到目的端数据完整性。 1 字段映射 目前支持以下类型自定义字段: 常量 常量参数即参数值是固定参数,不需要重新配置值。例如“lable”=“friends”用来标识常量值。 变量 您可以使用时间宏、表名宏、版本宏等变量来标记数据库来源信息。变量语法:${varia

  • 正则表达式分隔半结构化文本 - 云数据迁移 CDM

    系统,且“文件格式”必须选择“CSV格式”。 1 正则表达式参数 在迁移CSV格式文件时,CDM支持使用正则表达式分隔字段,并按照解析后结果写入目的端。正则表达式语法请参考对应相关资料,这里举例下面几种日志文件正则表达式写法: Log4J日志 Log4J审计日志 Tomcat日志

  • 正则表达式分隔半结构化文本 - 云数据迁移 CDM

    系统,且“文件格式”必须选择“CSV格式”。 1 正则表达式参数 在迁移CSV格式文件时,CDM支持使用正则表达式分隔字段,并按照解析后结果写入目的端。正则表达式语法请参考对应相关资料,这里举例下面几种日志文件正则表达式写法: Log4J日志 Log4J审计日志 Tomcat日志

  • 上传CDM连接驱动 - 云数据迁移 CDM

    已参见FTP/SFTP连接参数说明创建SFTP连接并将对应驱动上传至线下文件服务器(可选)。 如何获取驱动 不同类型关系数据库,需要适配不同类型驱动。注意,上传驱动版本不必与待连接数据库版本相匹配,直接参考表1获取建议版本JDK8 .jar格式驱动即可。 表1 获取驱动 关系数据库类型 驱动名称

  • CDM作业配置管理 - 云数据迁移 CDM

    数据迁移作业提交运行后,CDM会根据作业配置中“抽取并发数”参数,将每个作业拆分为多个Task,即作业分片。 不同源端数据源作业分片维度有所不同,因此某些作业可能出现未严格按作业“抽取并发数”参数分片情况。 CDM依次将Task提交给运行池运行。根据集群配置管理中“最大抽取并发数”参数,超出规格Task排队等待运行。