检测到您已登录华为云国际站账号,为了您更好的体验,建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
DataCheck是一款运行在Linux或Windows操作系统上的命令行工具,致力于向用户提供简单、快速、可靠的数据校对服务,通过连接源端数据库以及目标dws数据库,将源端数据库和目标端DWS数据库中的表数据进行校对,保证用户数据迁移前后的一致性。
在Unix系统上默认的编辑工具是vi。 EDITOR VISUAL PSQL_EDITOR_LINENUMBER_ARG 当\e和\ef带上一行数字参数使用时,这个变量指定的命令行参数用于向编辑器传递起始行数。像Emacs或vi这样的编辑器,这只是个加号。
元命令参考 介绍使用GaussDB(DWS)数据库命令行交互工具登录数据库后,gsql所提供的元命令。所谓元命令就是在gsql里输入的任何以不带引号的反斜杠开头的命令。 注意事项 一个gsql元命令的格式是反斜杠后面紧跟一个动词,然后是任意参数。
DSC常见问题 本章介绍常见问题。 问题1:在安装过程中,提示“ Root privileged users are not allowed to install the DSC for Linux. ”应如何处理? 答:拥有root权限的用户不得在Linux中安装和执行DSC。建议使用没有
图1 下载工具 下载客户端软件。 表1 DSC下载地址 下载地址 校验文件 DSC_8.3.1.111.zip DSC_8.3.1.111.zip.sha256 下载到本机后,使用WinSCP工具,将DSC工具上传到一个需安装工具的Linux主机上。
处理错误表 操作场景 当数据导入发生错误时,请根据本文指引信息进行处理。 查询错误信息 数据导入过程中发生的错误,一般分为数据格式错误和非数据格式错误。 数据格式错误 在创建外表时,通过设置参数“LOG INTO error_table_name”,将数据导入过程中出现的数据格式错误信息写入指定的错误信息表
停止GDS 操作场景 待导入数据成功后,停止GDS。 操作步骤 以gds_user用户登录安装GDS的数据服务器。 请根据启动GDS的方式,选择停止GDS的方式。 若用户使用“gds”命令启动GDS,请使用以下方式停止GDS。 执行如下命令,查询GDS进程号。 ps -ef|grep
配置DataCheck dbinfo.properties配置 check_input.xlsx配置 父主题: DataCheck
基于Windows使用DataCheck 上传工具包到Windows服务器并解压: 生成数据库登录密码密文: 进入bin目录,启动CMD工具: 执行密文生成的脚本,密文会输出。对源端和目标端数据库登录密码分别执行此脚本生成密文。
使用DSC 概述 下载并安装DSC 配置DSC 迁移流程 数据库模式迁移 Version命令迁移 Help命令迁移 日志参考 父主题: DSC
术语表 下表包含缩略语、术语及其说明。 术语 描述 C 公用表表达式(CTE) 公用表表达式是一个在查询中定义的临时命名结果集,仅可用于更大的查询范围。 D 数据库(DB) 数据库是一组相关信息的集合,通常是为了使通用的检索变得简单和高效而组织起来的。 数据库属性: 数据库名称。
命令参考 详细的gsql参数请参见表1、表2、表3和表4。 表1 常用参数 参数 参数说明 取值范围 -c, --command=COMMAND 声明gsql要执行一条字符串命令然后退出。 - -C, --set-file=FILENAME 使用文件作为命令源而不是交互式输入,gsql
配置Data Studio 本节介绍使用Data Studio时要遵循的配置步骤,以及配置服务器以调试PL/SQL函数的步骤。 配置Data Studio 通过Data Studio.ini文件来配置Data Studio: 参数如有修改,需重新启动Data Studio方可查看。
DataCheck基本功能 DataCheck基本功能 支持源端为DWS,MySQL,PostgreSQL数据库与目标端为DWS数据库的数据校验。 支持通用类型字段校验:数值、时间、字符类型。 支持校验级别设置:包括high、middle、low三种。 支持指定schema、表名、
算子 ** Netezza语法 迁移后语法 1 V_Out := V_Out + v_J * ( v_N ** v_K ) ; 1 V_Out := V_Out + v_J * ( v_N ^ v_K ) ; NOTNULL and ISNULL Netezza语法 迁移后语法
网络环境:安装、运行DataCheck工具的服务器,需要与待连接的数据库的网络是互通的。 下载DataCheck工具 下载DataCheck客户端软件,请联系技术支持工程师。
迁移流程 前提条件 准备工作 执行DSC 查看输出文件和日志 故障处理 父主题: 使用DSC
日志参考 日志概述 SQL迁移日志 Perl迁移日志 父主题: 使用DSC
这些错误操作在客户端工具也有相应的提示信息。
它和在目标表上进行无条件的DELETE有同样的效果,但由于TRUNCATE不做表扫描,因而快得多。在大表上操作效果更明显。 注意事项 请谨慎执行TRUNCATE TABLE,确认表数据可以删除后,再执行删除操作。TRUNCATE TABLE命令删除表数据后,数据将无法恢复。