检测到您已登录华为云国际站账号,为了您更好的体验,建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
srcname name - 外部数据源对象的名称。 srcowner oid PG_AUTHID.oid 外部数据源对象的所有者。 srctype text - 外部数据源对象的类型,缺省为空。 srcversion text - 外部数据源对象的版本,缺省为空。 srcacl aclitem[]
查询和车辆模糊查询,展示GaussDB(DWS)对于历史详单数据的高性能查询能力。 GaussDB(DWS)已预先将样例数据上传到OBS桶的“traffic-data”文件夹中,并给所有华为云用户赋予了该OBS桶的只读访问权限。 视频介绍 操作流程 本实践预计时长40分钟,基本流程如下:
fill_rate numeric(5,2) disk cache的填充率。 temp_file_size bigint 临时/冷缓存文件的总大小(kbytes)。 a1in_size bigint disk cache中a1in队列保存的数据的总大小,单位kbytes。 a1out_size bigint
y和DynamicTableSinkFactory接口,可用于对接GaussDB(DWS)表作为Flink作业的源表、结果表和维表。 使用DWS-Connector做源表时,DWS-Connector实现了SupportsLimitPushDown和SupportsFilterP
错误原因:日期时间格式错误,源字符串长度小于需要读取的长度。 解决办法:如果源字符串不是定长的,尝试使用“FM”修饰符。 GAUSS-03362: "invalid value '%s' for '%s'" SQLSTATE: 22007 错误原因:日期时间格式错误,需要长度的字符中有部分字符无法解析。
设置Netezza配置参数可在迁移Netezza数据库脚本时自定义迁移工具的行为。 打开config文件夹中的features-netezza.properties文件,并根据实际需要设置表1中的参数。 表1 features-netezza.properties文件中的配置参数 参数 说明 取值范围 默认值 样例
radata数据库脚本时自定义迁移工具的行为。 打开config文件夹中的features-teradata.properties文件,并根据实际需要设置表1中的参数。 表1 features-teradata.properties文件中的配置参数 参数 说明 取值范围 默认值 样例
步骤四:通过外表导入DLI表数据 准备工作 已注册华为账号并开通华为云,具体请参见注册华为账号并开通华为云,且在使用GaussDB(DWS) 前检查账号状态,账号不能处于欠费或冻结状态。 已创建虚拟私有云和子网,参见创建虚拟私有云和子网。 已获取华为账号的AK和SK,参见访问密钥。 步骤一:准备DLI源端数据
用于指定兼容外表的各类参数。 FORMAT 数据源文件的格式。 取值范围:CSV、TEXT、FIXED、BINARY。 CSV格式的文件,可以有效处理数据列中的换行符,但对一些特殊字符处理有欠缺。 TEXT格式的文件,可以有效处理一些特殊字符,但无法正确处理数据列中的换行符。 FI
低。 处理方式: 对按照时间特征存储和访问的大表设计成分区表。 分区键一般选离散度高、常用于查询过滤条件中的时间类型的字段。 分区间隔一般参考高频的查询所使用的间隔,需要注意的是针对列存表,分区间隔过小(例如按小时)可能会导致小文件过多的问题,一般建议最小间隔为按天。 场景6:行存表求count值
用于指定兼容外表的各类参数。 FORMAT 数据源文件的格式。 取值范围:CSV、TEXT、FIXED、BINARY。 CSV格式的文件,可以有效处理数据列中的换行符,但对一些特殊字符处理有欠缺。 TEXT格式的文件,可以有效处理一些特殊字符,但无法正确处理数据列中的换行符。 FI
the directory." SQLSTATE: XX000 错误原因:删除HDFS上的目录失败。 解决办法:HDFS上该目录下存在文件,确保该目录下的文件已经没有必要存在时,手动删除目录下面的文件。 GAUSS-04456: "could not initialize DFS connector
input buffer length is %d" SQLSTATE:无 错误原因:接收到异常的数据包,数据包的长度为xx,接收buffer的长度为xx。 解决办法:请检查数据文件,确保数据文件没有问题。 GAUSS-05180: “encoding ‘%s’ not supported
partition %s" SQLSTATE: XX000 错误原因:分区表导入过程中下盘缓存文件创建失败。 解决办法:检查是否当前系统的文件数达到了最大值,检查当前系统是否有足够的存储空间用以创建分区表导入时的临时文件。 GAUSS-04752: "error write temp file while
DSC读取、处理文件并将输出写入磁盘。这个过程被记录到成功写日志文件中。在某些情况下,用户可通过此文件了解哪些文件已处理成功。在重新运行的情况下,用户可以跳过这些文件运行剩余的文件。该文件位于log文件夹中。日志文件包括日期、时间、文件名等详细信息。此日志文件的日志记录级别为INFO。
在数据库demo中新建了一个Hive TEXTFILE类型的表product_info,并将数据文件(product_info.txt)导入到该表对应的HDFS路径中。 执行以下命令切换到demo数据库: USE demo; 执行以下命令,创建表product_info,表字段按照数据文件中的数据进行定义: 1
SQLSTATE: XX000 错误原因:由于所删除的表空间的目录不是一个空目录存在文件,所以删除表空间失败。 解决办法:建议手工排查该目录,查找存在的文件,若是HDFS表文件,则在数据库中删除HDFS表,若是外部手工创建的文件,且该文件没有被使用,直接删除,最后再删除一次表空间。 GAUSS-04613:
执行如下命令编译生成数据构建工具dbgen。 编译之前需要修改dbgen目录下的两个文件:makefile.suite和tpcd.h 修改makefile.suite文件。 #makefile.suite的更改参数如下(103行-111行): CC = gcc # Current
properties文件中包括一系列应用配置参数,用于连接源端数据库和目标dws数据库,该文件中的参数为通用参数。 设置方法如下。 打开conf文件夹中的dbinfo.properties文件。 根据实际需要修改dbinfo.properties文件中参数的值。 dbinfo.p
command, which type is %d" SQLSTATE: XX000 错误原因:收到了非法的GDS交互。 解决办法:请检查GDS外表对应的导入文件中是否存在非法数据并对文件进行数据清洗后再次导入。 GAUSS-04622: "%s cannot be executed when