检测到您已登录华为云国际站账号,为了您更好的体验,建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
命令格式 printf(String format, Obj... args) 参数说明 表1 参数说明 参数 是否必选 参数类型 说明 format 是 STRING 用于定义输出格式 Obj 否 STRING 其他输入参数。 返回值说明 返回STRING类型的值。
确认清理可在console页面设置中添加参数spark.databricks.delta.retentionDurationCheck.enabled值为false。
可选参数like被用于基于关键字来进行匹配。
命令语法 ALTER TABLE tableName DROP COLUMN|COLUMNS cols 参数描述 表1 DROP COLUMN参数描述 参数 描述 tableName 表名。 cols 待删除列,可以指定多个。
执行参数 set hoodie.compact.inline = true; //打开compaction操作 set hoodie.run.compact.only.inline = true; //compaction只执行已生成的计划
参数 描述 tableName 表名。
解决方案 在SQL语句中添加如下参数: connector.properties.flink.partition-discovery.interval-millis="3000" 增加或减少Kafka分区数,不用停止Flink作业,可实现动态感知。
hoodie.archive.file.cleaner.days.retained = 30; 提交SQL run cleanarchive on tableIdentifier/tablelocation; 参数描述 表1 参数描述 参数 描述 tableIdentifier
命令语法 ALTER TABLE tableName RENAME COLUMN old_columnName TO new_columnName 参数描述 表1 参数描述 参数 描述 tableName 表名。 old_columnName 旧列名。
Flink SQL作业,作业运行失败,在作业日志中有如下报错信息: connect to DIS failed java.lang.IllegalArgumentException: Access key cannot be null 问题根因 该Flink SQL作业在配置作业运行参数时
创建Bucket索引表调优 创建Bucket索引表调优 Bucket索引常用设置参数: Spark: hoodie.index.type=BUCKET hoodie.bucket.index.num.buckets=5 Flink index.type=BUCKET hoodie.bucket.index.num.buckets
SparkDataSource(option里设置如下参数,写数据时触发) hoodie.clean.automatic=true hoodie.cleaner.commits.retained=10 // 默认值为10,根据业务场景指定 Flink(with属性里设置如下参数,
语法格式 1 SELECT * FROM table_name LIMIT number; 关键字 LIMIT:对查询结果进行限制,number参数仅支持INT类型。
语法格式 1 SELECT * FROM table_name LIMIT number; 关键字 LIMIT:对查询结果进行限制,number参数仅支持INT类型。
响应参数 表2 响应参数 参数 参数类型 说明 is_success Boolean 请求执行是否成功。“true”表示请求执行成功。
命令格式 replace(string <str>, string <old>, string <new>) 参数说明 表1 参数说明 参数 是否必选 参数类型 说明 str 是 STRING 待替换的字符串。 old 是 STRING 待比较的字符串。
translate("abcde", "bcd", "BCD") 命令格式 translate(string|char|varchar input, string|char|varchar from, string|char|varchar to) 参数说明 表1 参数说明 参数
请求消息 表2 请求参数 参数 是否必选 参数类型 说明 job_id 是 String 作业ID,用于标识上传作业。 响应消息 表3 响应参数 参数 参数类型 说明 is_success Boolean 执行请求是否成功。“true”表示请求执行成功。
请求消息 无请求参数。 响应消息 表2 响应参数说明 参数名称 是否必选 参数类型 说明 is_success 否 String 请求是否成功。 message 否 String 消息内容。 execute_graph 否 Object 查询作业计划的响应参数。具体请参考表3。
URI URI格式 DELETE /v1.0/{project_id}/streaming/jobs/{job_id} 参数说明 表1 URI参数说明 参数名称 是否必选 参数类型 说明 project_id 是 String 项目编号,用于资源隔离。