检测到您已登录华为云国际站账号，为了您更好的体验，建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
检测到您已登录华为云国际站账号，为了您更好的体验，建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
Python SDK 本章节介绍了Python SDK的使用说明，您可以参考本章节进行快速集成开发。 开发前准备 已注册华为账号并开通华为云，已进行实名认证。 已具备开发环境 ，支持python 3及以上版本。 已获取账号对应的Access Key（AK）和Secret Access
ns/{version_id} 表1 路径参数 参数 是否必选 参数类型 描述 project_id 是 String 用户项目ID。获取方法请参见获取项目ID和名称。 task_id 是 String 数据处理任务ID。 version_id 是 String 数据处理任务的版本ID。
【下线公告】华为云ModelArts服务旧版数据集下线公告 华为云计划于2024/10/31 00:00（北京时间）用AI开发平台ModelArts的新版数据集全面替代旧版数据集，旧版数据集正式下线。 下线范围 下线区域：华北-北京四（其他区域已下线） 受影响服务 ModelArts旧版数据集。
Notebook、训练、推理部署 华北-北京四 开发环境Notebook 开发环境的Notebook，根据不同的工作环境，对应支持的镜像和版本有所不同。 表3 新版Notebook支持的镜像 镜像名称 镜像描述 适配芯片 支持SSH远程开发访问 支持在线JupyterLab访问 pytorch1
要的工作空间，单击工作空间的“数据开发”，系统跳转至数据开发页面。 在数据开发模块，单击“配置管理 > 配置”，单击“默认项配置”。 “多IF策略”可设置为“逻辑与”或者“逻辑或”。 单击“保存”。 开发作业 在“作业开发”页面，新建一个数据开发作业。 拖动三个DWS SQL算子
设置并行度 操作场景 并行度控制任务的数量，影响shuffle操作后数据被切分成的块数。调整并行度让任务的数量和每个任务处理的数据与机器的处理能力达到最优。 查看CPU使用情况和内存占用情况，当任务和数据不是平均分布在各节点，而是集中在个别节点时，可以增大并行度使任务和数据更均匀
在Linux中调测Impala JDBC应用 在运行调测环境上创建一个目录作为运行目录，如“/opt/impala_examples”(Linux环境)，并在该目录下创建子目录“conf”。 执行mvn package ，在工程target目录下获取jar包，比如: impala-examples-mrs-2
创建API 创建API分组。 API网关>开放API>右上方创建分组。 编辑分组 填写分组名称（自定义），带年纪确定完成创建。 创建API。 进入API分组，创建API，API提供erp数据上传的请求转发功能。 创建过程说明： 1. 基本信息。 API名称：自定义。 所属分组：默认。
查看Oozie应用调测结果 操作场景 Oozie样例工程运行完成后可以通过控制台查看输出结果。 操作步骤 控制台显示运行结果会有如下成功信息： log4j:WARN No appenders could be found for logger (com.huawei.hadoop
查看Storm应用调测结果 操作场景 Storm应用程序运行完成后，可通过登录Storm WebUI查看应用程序的运行情况。 操作步骤 登录FusionInsight Manager系统。 在浏览器地址栏中输入访问地址，地址格式为“https://FusionInsight Ma
查看Flink应用调测结果 操作场景 Flink应用程序运行完成后，您可以查看运行结果数据，也可以通过Flink WebUI查看应用程序运行情况。 操作步骤 查看Flink应用运行结果数据。 当用户查看执行结果时，需要在Flink的web页面上查看Task Manager的Stdout日志。
查看Storm应用调测结果 操作场景 Storm应用程序运行完成后，可通过登录Storm WebUI查看应用程序的运行情况。 操作步骤 登录FusionInsight Manager系统。 在浏览器地址栏中输入访问地址，地址格式为“https://FusionInsight Ma
调测Hive Python3样例程序 Python3样例工程的命令行形式运行 赋予“python3-examples”文件夹中脚本的可执行权限。在命令行终端执行以下命令： chmod +x python3-examples -R。 在python3-examples/pyCLI_nosec
Flink流式读Hudi表建议 设置合理的消费参数避免File Not Found问题 当下游消费Hudi过慢，上游写入端会把Hudi文件归档，导致File Not Found问题。优化建议如下： 调大read.tasks。 如果有限流则调大限流参数。 调大上游compaction、archive、clean参数。
Flink流式写Hudi表规则 Flink流式写Hudi表参数规范 Flink流式写Hudi表参数规范如下表所示。 表1 Flink流式写Hudi表参数规范 参数名称 是否必填 参数描述 建议值 Connector 必填 读取表类型。 hudi Path 必填 表存储的路径。 根据实际填写
remove function命令 remove function命令，是删除指定函数的命令。默认会把整个函数删除，包含所有的版本、别名以及触发器。 当执行命令remove function -h/remove function --help时，可以获取帮助文档。 参数解析 表1
源端为Oracle，目的端为Hudi 该链路目前仅支持整库场景。 该链路目前需申请白名单后才能使用。如需使用该链路，请联系客服或技术支持人员。 约束限制 Oracle版本支持：10、11、12、19 。 Oracle 库需要开启归档日志，归档日志建议至少保留三天，开通归档日志详情
batchMode设置错误 问题现象 设置url参数batchMode=on且reWriteBatchedInserts=true，使用JDBC批量插入数据后，提示绑定参数数量与语句需要的参数数量不一致： bind message supplies * parameters, but
EXECUTE IMMEDIATE 功能描述 预备并且执行动态指定的SQL语句，不检索结果行。 语法格式 EXECUTE IMMEDIATE string 参数说明 string 包含要被执行的SQL语句的C字符串或者宿主变量。 示例 使用EXECUTE IMMEDIATE和名为
SET AUTOCOMMIT 功能描述 设置当前数据库会话的自动提交行为。默认情况下，嵌入式SQL程序不自动提交，因此需要显式地发出COMMIT。这个命令可以把会话改成自动提交模式，这样每一个单独的语句都会被隐式提交。 语法格式 SET AUTOCOMMIT { = | TO }
长按/截图保存，微信识别二维码
或者关注公众号“华为云”
