检测到您已登录华为云国际站账号,为了您更好的体验,建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
作业管理 MRS作业管理为用户提供向集群提交作业的入口,支持包括MapReduce、Spark、HQL和SparkSQL等类型的作业。 结合华为云数据治理中心DataArts Studio,提供一站式的大数据协同开发环境、全托管的大数据调度能力,帮助用户快速构建大数据处理中心。 通过数据治理中心DataArts
了作业。 涉及接口 先通过用户token查询指定学生作业列表,再通过作业id、习题id、学生id查询指定函数类习题提交记录,步骤如下: 查询课堂下指定成员的作业信息:查询学生作业列表。 查询学生函数习题提交记录信息:查询学生函数习题提交记录。 操作步骤 查询学生作业列表。 接口信息
学生认证 客户进行个人实名认证后,可以进行学生认证。通过学生认证的客户,可以体验华为云面向高校学生的相关扶持政策和优惠活动。 操作步骤 进入“学生认证”页面。 根据页面提示,填写学生认证相关信息。 单击“提交认证”,进入认证审核页面。 实名认证信息预计3个工作日内审核完成,请耐心等待审核结果,审核成功,即可完成认证。
学生管理功能 手动添加学生操作 登录租户后台。 单击菜单栏的学生管理菜单。 进入学生列表,单击【添加学生】按钮,弹出“添加学生”弹窗。 图1 添加学生页面 根据界面提示,配置学生的基本信息,如下表所示。 表1 添加学生-参数说明 参数名称 参数说明 取值样例 姓名 必选参数。 文本输入框,输入学生的姓名。
作业管理 查询作业 删除作业 修改作业 随机集群创建作业并执行 停止作业 指定集群创建作业 启动作业 查询作业状态 查询作业执行历史 父主题: API
学生认证 学生认证 学生认证注意事项 学生重新实名认证 父主题: 实名认证
在实例列表中单击指定实例名称,进入详情页面。 在左侧导航栏单击“作业管理”,进入该实例的作业管理页面。 在该实例的作业管理页面,单击指定作业所在行操作列的“启动”操作。 在启动作业确认弹窗中,单击“确定”来启动作业。 停止作业 登录GaussDB(DWS)控制台。 在左侧导航栏选择“数据
学生重新实名认证 当需要变更学生在校信息时,如学历升级等场景,可进行学生重新实名认证。 学生重新实名认证提交之后,原学生认证信息失效,学生认证结果以重新认证的结果为准。 注意事项 一个身份证仅允许一个客户进行学生认证。 学生认证可以进行多次变更认证操作。 学生重新实名认证时,最近
学生能享受优惠吗? 通过学生认证的账号,可以体验华为云面向高校学生的相关扶持政策和优惠活动。具体以华为云官网活动页面(https://developer.huaweicloud.com/campus)呈现的活动为准。 父主题: 要求及材料
学生认证注意事项 客户必须先进行个人实名认证,才能进行学生认证。 华为云仅支持对个人账号进行学生认证,企业账号不能进行学生认证。 客户在进行学生认证时,请务必确认为全日制在校大学生且所填信息与学信网信息一致,一经核实发现刷取、买卖学生认证优惠,华为云将回收优惠资源,停止发放优惠券,并保留法律追究权利。
作业 单击“作业”,会展示教师发布的所有作业。 图1 作业列表 作业需在作业提交截⽌时间之前完成,如未在该时间之前提交作业的,系统将在提交截⽌时间到时⾃动提交。 如作业未做答,系统将不⾃动提交; 未批阅或未分配批阅任务的作业,可撤回修改后重新提交。 图2 作业提交 如作业为互评作
查询学生函数习题提交记录信息 功能介绍 查询学生指定作业的习题提交记录信息(针对函数习题) 调试 您可以在API Explorer中调试该接口,支持自动认证鉴权。API Explorer可以自动生成SDK代码示例,并提供SDK代码示例调试功能。 URI GET /v3/jobs/
在弹出的确认调整作业优先级弹窗中,单击“确定”。 所选作业调整为紧急优先作业,作业名称后面显示为优先。 图3 调整优先级成功 停止作业 在左侧导航栏中,选择“管理 > 作业管理”,进入“作业管理”页面。 在“作业管理”页面的作业列表中,可单个或批量停止作业。 单个停止作业:在作业列表中,
发 > 作业开发”。 移动作业或作业目录。 方式一:通过右键的“移动”功能。 在作业目录中选择需要移动的作业或作业文件夹,右键单击作业或作业文件夹名称,选择“移动”。 图1 选择要移动的作业 在弹出的“移动作业”或“移动目录”页面,配置作业要移动到的目录。 图2 移动作业 图3 移动目录
管理Spark作业 查看Spark作业的基本信息 在总览页面单击“Spark作业”简介,或在左侧导航栏单击“作业管理”>“Spark作业”,可进入Spark作业管理页面。Spark作业管理页面显示所有的Spark作业,作业数量较多时,系统分页显示,您可以查看任何状态下的作业。 表1 作业管理参数
Flink作业常用操作 用户创建了新作业后,需要根据用户的实际需求对作业进行操作,包括编辑作业基本信息,启停作业、导入/导出作业等。 编辑作业 用户可以对已经创建的作业进行编辑,如修改SQL语句、作业名称和描述、作业配置信息等。 在DLI管理控制台的左侧导航栏中,单击“作业管理”>
当“log_enabled”为“true”时, 用户授权保存作业日志的OBS桶名。 smn_topic 否 String 当作业异常时,向该SMN主题推送告警信息。 main_class 否 String 作业入口类。 entrypoint_args 否 String 作业入口类参数,多个参数之间空格分隔。
包括Flink作业的ID、作业类型、作业执行状态等信息。 查看Flink作业基本信息 Flink作业详情 包括作业的SQL语句和参数设置信息,Jar作业支持查看参数设置信息。 查看Flink作业详情 Flink作业监控 通过云监控服务(CES)查看作业数据输入输出的详细信息。 查看Flink作业监控 Flink作业任务列表
Spark作业报错“UnknownScannerExeception”如何处理? 问题现象 Spark作业运行查看日志有些WARN日志,作业运行很慢,Caused by显示:UnknownScannerExeception。 解决方法 运行Spark作业前,调整hbase.client
作业对象的扩展属性配置 路径:公共平台->业务配置->作业对象->更多操作->表单属性配置 配置简介 对作业对象的扩展属性进行配置 图2.1-3作业对象扩展属性配置 父主题: 作业对象配置