检测到您已登录华为云国际站账号，为了您更好的体验，建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
检测到您已登录华为云国际站账号，为了您更好的体验，建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
Hive SQL和Spark SQL脚本执行失败，界面只显示执行失败，没有显示具体的错误原因？ 可能原因 Hive SQL和Spark SQL脚本执行失败，界面只显示执行失败，没有显示具体的错误原因，可能是由于连接方式导致的。 解决方案 请确认当前Hive SQL和Spark SQL脚本使用的数据连接为“MRS
为什么在创建数据连接的界面上MRS Hive/HBase集群不显示？ 出现该问题的可能原因有： 创建MRS集群时未选择Hive/HBase组件。 创建MRS集群时所选择的企业项目与工作空间的企业项目不同。 创建MRS数据连接时所选择的CDM集群和MRS集群网络不互通。 CDM集群
配置DataArts Studio数据连接参数 DWS数据连接参数说明 DLI数据连接参数说明 MRS Hive数据连接参数说明 Apache Hive数据连接参数说明 MRS HBase数据连接参数说明 MRS Kafka数据连接参数说明 MRS Spark数据连接参数说明 MRS
数据质量监控 查看质量作业 步骤8：数据资产查看 在DataArts Studio数据目录模块中，您可以查看数据地图。 数据地图 查看业务资产和技术资产 步骤9：服务退订 进行服务退订，避免持续产生费用。 服务退订 服务退订（可选） 父主题： 企业版：基于MRS Hive的出租车出行数据治理流程
Hive迁移作业长时间卡顿怎么办？ 问题描述 Hive迁移作业长时间卡顿怎么办？ 解决方案 为避免Hive迁移作业长时间卡顿，可手动停止迁移作业后，通过编辑Hive连接增加如下属性设置： 属性名称：hive.server2.idle.operation.timeout 值：10m
实例监控 作业运行成功后，您可以在DataArts Studio数据目录中查看汇总表的数据预览，具体操作请参见步骤8：数据资产查看。您也可以在数据开发的“脚本开发”页面新建一个Hive SQL脚本，执行以下命令查询结果，执行成功后返回类似如下的结果： 1 SELECT * FROM demo_dm_db
供应商 dim_vendor 码表维度 - 无 MRS_HIVE mrs_hive_link demo_dwr_db 供应商 公共维度 费率代码 dim_rate_code 码表维度 - 无 MRS_HIVE mrs_hive_link demo_dwr_db 费率 公共维度 付款方式
数据源为Hive时支持哪些数据格式？ 问题描述 云数据迁移服务，数据源为Hive时支持的数据格式有哪些？ 解决方案 云数据迁移服务支持从Hive数据源读写的数据格式包括SequenceFile、TextFile、ORC、Parquet。 父主题： 数据集成（CDM作业）
企业版：基于MRS Hive的出租车出行数据治理流程 示例场景说明 步骤1：流程设计 步骤2：数据准备 步骤3：数据集成 步骤4：元数据采集 步骤5：数据架构设计 步骤6：数据开发处理 步骤7：数据质量监控 步骤8：数据资产查看 步骤9：服务退订
DWS/Hive/HBase数据连接无法获取数据库或表的信息怎么办？ 可能原因 可能是由于CDM集群被关闭或者并发冲突导致，您可以通过切换agent代理来临时规避此问题。 解决方案 建议您通过以下措施解决此问题： 检查CDM集群是否被关机。 是，将CDM集群开机后，确认管理中心的数据连接恢复正常。
新建MRS Hive连接时，提示：CORE_0031:Connect time out. (Cdm.0523) 怎么解决？ 问题描述 新建MRS Hive连接时，提示：CORE_0031:Connect time out. (Cdm.0523) 。 解决方案 新建MRS Hive连接时
述，方便用户进行查询 7 数据安全 需要对哪些数据源进行访问管理？ 本示例不涉及 支持DLI、DWS和Hive等数据源 需要支持静态脱敏？ 本示例不涉及 支持对DLI、DWS和Hive数据源数据进行静态脱敏 需要支持动态脱敏？ 本示例不涉及 支持对DWS和Hive数据源数据进行动态脱敏
类型为“MRS Hive”，单击“下一步”，然后如下图所示配置连接参数，单击“保存”。 图6 创建MRS Hive连接 表2 MRS Hive连接参数 参数名 说明 取值样例 名称 连接的名称，根据连接的数据源类型，用户可自定义便于记忆、区分的连接名。 hivelink Manager
完成血缘的输出表配置后，单击确认，则此MRS Spark节点的血缘关系手动配置成功。后续当需要查看血缘关系时，参考查看数据血缘完成元数据采集，并成功完成作业调度后，即可在数据目录组件查看手动配置的MRS Spark节点血缘关系。 父主题： 节点数据血缘
在DataArts Studio数据质量模块中，可以对业务指标和数据质量进行监控。 查看质量作业 在DataArts Studio数据开发中，作业运行成功后，您可以登录DataArts Studio数据质量控制台查看质量作业运行结果。 在DataArts Studio控制台首页，选择对应工
图4 查看节点血缘 在数据资产搜索结果中，图标为表格的数据资产为表，单击某一表名称，可以查看表的详情。在详情页面，可以查看表的血缘信息。 单击血缘图中表左右两端“+”、“-”图标，可以进一步展开查看血缘的上下链路。 单击血缘图中的某一个表，可以查看该表的详情。 图5 查看表血缘 父主题：
击“确定”完成数据连接的创建。 此处创建MapReduce服务 （MRS Hive）数据连接，参数配置如图2所示。 数据连接类型：MapReduce服务（MRS Hive）。 数据连接名称：mrs_hive_link。 标签：可选参数。您可以输入新的标签名称，也可以在下拉列表中选择已有的标签。
自定义时段查询，自定义时段时的最大查询时间间隔为一个月。 DWS审计日志：日志列表默认使用最新DWS数据连接。单击查看日志详情，可查看当前日志的全量信息。 DWS审计日志支持导出，单击“导出”后，会下载当前页的json数据。 图2 DWS审计日志列表 MRS Hive审计日志：MRS
DataArts Studio服务后不会再产生API调用，您也可以直接删除发布到APIG网关上的API。 父主题： 企业版：基于MRS Hive的出租车出行数据治理流程
连接管理能力由管理中心统一提供，相关接口已不再维护，推荐使用管理中心API进行连接管理。 功能介绍 创建一个新连接，当前支持的连接类型有DWS、DLI、SparkSQL、HIVE、RDS、CloudTable。 调试 您可以在API Explorer中调试该接口，支持自动认证鉴权。 URI
长按/截图保存，微信识别二维码
或者关注公众号“华为云”
