检测到您已登录华为云国际站账号,为了您更好的体验,建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
操作Avro格式数据 场景说明 用户可以在Spark应用程序中以数据源的方式去使用HBase,本例中将数据以Avro格式存储在HBase中,并从中读取数据以及对读取的数据进行过滤等操作。 数据规划 在客户端执行hbase shell,进入HBase命令行,使用下面的命令创建样例代码中要使用的HBase表:
使用Spark Shell创建Hudi表 操作场景 本指南通过使用spark-shell简要介绍了Hudi功能。使用Spark数据源,将通过代码段展示如何插入和更新Hudi的默认存储类型数据集: COW表。每次写操作之后,还将展示如何读取快照和增量数据。 前提条件 在Manage
要获取的信息 获取方式 源集群 华为云Elasticsearch集群 源集群的访问地址 访问源集群的用户名和密码(仅安全集群涉及) 获取集群名称和访问地址请参见3。 用户名和密码请联系服务管理员获取。 自建Elasticsearch集群 源集群的公网访问地址 访问源集群的用户名和密码(仅安全集群涉及)
输入配置连接参数,单击“测试”验证连接是否可用,待提示“测试成功”后单击“确定”。 设置数据源信息 单击“下一步”,进入“输入设置”界面,在“源文件类型”中选择“HBASE”,设置数据源信息。 表1 输入设置参数 参数名 解释说明 示例 HBase实例 在HBase作业中,Loa
输入配置连接参数,单击“测试”验证连接是否可用,待提示“测试成功”后单击“确定”。 设置数据源信息 单击“下一步”,进入“输入设置”界面,在“源文件类型”中选择“HBASE”,设置数据源信息。 表1 输入设置参数 参数名 解释说明 示例 HBase实例 在HBase作业中,Loa
DISTINCT(resource_id) 流量方向图展示为静态过滤器,可按照入方向和出方向的流量进行过滤,所关联的查询分析语句如下所示: 过滤源IP图,所关联的查询分析语句如下所示: SELECT DISTINCT(srcaddr) 过滤目的IP图,所关联的查询分析语句如下所示: SELECT
备机读业务报错:"UBTreeSearch::read_page has conflict with recovery, please try again later" 长查询执行期间大量并发更新偶现写入性能下降 父主题: Ustore存储引擎
输入参数:调用接口的输入参数。在“目标”中选择参数,在“源”中拖入全局上下文中的对应变量。 输出参数:调用接口的输出参数。 “源”中选择“result”,“目标”中拖入全局上下文中的“result”,用于接收调用结果。 “源”中选择“error”,“目标”中拖入全局上下文中的“error”,用于接收错误信息。
迁移完成后,请使用redis-cli工具连接源Redis和目标Redis,确认数据的完整性。 分别连接源Redis和目标Redis。 连接操作请参考redis-cli连接。 输入info keyspace,查看keys参数和expires参数的值。 对比源Redis和目标Redis的key
支持从领域维度对数据资产进行管理,并提供资产统计和数据快速检索功能。 华北-北京四 基础数据管理 支持配置管理系统基础数据,包括数据源、源系统、源系统API、设备API、标签等。 华北-北京四 用户权限管理 内置的用户授权功能,通过给用户授权租户及角色,使其拥有不同租户的数据访问
击“确定”。 图1 点位阈值修改 修改点位配置后,单击“下发配置”,将配置更新给边侧。 图2 同步下发配置 修改数据源配置,为了更清晰的看到点位阈值的效果,将数据源的配置进行修改,对点位MotorCurrent对应的数据源地址的值进行修改,保持上报值11~15。 图3 点位上报值修改
可以找到数据源(ODBC)选项。 当前数据库ODBC驱动基于开源版本,对于华为自研的数据类型,tinyint、smalldatetime、nvarchar2在获取数据类型的时候,可能会出现不兼容的情况。 ODBC包及依赖的库和头文件 开发流程 Linux下配置数据源 Windows下配置数据源
GaussDB(DWS) 使用GDS导入数据 05:39 使用GDS从远端服务器导入数据 数据仓库服务 GaussDB(DWS) 导入MRS数据源 11:33 导入MRS数据源(SQL on Hadoop) 数据仓库服务 GaussDB(DWS) 光大银行基于DWS创新实践 09:23 光大银行基于DWS创新实践
基本概念 流 流是通过图形化拖拽方式编排、组合触发事件和执行动作,从而连接多个应用,实现业务流程自动化。 自动化流 自动化流是基于特定事件触发后,自动执行的操作序列。 手动触发流 手动触发流是基于手动操作触发后,执行的操作序列,操作一次运行一次。 流模板 可将已创建好的流发布为我
ER支持的监控指标 功能说明 本节定义了企业路由器上报给云监控服务的监控指标信息,包括命名空间、监控指标列表和测量维度,您可以通过云监控提供的管理控制台或API接口来检索企业路由器产生的监控指标和告警信息。 命名空间 SYS.ER 监控指标 通过云监控服务,您可以监控企业路由器实例以及企业路由器连接的网络情况。
删除对端网关 场景描述 用户根据实际需要删除已创建的对端网关。 约束与限制 若对端网关已被VPN连接关联,则无法直接删除该对端网关,需要先将该对端网关在VPN连接中移除。 操作步骤 登录管理控制台。 在管理控制台左上角单击图标,选择区域和项目。 在页面左上角单击图标,选择“网络 >
SMS迁移服务器实施步骤 主机迁移服务使用流程如下图: 图1 迁移流程 迁移前准备工作主要有以下几个方面 申请资源 表1 资源列表 资源 规格 ECS 规格:2vCPUs | 4GB | c6.2xlarge.2 操作系统:Linux 区域:华东-上海一 VPC名称:VPC1 EIP
报表概述 AstroZero对内部数据提供了一种汇总方式的视图,即为报表。利用报表功能,可以让数据进行可视化的展示,并进行分析与洞察,更好地了解业务现存的问题与机遇。 AstroZero提供报表构建器,让您完成报表的开发。报表构建器由如下两个主要模块组成。 报表 报表定义了报表数
轮转策略 单用户轮转 单用户轮转策略适用于单一用户场景,多用于低频次轮转、可靠性要求不高的账号,这是最简单的轮换策略,适用于大多数用例。但是在密码重置切换的瞬间,凭据的当前版本可能暂时无法使用。 您可以使用单用户轮换来实现: 在创建时选择或者新建一个数据库账户作为凭据值储存。 访
创建实例 概述 多活实例是一个独立的资源空间,所有的操作都是在实例内进行,不同实例间的资源相互隔离。您可以根据业务需要使用一个或多个实例。 前提条件 已参考准备资源章节准备虚拟机资源。 有可用的VPC,并且已配置好子网与安全组,否则请参考准备资源完成VPC、子网和安全组,以及边缘节点的创建注册自建边缘节点。