已找到以下 179 条记录
AI智能搜索
产品选择
数据接入服务 DIS
没有找到结果,请重新输入
产品选择
数据接入服务 DIS
在搜索结果页开启AI智能搜索
开启
产品选择
没有找到结果,请重新输入
  • 连接OBS - 数据接入服务 DIS

    DIS可以向对象存储服务(Object Storage Service,简称OBS)上传数据。 前提条件 已参考自动创建委托创建IAM委托,授权DIS服务去访问用户的OBS。 数据转储 用户在新增转储任务时可设置”数据转储地址”。当“数据转储”设置为“OBS”时,DIS会将通道数据周期性导入OBS。

  • 如何专线接入DIS - 数据接入服务 DIS

    如何专线接入DIS 参见自动开通云专线开通云专线,然后使用开通专线的云账号访问虚拟私有云VPC。 选择“VPC终端节点 > 终端节点”,单击“购买终端节点”。 “服务类别”选择“云服务”,并在服务中选择DIS服务的终端节点,例如华东-上海二为com.myhuaweicloud.cn-east-2

  • 查看监控指标 - 数据接入服务 DIS

    查看监控数据。 前提条件 数据接入服务通道正常运行。 已删除的通道,云监控将默认该通道不存在,并在监控列表删除,不再对其进行监控,但告警规则需要用户手动清理。 已在云监控页面设置告警规则,具体操作请参见设置告警规则。 操作步骤 使用注册账户登录DIS控制台。 单击管理控制台左上角的,选择区域和项目。

  • 弹性伸缩分区 - 数据接入服务 DIS

    在左侧列表栏中选择“通道管理”。 在“通道管理”页面单击需要扩缩容的通道名称。 在通道详情页面的右上角单击“扩缩容”按钮,弹出“变更分区数目”对话框。 修改“目标分区数”,单击“确认”。 在左侧列表栏中选择通道管理。 针对待扩缩容的通道,选中“操作”列的“更多”下拉列表的“扩缩容”。 弹出“变更分区数目”对话框。

  • 新增转储任务 - 数据接入服务 DIS

    到您选择的目标。 使用注册账户登录DIS控制台。 单击管理控制台左上角的,选择区域和项目。 在左侧列表栏中选择通道管理。 单击需要查看的通道名称,进入所选通道的管理页面,选择“转储管理”页签。也可选中待查看通道名称对应操作列,选择“更多”下拉列表的“查看转储任务”。 单击“添加

  • 使用DIS实时分析车辆位置 - 数据接入服务 DIS

    您可以通过如下方式获取访问密钥。 登录控制台,在用户名下拉列表中选择“我的凭证”。 进入“我的凭证”页面,选择“访问密钥 > 新增访问密钥”,如图2所示。 图2 单击新增访问密钥 单击“确定”,根据浏览器提示,保存密钥文件。密钥文件会直接保存到浏览器默认的下载文件夹。打开名称为“credentials

  • 权限管理 - 数据接入服务 DIS

    默认情况下,管理员创建的IAM用户没有任何权限,需要将其加入用户组,并给用户组授予角色,才能使得用户用户获得对应的权限,这一过程称为授权。授权后,用户就可以基于被授予的权限对云服务进行操作。 如果云账号已经能满足您的要求,不需要创建独立的IAM用户进行权限管理,您可以跳过本章

  • 使用DIS采集增量驾驶行为日志数据 - 数据接入服务 DIS

    在左侧导航栏选择“桶列表”页签。 在右侧表格,“桶名称”列单击对应的桶名称,即申请DIS通道配置的“桶名称”。 在弹出的桶页面单击左侧导航栏“对象”页签,查看已上传的文件。 创建数据库 在Console页面上方菜单栏单击“产品”,单击“大数据”分类的“数据湖探索 DLI”。 创建d

  • 获取项目ID - 数据接入服务 DIS

    从控制台获取项目ID 在调用接口的时候,部分URL需要填入项目编号,所以需要获取到项目编号。项目编号获取步骤如下: 登录管理控制台。 单击用户名,在下拉列表单击“基本信息”。 在基本信息页面单击“管理我的凭证”。 在“API凭证”页面的项目列表查看项目ID。 图1 查看项目ID 父主题:

  • 添加转储任务 - 数据接入服务 DIS

    setDeliverTimeInterval(900); // 可选:在DIS管理页面自动创建名称为“dis_admin_agency”的IAM委托,默认采用此委托,用于授权访问。如未创建过IAM委托,请用主账户登录DIS控制台并创建通道,点击“添加转储任务”,前往授权。 descriptor

  • 步骤1:开通DIS通道 - 数据接入服务 DIS

    chema。 在左侧文本框输入JSON或者CSV格式的源数据样例,也可单击导入源数据样例。 在左侧文本框单击,可删除左侧文本框已输入或导入的源数据样例。 在左侧文本框单击,可在右侧文本框根据源数据样例生成Avro schema。 在右侧文本框单击,可删除已生成的Avro

  • 步骤4:从DIS获取数据 - 数据接入服务 DIS

    从DIS服务中下载数据。 样例代码 样例工程为DIS SDK桶中下载的“huaweicloud-sdk-dis-java-X.X.X.zip”压缩包“\dis-sdk-demo\src\main\java\com\bigdata\dis\sdk\demo”路径下“ConsumerDemo

  • 变更源数据类型 - 数据接入服务 DIS

    创建转储任务时再配置。您还可以在通道详情页面对已配置的源数据Schema进行修改。 使用注册账户登录DIS控制台。 单击管理控制台左上角的,选择区域和项目。 在左侧列表栏中选择“通道管理”。 单击需要查看的通道名称。进入所选通道的管理页面。 单击“源数据类型”后的,从下拉框中选择

  • 管理App - 数据接入服务 DIS

    App作为标识。 您可以创建App,也可进入通道管理页面,查看接入该通道的App详情。 创建App 使用注册账户登录DIS控制台。 单击管理控制台左上角的,选择区域和项目。 在左侧列表栏中选择“App管理”。 进入App管理页面,单击“创建App”,输入对应的名称,完成创建。 查看App

  • 事件通知概述 - 数据接入服务 DIS

    通道 警告 通道自动扩缩容失败 通道 警告 通道流量异常 通道 警告 通道流量恢复 下表显示了事件源类型为用户的事件。 表2 事件源类型为用户的事件 事件源类型 事件级别 事件 用户 警告 配额异常 下表显示了事件源类型为转储任务的事件。 表3 事件源类型为转储任务的事件 事件源类型

  • DIS有哪些功能 - 数据接入服务 DIS

    完成数据面资源的申请与自动部署。 服务数据面 接收用户发送数据的请求,对已鉴权的数据接收并存储。 接收用户获取数据的请求,在鉴权后输出对应的用户数据。 按时老化存储在系统的用户数据。 根据用户配置,将用户数据存储到对象存储服务(Object Storage Service,简称OBS)、MapReduce服务(MapReduce

  • 数据下载的消费模式 - 数据接入服务 DIS

    认证用的ak和sk直接写到代码中有很大的安全风险,建议在配置文件或者环境变量密文存放,使用时解密,确保安全; // 本示例以ak和sk保存在环境变量来实现身份验证为例,运行本示例前请先在本地环境设置环境变量HUAWEICLOUD_SDK_AK和HUAWEICLOUD_SDK_SK

  • 安装前准备 - 数据接入服务 DIS

    确认有通道用于数据上传且通道状态为“运行”。 检查认证信息 检查AK/SK AK/SK (Access Key ID/Secret Access Key)是用户调用接口的访问密钥。 检查项目ID ProjectID表示租户的资源,每个Region都有一个唯一的项目ID。可在页面查看不同Region对应的项目ID值。

  • 添加DWS转储任务 - 数据接入服务 DIS

    dws_delimiter 是 String 用户数据的字段分隔符,根据此分隔符分隔用户数据插入DWS数据表的相应列。 取值范围:“,”、“;”和“|”三种字符的一个。 user_name 是 String 存储该通道数据的DWS数据库的用户名。 user_password 是 String

  • 基本概念 - 数据接入服务 DIS

    租户实时数据的集合,创建通道时指定。在用户发送或者接收实时数据时,需要指定通道名称。 分区数:分区(Partition)是DIS数据通道的基本吞吐量单位。创建数据通道时,您将指定所需的分区数量。 记录:记录(Record)是存储在DIS通道的数据单元。记录由序列号、分区键和数据