已找到以下 210 条记录
产品选择
数据接入服务 DIS
没有找到结果,请重新输入
产品选择
数据接入服务 DIS
产品选择
没有找到结果,请重新输入
  • 内容导航 - 数据接入服务 DIS

    SDK提供接口函数进行二次开发。 章节 内容 DIS SDK能做什么 内容导航 简要介绍DIS概念和DIS SDK概念。 SDK下载 兼容性 如何校验软件包完整性? 介绍使用DIS SDK进行二次开发过程中涉及到资源信息。 开通DIS服务 介绍DIS服务和DIS通道开通方式。

  • DIS SDK能做什么 - 数据接入服务 DIS

    Service Software Development Kit)是对DIS服务提供REST API进行封装,以简化用户开发工作。用户直接调用DIS SDK提供接口函数即可实现使用DIS服务业务能力目的。 父主题: 简介

  • 管理企业项目 - 数据接入服务 DIS

    面查看通道关联企业项目。用户只能查询到有访问权限项目下通道资源。 在通道管理页面的列表中,查看通道所属企业项目。 图1 查看企业项目 在通道列表中,单击通道名称,进入通道“基本信息”页面,可以查看与通道关联企业项目。单击企业项目的名称,可以跳转到企业管理控制台页面对该企业项目进行查看或编辑。

  • 区域和可用区 - 数据接入服务 DIS

    中国大陆地区用户。如果您或者您目标用户在中国大陆,使用这些区域会有较长访问时延,不建议使用。 在除中国大陆以外亚太地区有业务用户,可以选择“亚太-曼谷”或“亚太-新加坡”区域。 在非洲地区有业务用户,可以选择“南非-约翰内斯堡”区域。 在欧洲地区有业务用户,可以选择“欧洲-巴黎”区域。

  • 变更源数据类型 - 数据接入服务 DIS

    单击需要查看通道名称。进入所选通道管理页面。 单击“源数据类型”后,从下拉框中选择对应源数据类型,可修改创建通道时已设置源数据类型。或者选择待修改源数据类型通道对应操作列,选择“更多 > 变更源数据类型”,弹出变更源数据类型对话框,修改创建通道时已设置源数据类型。

  • 弹性伸缩分区 - 数据接入服务 DIS

    上传数据时,不建议设置数据PartitionKey,DIS会自动根据通道分区数量将数据均匀散列到多个分片中。如果设置数据PartitionKey,可能会导致数据倾斜,产生通道限流。 下载数据时,需要定期使用descriptStream接口检测通道分区数量变化,以便DIS可以下载到所有分区的数据。

  • 如何校验软件包完整性? - 数据接入服务 DIS

    对软件包完整性进行校验。 前提条件 已获取“PuTTY”工具。 已获取“WinSCP”工具。 操作步骤 使用“WinSCP”工具将“huaweicloud-sdk-dis-x.x.x.zip”上传至Linux系统任一目录。 x.x.x表示DIS SDK包版本号。 使用“PuT

  • 构造请求 - 数据接入服务 DIS

    e[:port]。端口缺省时使用默认端口,https默认端口为443。 否 使用AK/SK认证时该字段必选。 code.test.com or code.test.com:443 Content-Type 发送实体MIME类型。推荐用户默认使用application/js

  • 调试通道 - 数据接入服务 DIS

    单击“下载”,选择游标类型并输入对应序列号,确认完成。下载成功后,您可以文本形式获取响应体。 输入序列号,需要在分区数据有效范围内。分区数据有效范围,可以通过调用describeStream(查询通道详情)接口获取,其sequenceNumberRange代表数据有效范围,第一个值为最老数据sequ

  • 新增转储任务 - 数据接入服务 DIS

    GMT+08:00 状态 日志转储状态。 已完成 失败 异常 读取记录数 从通道内读取用户记录数。 写入记录数 写入目标服务(如MRS)记录数,例如通道内一条用户记录可能转换为多条记录写入MRS服务opentsdb。 转储文件名 转储到目标服务文件名称。 从通道内读取用户记录会写入文

  • 基本概念 - 数据接入服务 DIS

    数据块是您数据生产者添加到数据通道重要数据。数据块最大尺寸(Base64编码前数据有效载荷)是1MB。 序列号:序列号是每个记录唯一标识符。序列号由DIS在数据生产者调用PutRecord操作以添加数据到DIS数据通道时DIS服务自动分配。同一分区键序列号通常会随

  • 删除通道 - 数据接入服务 DIS

    通道删除后不再收取费用,也无法恢复,请谨慎操作。 使用注册账户登录DIS控制台。 单击管理控制台左上角,选择区域和项目。 在左侧列表栏中选择“通道管理”。 在需要删除通道中单击操作列“删除”,弹出“删除DIS通道”对话框。 单击“确认”,删除选中通道。 父主题: 管理通道

  • 查询转储任务详情 - 数据接入服务 DIS

    ProcessingSchema object 根据源数据时间戳和已配置"partition_format"生成对应转储时间目录。将源数据时间戳使用“yyyy/MM/dd/HH/mm”格式生成分区字符串,用来定义写到OBSObject文件所在目录层次结构。 record_delimiter

  • 授权管理 - 数据接入服务 DIS

    授权管理 通过添加授权策略,可实现被授权其他用户拥有DIS通道上传和下载权限。 使用注册账户登录DIS控制台。 单击管理控制台左上角,选择区域和项目。 在左侧列表栏中选择“通道管理”。 单击通道名称,进入所选通道管理页面。 选择“授权管理”,单击“添加授权策略”, 选择授

  • 添加DLI转储任务 - 数据接入服务 DIS

    Administrator”。如果已经创建过委托,可以使用IAM服务提供查询委托列表接口,获取有效可用委托名称。取值范围:长度不超过64位,且不可配置为空。如果有在Console控制台使用转储任务,会提示自动创建委托,自动创建委托名称为:dis_admin_agency 最大长度:64

  • 状态码 - 数据接入服务 DIS

    个资源特征与地址列表用于用户终端(例如:浏览器)选择。 301 Moved Permanently 永久移动,请求资源已被永久移动到新URI,返回信息会包括新URI。 302 Found 资源被临时移动。 303 See Other 查看其它地址。 使用GET和POST请求查看。

  • 转储至MRS - 数据接入服务 DIS

    默认配置为300秒。 - 数据临时桶 用户数据先临时存储在OBS桶中,再转储到指定转储服务,转储完成后临时桶中数据会被清除。 - 数据临时目录 需要转储数据临时存储在OBS桶下此配置项配置目录中,转储完成后临时目录中数据会被清除。 配置为空时,数据直接存储在OBS桶内。 - 源数据类

  • 自动创建委托 - 数据接入服务 DIS

    Insight,简称DLI)中,需要通过创建IAM委托授权DIS服务去访问用户OBS、MRS、DWS或DLI资源。 使用账号首次进入界面添加转储任务时,系统会自动弹出创建委托界面。 单击 “同意授权”则平台会自动创建委托。 委托授权成功后,隶属于该账号下IAM子用户也可添加转储任务。

  • 自动创建委托 - 数据接入服务 DIS

    Insight,简称DLI)中,需要通过创建IAM委托授权DIS服务去访问用户OBS、MRS、DWS或DLI资源。 使用账号首次进入界面添加转储任务时,系统会自动弹出创建委托界面。 单击 “同意授权”则平台会自动创建委托。 委托授权成功后,隶属于该账号下IAM子用户也可添加转储任务。 父主题: 入门

  • 添加MRS转储任务 - 数据接入服务 DIS

    Administrator”。如果已经创建过委托,可以使用IAM服务提供查询委托列表接口,获取有效可用委托名称。取值范围:长度不超过64位,且不可配置为空。如果有在Console控制台使用转储任务,会提示自动创建委托,自动创建委托名称为:dis_admin_agency 最大长度:64