已找到以下 100 条记录
AI智能搜索
产品选择
数据接入服务 DIS
没有找到结果,请重新输入
产品选择
数据接入服务 DIS
在搜索结果页开启AI智能搜索
开启
产品选择
没有找到结果,请重新输入
  • 使用SDK(Python) - 数据接入服务 DIS

    使用SDK(Python) 准备环境 配置样例工程 初始化DIS客户端 创建通道 添加转储任务 删除通道 删除转储任务 查询通道列表 查询转储列表 查询通道详情 查询转储详情 Json格式上传流式数据 Protobuf格式上传流式数据 下载流式数据 创建APP 删除APP 查询APP详情

  • 使用SDK(Java) - 数据接入服务 DIS

    使用SDK(Java) 准备环境 配置样例工程 初始化DIS客户端 创建通道 添加转储任务 更新转储任务 删除转储任务 查询转储列表 查询转储详情 删除通道 查询通道列表 查询通道详情 下载流式数据 上传流式数据 获取数据游标 创建APP 删除APP 新增Checkpoint 查询Checkpoint

  • DIS SDK能做什么 - 数据接入服务 DIS

    Service)为处理或分析流数据自定义应用程序构建数据流管道,主要解决云服务外数据实时传输到云服务内问题。数据接入服务每小时可从数十万种数据源(如日志和定位追踪事件、网站点击流、社交媒体源等)连续捕获、传送和存储数TB数据。 云服务实现了多地域部署基础设施,具备高度可扩展性和可靠性,

  • DIS有哪些特点和优势? - 数据接入服务 DIS

    无限扩展:DIS数据通道吞吐量每小时可从数MB扩展到数TB,PUT记录每秒钟可从数千次扩展到数百万。 易于使用:您可以几秒钟内创建DIS数据通道,轻松地将数据放入通道,并构建用于数据处理应用程序。 成本低廉:DIS没有前期成本,您只需要为实际使用资源付费即可。 并行处理

  • 修订记录 - 数据接入服务 DIS

    小文件功能下线,删除“创建源数据类型是FILE通道”。 2019-07-03 第十九次正式发布: Java SDK不兼容原生Kafka客户端,删除“连接Kafka consumer”。 2019-05-14 第十八次正式发布: 支持使用SDK实现数据加密上传下载,修改初始化DIS客户端。

  • 上传数据 - 数据接入服务 DIS

    sequence_number String 数据上传到序列号。序列号是每个记录唯一标识符。序列号由DIS在数据生产者调用PutRecords操作以添加数据到DIS数据通道时DIS服务自动分配。同一分区键序列号通常会随时间变化增加。PutRecords请求之间时间段越长,序列号越大。 error_code

  • 获取数据游标 - 数据接入服务 DIS

    mber定义序列号)所在记录开始读取数据。此类型为默认游标类型。- AFTER_SEQUENCE_NUMBER:从特定序列号(即starting-sequence-number定义序列号)后记录开始读取数据。- TRIM_HORIZON:从最早被存储至分区有效记录开始读

  • 自定义Flink Streaming作业 - 数据接入服务 DIS

    String region; // // 认证用ak和sk硬编码到代码或者明文存储都有很大安全风险,建议配置文件或者环境变量密文存放,或者使用交互方式式传参,确保安全; // 本示例以交互式方式。

  • 管理企业项目 - 数据接入服务 DIS

    已开通企业项目服务的用户,可以使用企业项目管理华为云上云服务资源。 绑定企业项目 用户可以创建通道时为通道选择所属企业项目,从而将DIS通道与企业项目进行关联,详情请参见步骤1:开通DIS通道。选择“企业项目”下拉列表,将显示用户企业项目服务已创建项目。系统还内置了一个缺省企业项目“defau

  • 转储至MRS - 数据接入服务 DIS

    - 数据临时桶 用户数据先临时存储OBS桶,再转储到指定转储服务,转储完成后临时桶数据会被清除。 - 数据临时目录 需要转储数据临时存储OBS桶下此配置项配置目录,转储完成后临时目录数据会被清除。 配置为空时,数据直接存储OBS桶内。 - 源数据类型JSO

  • 应用示例 - 数据接入服务 DIS

    息头中。 IAM获取tokenAPI DIS创建通道API 前提条件 您需要规划数据接入服务所在区域信息,并根据区域确定调用APIEndpoint。 终端节点(Endpoint)即调用API请求地址,不同服务不同区域终端节点不同。本服务Endpoint您可以从终端节点Endpoint获取。

  • 转储至DLI - 数据接入服务 DIS

    - 数据临时桶 用户数据先临时存储OBS桶,再转储到指定转储服务,转储完成后临时桶数据会被清除。 - 数据临时目录 需要转储数据临时存储OBS桶下此配置项配置目录,转储完成后临时目录数据会被清除。 配置为空时,数据直接存储OBS桶内。 - 父主题: 管理转储任务

  • 弹性伸缩分区 - 数据接入服务 DIS

    选择如下任意一种方法进行手动扩缩容。 左侧列表栏中选择“通道管理”。 “通道管理”页面单击需要扩缩容通道名称。 通道详情页面的右上角单击“扩缩容”按钮,弹出“变更分区数目”对话框。 修改“目标分区数”,单击“确认”。 左侧列表栏中选择通道管理。 针对待扩缩容通道,选中“操作”列“更多”下拉列表中的“扩缩容”。

  • 准备环境 - 数据接入服务 DIS

    善保管。 检查项目ID 项目ID表示租户资源,账号ID对应当前账号,IAM用户ID对应当前用户。用户可在对应页面下查看不同Region对应项目ID、账号ID和用户ID。 注册并登录管理控制台。 在用户名下拉列表单击“我的凭证”。 “API凭证”页面,查看账号名和账号ID

  • 基本概念 - 数据接入服务 DIS

    账号 用户注册时账号,账号对其所拥有的资源及云服务具有完全访问权限,可以重置用户密码、分配用户权限等。由于账号是付费主体,为了确保账号安全,建议您不要直接使用账号进行日常管理工作,而是创建用户并使用他们进行日常管理工作。 用户 由账号IAM创建用户,是云服务使用人员,具有身份凭证(密码和访问密钥)。

  • 准备环境 - 数据接入服务 DIS

    善保管。 检查项目ID 项目ID表示租户资源,账号ID对应当前账号,IAM用户ID对应当前用户。用户可在对应页面下查看不同Region对应项目ID、账号ID和用户ID。 注册并登录管理控制台。 在用户名下拉列表单击“我的凭证”。 “API凭证”页面,查看账号名和账号ID

  • 获取项目ID - 数据接入服务 DIS

    } 从控制台获取项目ID 调用接口时候,部分URL需要填入项目编号,所以需要获取到项目编号。项目编号获取步骤如下: 登录管理控制台。 单击用户名,在下拉列表单击“基本信息”。 基本信息页面单击“管理我的凭证”。 “API凭证”页面的项目列表查看项目ID。 图1 查看项目ID

  • 删除通道 - 数据接入服务 DIS

    通道删除后不再收取费用,也无法恢复,请谨慎操作。 使用注册账户登录DIS控制台。 单击管理控制台左上角,选择区域和项目。 左侧列表栏中选择“通道管理”。 需要删除通道单击操作列“删除”,弹出“删除DIS通道”对话框。 单击“确认”,删除选中通道。 父主题: 管理通道

  • 获取认证信息 - 数据接入服务 DIS

    获取项目ID和账号ID 项目ID表示租户资源,账号ID对应当前账号,IAM用户ID对应当前用户。用户可在对应页面下查看不同Region对应项目ID、账号ID和用户ID。 注册并登录管理控制台。 在用户名下拉列表单击“我的凭证”。 “API凭证”页面,查看账号名和账号ID

  • 步骤3:发送数据到DIS - 数据接入服务 DIS

    Insight,简称DLI),具体存储位置新增转储任务“数据转储”配置。 DIS为临时存储器,存储DIS数据最长保留时间为3配置“生命周期”值。 样例代码 样例工程为DIS SDK桶中下载“huaweicloud-sdk-dis-java-X.X.X.zip”压缩包“\dis-sdk