已找到以下 60 条记录
产品选择
数据接入服务 DIS
没有找到结果,请重新输入
产品选择
数据接入服务 DIS
产品选择
没有找到结果,请重新输入
  • 通道列表简介 - 数据接入服务 DIS

    分区数量:分区是DIS数据通道基本吞吐量单位。通道多个分区可以并发进行数据传输,以提升效率。 源数据类型:BLOB、JSON、CSV。 生命周期(小时):存储在DIS中数据保留最长时间,超过此时长数据将被清除。取值范围:24~72整数。单位:小时。 创建时间:显示通道创建时间。格式为:yyyy/MM/dd

  • 应用场景 - 数据接入服务 DIS

    应用场景 实时数据处理 实时收集城市各交通枢纽车辆通行数据,缓存在通道中,分析平台周期读取通道中数据分析后将结果应用到调度系统,实现对停车场开放时长和交通资源调配。 1 场景示例 实时文件传输 实时检测客户应用系统中产生文件,并采集上传到云上,进行离线分析、存储查询及

  • 管理通道标签 - 数据接入服务 DIS

    以及每个标签键和值。 添加 单击左上角“添加标签”,在弹出“添加标签”窗口,输入新添加标签键和值,并单击“确认”。 修改 单击标签所在行“操作”列下“编辑”,在弹出“编辑标签”窗口,输入修改后标签值,并单击“确认” 删除 单击标签所在行“操作”列下“删除”,如果

  • 如何开通DIS通道? - 数据接入服务 DIS

    存储在DIS中数据保留最长时间,超过此时长数据将被清除。 取值范围:24~72整数。 24 源数据类型 BLOB:存储在数据库管理系统中一组二进制数据。“源数据类型”选择“BLOB”,则支持“转储服务类型”为“OBS”、“MRS”。 JSON:一种开放文件格式,以易读文字为

  • 步骤1:开通DIS通道 - 数据接入服务 DIS

    存储在DIS中数据保留最长时间,超过此时长数据将被清除。 取值范围:24~72整数。 24 源数据类型 BLOB:存储在数据库管理系统中一组二进制数据。“源数据类型”选择“BLOB”,则支持“转储服务类型”为“OBS”、“MRS”。 JSON:一种开放文件格式,以易读文字为

  • 步骤1:开通DIS通道 - 数据接入服务 DIS

    存储在DIS中数据保留最长时间,超过此时长数据将被清除。 取值范围:24~72整数。 24 源数据类型 BLOB:存储在数据库管理系统中一组二进制数据。“源数据类型”选择“BLOB”,则支持“转储服务类型”为“OBS”、“MRS”。 JSON:一种开放文件格式,以易读文字为

  • 添加CloudTable转储任务 - 数据接入服务 DIS

    存储该通道数据HBase表数据列族名称。 column_name 是 String 存储该通道数据HBase表数据列名称。 取值范围:1~32,只能包含英文字母、数字和下划线。 value 是 String 通道内JSON数据JSON属性名,用于生成HBase数据列值。 type

  • 查询转储任务详情 - 数据接入服务 DIS

    存储该通道数据HBase表数据列族名称。 column_name String 存储该通道数据HBase表数据列名称。 取值范围:1~32,只能包含英文字母、数字和下划线。 value String 通道内JSON数据JSON属性名,用于生成HBase数据列值。 type

  • 添加DLI转储任务 - 数据接入服务 DIS

    说明: 仅支持数据位置为DLI表,且用户需具有该表插入权限。 obs_bucket_path 是 String 临时存储该通道数据OBS桶名称。 file_prefix 否 String 临时存储该通道数据OBS桶下自定义目录,多级目录可用“/”进行分隔,不可以“/”开头。

  • 使用DIS实时分析车辆位置 - 数据接入服务 DIS

    用户数据转储CloudTable服务失败时,是否将转储失败数据备份至OBS服务。 开启:是,转储失败数据备份至OBS服务。 关闭:否,转储失败数据不备份至OBS服务。 开关默认关闭。 说明: 关闭开关,转储失败数据会存储在DIS中,并在“生命周期”配置时间到达时将数据清除。 关闭 Row Key

  • 转储至DLI - 数据接入服务 DIS

    为DLI类型数据表,且用户需具有该表插入权限。 此配置项仅支持选择,不可手动输入。 配置此项必须已配置“DLI 数据库”。 偏移量 最新:最大偏移量,即获取最新有效数据。 最早:最小偏移量,即读取最早有效数据。 最新 数据转储周期 根据用户配置时间,周期性将数据导入目

  • 添加MRS转储任务 - 数据接入服务 DIS

    存储该通道数据MRS集群ID。 mrs_hdfs_path 是 String 存储该通道数据MRS集群HDFS路径。 file_prefix 否 String 临时存储该通道数据OBS桶下自定义目录,多级目录可用“/”进行分隔,不可以“/”开头。 取值范围:英文字母、数字、下划线和斜杠,最大长度为50个字符。

  • 添加DWS转储任务 - 数据接入服务 DIS

    用户数据的字段分隔符,根据此分隔符分隔用户数据插入DWS数据表相应列。 取值范围:“,”、“;”和“|”三种字符中一个。 user_name 是 String 存储该通道数据DWS数据库用户名。 user_password 是 String 存储该通道数据DWS数据库密码。 kms_user_key_name

  • 数据接入服务 DIS - 数据接入服务 DIS

    生技术核心 GO语言深入之道 介绍几个Go语言及相关开源框架插件机制 跟唐老师学习云网络 唐老师将自己对网络理解分享给大家 智能客服 您好!我是有问必答知识渊博智能问答机器人,有问题欢迎随时求助哦! 社区求助 华为云社区是华为云用户聚集地。这里有来自容器服务技术牛人,为您解决技术难题。

  • 转储至MRS - 数据接入服务 DIS

    默认配置为300秒。 - 数据临时桶 用户数据先临时存储在OBS桶中,再转储到指定转储服务,转储完成后临时桶中数据会被清除。 - 数据临时目录 需要转储数据临时存储在OBS桶下此配置项配置目录中,转储完成后临时目录中数据会被清除。 配置为空时,数据直接存储在OBS桶内。 - 源数据类

  • 转储至OBS - 数据接入服务 DIS

    因数据转储成功后,存储目录结构取决于源数据时间戳和时间目录格式定义年月日层级。本示例中,时间目录格式精确到日,所以数据最终存储目录结构为“桶名称/转储文件目录/2010/10/12”。 源数据时间戳 时间戳属性名。 说明: 请输入您待上传源数据中定义时间戳对应字段名称。 时间戳的格式,从下拉框中选择。

  • 弹性伸缩分区 - 数据接入服务 DIS

    上传数据时,不建议设置数据PartitionKey,DIS会自动根据通道分区数量将数据均匀散列到多个分片中。如果设置数据PartitionKey,可能会导致数据倾斜,产生通道限流。 下载数据时,需要定期使用descriptStream接口检测通道分区数量变化,以便DIS可以下载到所有分区的数据。

  • 转储至DWS - 数据接入服务 DIS

    用户名 DWS集群用户名。 - 密码 DWS集群密码。 - KMS密钥 集群数据库加密密钥。 - 数据临时桶 用户数据先临时存储在OBS桶中,再转储到指定转储服务,转储完成后临时桶中数据会被清除。 - 数据临时目录 需要转储数据临时存储在OBS桶下此配置项配置目录中,转储完成后临时目录中的数据会被清除。

  • 配置Plugin - 数据接入服务 DIS

    单次调用DIS数据发送接口时数据集大小。 说明: “batchSize”表示一个事务批量值(如1000),而“sendingRecordSize”表示一个Rest请求批量值(如250表示会发起四次请求)。当“batchSize”数据全部发送成功之后,才会完成Flume事务,否则事务不

  • 构造请求 - 数据接入服务 DIS

    附加请求头字段,如指定URI和HTTP方法所要求字段。例如定义消息体类型请求头“Content-Type”,请求鉴权信息等。 详细公共请求消息头字段请参见表3。 表3 公共请求消息头 名称 描述 是否必选 示例 Host 请求服务器信息,从服务APIURL中获取。值为h