检测到您已登录华为云国际站账号,为了您更好的体验,建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
数据保护技术 需求管理通过多种数据保护手段和特性,保障数据安全可靠。 表1 需求管理的数据保护手段和特性 数据保护手段 简要说明 详细介绍 传输加密(HTTPS) 为保证数据传输的安全性,需求管理使用HTTPS传输数据。 构造请求 个人数据保护 通过控制个人数据访问权限以及记录操
数据看板 操作场景 应用运行态提供了数据看板功能,包含了“数据看板”和“数据详情”两大功能模块。本文指导您如何使用数据看板。 前提条件 已登录应用运行态。 操作步骤 在“首页 > 数据看板”页面,查看如下信息。 图1 数据看板(运行态) 数据看板:统计当前应用下“数据实例”、“数
从而精确优化数据质量,确保数据满足高标准,提升模型性能。 配比数据集 数据配比是将多个数据集按特定比例组合并发布为“发布数据集”的过程。通过合理的配比,确保数据集的多样性、平衡性和代表性,避免因数据分布不均而引发的问题。 流通数据集 数据流通是将单个数据集发布为特定格式的“发布数据集”,用于后续模型训练等操作。
义的序列号)所在的记录开始读取数据。此类型为默认游标类型。- AFTER_SEQUENCE_NUMBER:从特定序列号(即starting-sequence-number定义的序列号)后的记录开始读取数据。- TRIM_HORIZON:从最早被存储至分区的有效记录开始读取。例如,
使用Spark SQL作业分析OBS数据 DLI支持将数据存储到OBS上,后续再通过创建OBS表即可对OBS上的数据进行分析和处理。 本指导中的操作内容包括:创建OBS表、导入OBS表数据、插入和查询OBS表数据等内容来帮助您更好的在DLI上对OBS表数据进行处理。 前提条件 已创建O
数据集备份 功能介绍 为防止数据服务异常后用户数据丢失,数据服务通过该接口定期向数据集下发数据备份的命令,数据集受到备份的命令后以租户粒度将各租户下的数据备份。 URI URI格式 GET /softcomai/datalake/v1.0/datacatalog/backup/start
jsonl 训练NLP大模型所需数据量 使用数据工程构建盘古NLP大模型数据集进行模型训练时,所需数据量见表2。 表2 构建NLP大模型所需数据量 模型规格 训练类型 推荐数据量 最小数据量(数据条数) 单场景推荐训练数据量 单条数据Token长度限制 N1 微调 - 1000条/每场景
数据保护技术 开天集成工作台通过多种手段和特性,保障用户在使用开天集成工作台时的数据安全可靠。 表1 开天集成工作台的数据保护手段和特性 数据保护手段 说明 传输加密(HTTPS) 为保证数据传输的安全性,开天集成工作台对外提供的开放接口,均为HTTPS协议。 连接解密存储 用户
通过云连接实例和云专线实现云下数据中心与云上VPC互通 操作场景 本实践指导用户通过配置云专线和云连接实例,将多个数据中心网络连接起来,打通用户本地数据中心网络,实现云下多IDC与云上多区域VPC互通。 应用场景如图1所示。 云连接实例支持区域,请参见云连接实例支持区域。 图1 逻辑互联示意图
型数据等)之间的灵活、快速、无侵入式的数据集成,可以实现跨机房、跨数据中心、跨云的数据集成方案,并能自助实施、运维、监控集成数据。 例如集团企业场景中,企业与合作伙伴使用的数据源不一样,难以形成企业之间有效的信息传输。FDI提供了多种数据源之间转换的方式,支持MySQL、Kafka、API等主流格式之间的转换。
情,请参见数据仓库规格。 dws2.m6.4xlarge.8 热数据存储 每节点可用存储容量。 说明: 申请的存储空间会有必要的文件系统开销,这些开销包括索引节点,以及数据库运行必须的空间。存储空间的数值必须为100的整倍数。 界面上显示200GB/节点是用户的业务数据实际的存储
通过mongodump和mongorestore工具迁移数据 使用DRS服务迁移MongoDB数据库 全量+增量迁移 通过数据复制服务迁移数据 父主题: 数据迁移
信身份通过本地数据中心网络(可信网络)访问云资源的请求也会被拒绝,可信身份访问其他企业的对象存储桶(不可信资源)的请求还会被拒绝,只有可信身份通过本地数据中心网络(可信网络)访问本企业的云资源的请求是允许的。 图1 全方位数据边界 身份控制策略 身份控制策略是数据边界的第一道防线
详情”,查看订单详情。在订单详情页面,选择数据包创建脱敏作业,对数据包进行脱敏操作。 订单推送 订单推送会将数据包推送到数据服务,您可以到“ 数据处理 > 数据批导”中查看导入任务进度。 查询订单号 在“数据合规”订单列表页面,在搜索输入框中输入搜索条件,按回车键即可查询订单号。 创建脱敏作业 查看数据递送订单详
新界面,确保操作完成,再决定是否要进行备份。 如果在备份过程中对云桌面的数据进行删除等操作,被删除的文件可能不会被备份成功。为了保证数据完整性,建议备份完成后再对数据进行操作再重新执行备份。 父主题: 数据备份与恢复
接入IVM视频数据 使用视频智能分析服务的云上算法时,需要先把视频流纳管上IVM,并确保完成下列的准备工作。 注册华为账号并开通华为云 视频画面对算法处理起到关键作用,因此需确保接入的视频画面符合相应算法对视频画面的约束要求。 父主题: 使用云上入侵检测算法
使用DEW管理数据源访问凭证 使用DLI提交作业读写外部数据源数据时,需要妥善保存数据源的访问凭证确保数据源认证的安全性,便于DLI安全访问数据源。数据加密服务(Data Encryption Workshop, DEW)是一个综合的云上数据加密服务,为您解决数据安全、密钥安全、
大数据优化与提升服务优势? 华为数据治理和数字化运营,是华为数字化转型的关键,承接了打破数据孤岛、确保源头数据准确、促进数据共享、保障数据隐私与安全等目标。 华为数字化转型对数据治理有着明确清晰的要求: 基于统一的数据管理规则,保证数据源头质量以及数据入湖,形成清洁、完整、一致的数据湖。
数据保护技术 CodeArts TestPlan通过多种手段保护数据安全。 数据保护手段 简要说明 传输加密(HTTPS) 为保证数据传输的安全性,CodeArts TestPlan使用HTTPS传输数据。 个人数据保护 通过控制个人数据访问权限以及记录操作日志等方法防止个人数据泄露,保证您的个人数据安全。
指标数据保留多长时间? 指标数据分为原始指标数据和聚合指标数据。 原始指标数据是指原始采样指标数据,原始指标数据一般保留2天。 聚合指标数据是指将原始指标数据经过聚合处理后的指标数据,聚合指标数据保留时间根据聚合周期不同而不同,通过API获取的聚合指标数据保留时间如下: 表1 聚合指标数据保留时间