检测到您已登录华为云国际站账号,为了您更好的体验,建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
作业发起方配置TICS的横向联邦学习作业,启动训练; 模型参数、梯度数据在TICS提供的安全聚合节点中进行加密交换; 训练过程中,各参与方计算节点会在本地生成子模型,由TICS负责安全聚合各子模型的参数,得到最终的模型; 空间的整体配置通过空间管理员进行统一管理。 父主题: 横向联邦学习场景
算节点发布的数据集。 创建训练模型时参数必须有"save_format": "SAVED_MODEL"。 创建联邦预测作业 实时预测作业在本地运行,目前仅支持深度神经网络FiBiNet算法。 用户登录进入计算节点页面。 在左侧导航树上依次选择“作业管理 > 联邦预测”,打开联邦预测作业页面。
避免作业名重复。 必须选择一个已有模型才能创建批量预测作业。 批量预测作业必须选择一个当前计算节点发布的数据集。 创建联邦预测作业 批量预测作业在本地运行,目前支持XGBoost算法、逻辑回归LR算法、深度神经网络FiBiNet算法。 用户登录进入计算节点页面。 在左侧导航树上依次选择“作业管理
ORACLE--ORACLE数据类型 6.LOCAL_CSV--本地数据类型 ag_dataset_table AgDatasetTableVo object 数据集表信息 ag_dataset_local AgDatasetLocalVo object 本地数据集信息 ext_columns Array
result_storage_region_name String 结果所在region name,最大长度128 obs_path String obs/本地文件路径,最大长度256 counter_map Map<String,Integer> 实例统计,最大长度1024 请求示例 查询学习类型作业执行结果
fl作业类型枚举。TRAIN(训练),EVALUATE(评估)。 hfl_platform_type 否 String 联邦学习运行平台枚举值。LOCAL(本地),MODEL_ARTS(modelarts) agent_id 是 String 作业发起可信计算节点id,最大32位,由字母和数字组成
> 数据交换”,在可信数据交换页面,查看交换作业的执行情况。 单击“下载”,即可使用数据。 数据交换作业执行完成后可以进行下载,将文件保存到本地。如有必要,下载时还需要填写公司A制定的自定义限制。 图5 下载合约 父主题: 可信数据交换场景
DEPLOYING, TERMINATING; data_count Long 样本对齐数据量 obs_path String obs/本地文件路径 start_time String 开始时间 end_time String 结束时间 result_ext String 样本对齐结果
上传签名证书文件(选择按照启用区块链审计服务(可选)章节步骤七描述中保存至本地的证书文件“/msp/signcert/xxx.pem”)。 区块链私钥文件 - 上传私钥证书文件(选择按照启用区块链审计服务(可选)章节步骤七描述中保存至本地的证书文件“/msp/keystore/xxx_sk”) 表2
10 11 12 13 14 15 16 17 18 19 20 21 22 23 24 25 26 27 28 29 准备本地多方安全计算数据资源 本地多方安全计算数据目前仅支持csv格式的文本文件。以下示例中如果没有特别说明,一般都是CSV格式的文件。 例如,数据表中有三列字段:
上传签名证书文件(选择按照启用区块链审计服务(可选)章节步骤七描述中保存至本地的证书文件“/msp/signcert/xxx.pem”)。 区块链私钥文件 - 上传私钥证书文件(选择按照启用区块链审计服务(可选)章节步骤七描述中保存至本地的证书文件“/msp/keystore/xxx_sk”) 表2
用户从“前往购买计算节点”进入部署页面则无需该操作。 其它情况下需在TICS“通知管理”页面,单击“下载计算节点配置”,得到agentConfig.zip文件,本地解压后,导入json文件,空间配置信息将会自动填充到“区域”(league_region_name)、“空间名称”(league_name
上传签名证书文件(选择按照启用区块链审计服务(可选)章节步骤七描述中保存至本地的证书文件“/msp/signcert/xxx.pem”)。 区块链私钥文件 - 上传私钥证书文件(选择按照启用区块链审计服务(可选)章节步骤七描述中保存至本地的证书文件“/msp/keystore/xxx_sk”) 表2
nat_id String 可信节点使用的网关的Id storage_mount_type String 可信节点使用的存储方式,HOST_PATH本地存储,OBS对象云存储,SFS_TURBO极速文件存储 表5 TicsAgentDeployBcs 参数 参数类型 描述 agent_id
发布后可在“数据管理>数据创建”页面查看生成的数据集。 图8 查看生成的数据集 (可选)单击作业列表中对应作业的“更多>下载参数配置”,下载本地文件。文件包含字段在作业开发页面使用预处理方法及参数,便于后期线下处理数据。 评估/预测数据预处理 参考创建数据预处理作业,在“数据管理>
进行秘密分享加密。 “隐私保护等级”设置为高级别后,参与2方计算的join字段会使用psi算法输出碰撞的密文数据。 由于本地数据集不支持统计信息上报,因此本地数据集不支持差分隐私功能。 创建多方安全计算作业 用户登录进入计算节点页面。 在左侧导航树上依次选择“作业管理 > 多方安全计算”,打开多方安全计算页面。
1.1 可信节点端口 31000 用户名 TICS可信节点用户名。 admin 密码 用户密码。 123456 MySQL数据库 IP地址 本地的MySQL数据库的IP地址,且该地址允许可信节点所在虚机通过此IP访问。 1xx.1.1.1 端口 MySQL数据库的端口。 3306 驱动文件
纵向联邦作业XGBoost算法只支持两方参与训练。 训练作业必须选择一个当前计算节点发布的数据集。 作业创建者的数据集必须含有特征。 创建纵向联邦学习作业 纵向联邦学习作业在本地运行,目前支持XGBoost算法、逻辑回归LR算法和FiBiNET算法。 纵向联邦学习分为五个步骤:数据选择、样本对齐(可选)、特征选择(可选)、模型训练、模型评估。
String 作业描述 ext String 参数等额外信息 hfl_platform_type String 联邦学习运行平台枚举值。LOCAL本地 hfl_type String FL作业类型枚举。TRAIN训练,EVALUATE评估 is_single_predict Boolean
create_time String 创建时间 data_type String 数据类型,DWS.DWS类型数据集,LOCAL_CSV.本地文件类型数据集,MRS.HIVE类型数据集,MYSQL.MySql类型数据集,ORACLE.Oracle类型数据集,RDS.RDS类型数据集