检测到您已登录华为云国际站账号，为了您更好的体验，建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
检测到您已登录华为云国际站账号，为了您更好的体验，建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
数据格式规范 推荐系统OBS文件夹规范 离线数据源 实时日志 全局特征信息文件 父主题： 用户指南（旧版）
用于存放全局特征文件，例如放入名为“global_feature_info.json”的文件。 │ obs-general-data 用于存放经过特征工程处理的宽表，又名通用格式数据。 │ obs-pretrain-data 用于存放排序预处理任务生成的预训练数据。 │ obs-error-data
全局特征信息文件 在特征工程、在线模块，近线模块时都会用到该全局的特征信息文件。当上传的数据中的特征有变化时，用户需要同步更新该文件。该文件为JSON格式，包含特征名、特征大类、特征值类型。 表1 全局特征信息文件字段描述 字段名 类型 描述 是否必选 user_features
宽表条目数，行为数据去重以后的数目。 user_complete_degree Double 用户齐全度，一条行为中的用户是否在产生这条行为的时候拥有画像。 item_complete_degree Double 物品齐全度，一条行为中的物品是否在这条行为产生的时候拥有画像。 bhv_count
程将对应的数据写入到画像中，同时用于排序训练和线上推理服务中使用。 文件数据信息请参见全局特征信息文件数据格式。 当上传的数据中的特征有变化时，用户需要同步更新该文件。该文件为JSON格式，包含特征名、特征大类、特征值类型。 数据源 数据在OBS的存放路径。 “初始格式”：包括离
行为发生的位置和精度维度。 格式：[latitude, longitude] 否 context String 动作发生的上下文信息，内容为json格式字符串，也可作为行为表的扩展字段。 例如，用户当前的设备id，ip地址等信息。 否 subSite String 行为发生的位置I
数据源的数据格式和近线数据导入的格式要求一致，包括用户数据、物品数据和行为数据。 用户数据 用户数据包括数据源中的“用户属性表”和用于近线计算的“用户画像”数据。用户数据记录用户的属性信息，例如地域、爱好等。 物品数据 物品数据包括数据源中的“物品属性表”和用于近线计算的“物品画
实时日志 RES根据实时发送到DIS上的日志，进行数据计算和处理，更新用户的相关数据。用户发送到DIS上的数据具体如下： 实时行为日志 实时行为日志的作用包括： 更新用户的兴趣标签。 记录所选行为类型的历史记录。 更新用户的上下文信息。 召回候选集。 表1 实时行为日志字段描述 字段名
管理属性配置 属性配置以键值对的方式进行存储，配置后的配置项可以用于整个服务。该配置项的值为用户指定的OBS路径，OBS相关操作请参见创建OBS桶。 前提条件 已开通OBS服务，并按照推荐系统OBS文件夹规范建议格式创建文件夹。 已上传离线数据。 创建场景 您可以根据自己的业务创建场景进行配
Service，简称OBS）存储RES的推荐数据源，实现安全、高可靠和低成本的存储需求。OBS的更多信息请参见《对象存储服务文档》。 数据接入服务 数据接入服务（Data Ingestion Service，简称DIS）提供推荐数据源的实时日志。DIS的更多信息请参见《数据接入服务文档》。
用户操作行为表：初始数据中的用户操作行为表。 “通用格式” 通用格式数据：特征工程“初始用户画像-物品画像-标准宽表生成”算子生成的用户推荐系统的数据。从用户特征表、物品特征表以及用户行为表中提取用户、物品特征和用户行为，并生成json数据，即内部通用格式。 数据时间范围 被统计数据的起始时间和终止时间。
文件数据信息请参见全局特征信息文件。 当上传的数据中的特征有变化时，用户需要同步更新该文件。该文件为JSON格式，包含特征名、特征大类、特征值类型。 通用格式数据源根路径 通用格式生成所在的根目录，即用户提交初始初始用户画像-物品画像-标准宽表生成或基于行为数据的用户画像更新时所提供的结果保存路径。 行为起止日期
itemType String 物品的类型。 是 itemId String 对应行为发生的对象的值。如果是和物品发生关系，则是物品的id(itemId)的值。 是 actionType String 行为类型，包括正向行为和负向行为。下面为预置的行为类型和对应的权重，权重有默认分数，默认
数据源功能可以在用户上传数据后，将离线数据源经过数据特征抽取，生成推荐系统内部通用的数据格式。经过数据质量检测来确保数据的合法性。提供数据源智能检测，输出数据分布和数据质量信息等，智能完成特征工程。 智能场景 根据业务场景选择对应的智能推荐场景，快速搭建专属推荐系统。主要应用为猜你喜欢、关联推荐、热门推荐。
荐系统内部通用的数据格式。经过数据质量检测来确保数据的合法性。 数据结构介绍 数据结构步骤的主要目的是读取用户上传的离线数据，解析用户特征和物品特征中每一个属性的数据格式、统计所有行为，然后保存解析生成的数据格式。 前提条件 已按照创建离线数据源操作指导完成数据源的创建。 操作步骤
默认召回策略的名称 数据源 数据源类型有初始格式和通用格式2种可选。 初始格式 用户操作行为表：单击选择OBS中存储的用户操作行为表。当选择数据格式为csv时，根据情况单击设置数据参数。 通用格式 通用格式数据：特征工程“初始用户画像-物品画像-标准宽表生成”算子生成的用户推荐系统
会自动生成一个JSON格式的配置源文件，该文件存储在指定的OBS路径中，计算引擎可以通过读取配置源文件来进行离线计算。 资源名，指定DLI运行作业的资源规格。 存储平台 服务名称，CloudTable作为存储平台，用于用户推荐在线数据和推荐候选集的存储。 集群名称，选择“资源中心”绑定的CloudTable集群名称。
离线数据和近线实时数据如何配合使用？ 在推荐系统初始化阶段，需要用户提供批量的离线数据源并按照推荐系统要求的数据格式上传至OBS，完成数据的检测和导入。 近线实时数据源推荐使用RES SDK上传，此操作所有的数据更新都是实时生效的。 父主题： 数据源
数据导入即读取经过“数据结构”生成的数据，对每条数据进行校验。推荐系统保留字段需校验类型和数据合法性、自定义字段校验类型，输出错误报告。如果数据完全符合要求，会生成推荐系统所需要的宽表和画像数据。 宽表：推荐系统内部格式，以行为数据为主，将行为数据中涉及到的用户数据和物品数据整合成一条数据。
特征名称：值为时间戳(10位)的特征的名称，任务会根据此特征对候选集进行排序。 推荐天数：推荐数据的时间段，该时间段从当前开始往前推N天，默认15天。 默认热度排序。 候选集最大长度 生成候选集的最大长度，每次计算更新的候选集中的个数不会超过最大值。 默认50。 候选集的召回策略 召回候选集的策略。
长按/截图保存，微信识别二维码
或者关注公众号“华为云”
