内容选择
全部
内容选择
内容分类
  • 学堂
  • 博客
  • 论坛
  • 开发服务
  • 开发工具
  • 直播
  • 视频
  • 用户
时间
  • 一周
  • 一个月
  • 三个月
  • 关于什么是云原生

    义。 同时,还有不少人将云原生与容器或基于Kubernetes的微服务混为一谈。还有云原生技术、云原生产品、云原生架构、云原生理念等看起来意思相近的词汇。那么云原生到底是什么?云原生会对我们的应用开发产生什么样的影响呢? 云原生可分解为“云”(Cloud)

    作者: 灵犀晨
    发表时间: 2021-10-15 09:24:57
    1711
    0
  • 步骤6:数据开发

    历史数据到源数据表,使用数据集成将历史数据从OBS导入到SDI贴源层的原始数据表。 历史数据清洗,使用数据开发的MRS Hive SQL脚本将源数据表清洗之后导入DWI层的标准出行数据表。 将基础数据插入维度表中。 将DWI层的标准出行数据导入DWR层的事实表中。

  • 步骤6:数据开发

    历史数据到源数据表,使用数据集成将历史数据从OBS导入到SDI贴源层的原始数据表。 历史数据清洗,使用数据开发的MRS Hive SQL脚本将源数据表清洗之后导入DWI层的标准出行数据表。 将基础数据插入维度表中。 将DWI层的标准出行数据导入DWR层的事实表中。

  • 发布数据

    发布数据集 企业A和大数据厂商B分别将自己的csv数据文件上传到自己的计算节点上,通过“数据管理”模块创建各自的数据集。 企业A的数据集如下: 大数据厂商B的数据集如下: 创建数据集后单击“发布”按钮即可将数据的元数据信息发布到tics联盟侧,供其他合作方参考。

  • 发布数据

    发布数据集 企业A和大数据厂商B分别将自己的csv数据文件上传到自己的计算节点上,通过“数据管理”模块创建各自的数据集。 企业A的数据集如下: 大数据厂商B的数据集如下: 创建数据集后单击“发布”按钮即可将数据的元数据信息发布到tics联盟侧,供其他合作方参考

  • 发布数据

    发布数据集 企业A将自己的需要预测的csv数据文件上传到自己的计算节点上,通过“数据管理”模块创建用于预测的数据集。 企业A预测数据集如下: 大数据厂商B仍使用训练时的提供的全量数据作为预测数据集,没有发布新的数据集。

  • 数据集发布

    数据发布的过程并不会直接从数据源中导出用户数据,仅仅是从数据源处获取了数据集相关的元数据信息,用于任务的解析、验证等。 父主题: 可验证代码示例

  • 发布数据

    发布数据集 企业B分别自己的csv数据文件上传到自己的计算节点上,通过“数据管理”模块创建各自的数据集,并点击“发布”。 企业B的数据集如下: 创建数据集后点击“发布”按钮即可将数据的元数据信息发布到tics联盟侧,供其他合作方参考。

  • 租户数据迁移

    租户数据迁移 当租户数据量增多,或者资源需求提升,目前资源环境不适合租户使用时,需要将租户数据从物理数据库中迁移。 行隔离-数据分片迁移 schema隔离-schema迁移 数据库隔离-整体数据迁移

  • 步骤2:数据开发

    选择对应工作空间的“数据开发”模块,进入数据开发页面。 图1 选择数据开发 图2 选择数据开发 创建一个DLI SQL脚本,以通过DLI SQL语句来创建数据表。

  • 步骤3:数据开发

    选择对应工作空间的“数据开发”模块,进入数据开发页面。 图1 选择数据开发 图2 选择数据开发 创建一个DWS SQL脚本,以通过DWS SQL语句来创建数据表。

  • 创建数据管道

    创建数据管道 在IoTA Console页面左侧导航栏,选择“数据管道”,在右侧点击“创建数据管道”按钮,如下图所示 在弹出对话框中输入"作业名称",选择数据源为“IoTDA类型的数据源”,比如"test-source" 默认创建的好的管道作业如下图所示:

  • 创建数据

    创建数据源 在IoTA Console页面左侧导航栏,选择“数据源”,在右侧选择“IoTDA实时数据源”,点击下方“添加数据源”按钮,如下图所示 在弹出对话框中输入"数据源名称", 选择“共享实例”,同时勾选“灯”产品类型,点击确定。 添加数据源后如下图所示:

  • 步骤5:数据架构

    行程记录 > 原始记录”,单击“逆向数据库”,通过逆向数据库,导入原始表。 逆向数据库依赖于数据资产采集,请您确保已对所需逆向的数据库完成数据资产采集。数据资产采集的具体操作,请参见步骤4:元数据采集。

  • 使用模板导入数据

    使用模板导入数据 功能介绍 按照所使用的模板格式导入数据。使用该功能前,需要创建好可使用的数据导入模板,在模板中定义数据的映射规则,调用接口时需指定模板名称,在该模板中,需要指定对应的操作脚本。因数据导入可能耗时较长,该接口不会立即返回导入结果。导入

  • ERP数据下发

    ERP数据下发 完成IT数采配置后,IoT边缘平台将采集到的ERP数据下发到MES子系统,您可以在MES子系统平台查看数据同步结果。 数据源下发 进入IoT边缘控制台,选择左侧导航栏“IoT边缘 > 边缘节点”进入页面,选择

  • 发布数据

    发布数据集 企业A和企业B分别将自己的csv数据文件上传到自己的计算节点上,通过“数据管理”模块创建各自的数据集,并单击“发布”。 以企业A为例,数据集信息如下: 隐私求交场景需要将求交的字段设置为“非敏感”的唯一标识。

  • 准备数据

    n代表寄存器类型) 单击鼠标右键,选择修改寄存器数据格式。(寄存器通过临接组合的方式表示复杂类型数据,协议为大端格式协议,寄存器内字节间与寄存器间顺序可交换。) 双击对应位置修改对应点位数据(可设置数据自动改变)。

  • 对接大数据平台

    对接大数据平台 支持的大数据平台简介 华为云MRS对接OBS Cloudera CDH对接OBS Hortonworks HDP对接OBS 父主题: 大数据场景下使用OBS实现存算分离

  • 对接大数据组件

    对接大数据组件 支持的大数据组件简介 Hadoop对接OBS Hive对接OBS Spark对接OBS Flume对接OBS DataX对接OBS Druid对接OBS Flink对接OBS