已找到以下 10000 条记录。
  • 方案概述

    方案概述 应用场景 开发者在数据库迁移上云时,其中最关键的一步是做对标源实例规格评估,以及迁移风险预警,使用以往的方式进行人工评估需要频繁沟通,耗时耗力,并且容易出现人工误差,导致评估规格不准确,给开发者造成损失。 本文介绍RDA平台自动大数

  • 方案概述

    格由平台功能能力计算。 方案架构 图1 RDA平台调用RabbitMq通信示意图 图1 RDA评估逻辑图 方案优势

  • 数据中台建设(六):数据体系建设

    数据体系建设 点击并拖拽以移动点击并拖拽以移动​ 数据中台是企业数据汇集地,但并不是简单的数据堆积,而是进行分层建模,数据体系建设最终呈现一套完整、规范、准确的数据数据体系建设就是大数据中数据仓库建设。如下图: 点击并拖拽以移动点击并拖拽以移动​ 贴源数据层ODS(Operational

    作者: Lansonli
    发表时间: 2022-05-05 02:10:07
    1300
    1
  • 方案概述

    方案概述 应用场景 Redis的key是常规检验的指标之一,如果Redis中含有key,则可能会产生以下负面场景: 造成Redis规格变更失败Redis集群变更规格过程中会进行数据rebalance(节点间迁移数据),单个Ke

  • 数据共享交换平台项目建设方案

    数据共享交换平台通过目录系统来对资源进行描述,通过交换系统来实现资源数据的共享与交换,并实现安全、监控和审计等机制本产品严格按照国家标准规范进行建设,国家电子政务总体框架的构成包括服务与应用系统、信息资源、基础设施、法律法规与标准化体系、管理体制。依托统一的国家电子政务网络建设

    交付方式: 人工服务
  • 方案概述

    方案概述 应用场景 开发者在做Kafka迁移上云时,关键一步是根据源实例规格评估目标实例规格。 本场景介绍RDA平台自动评估功能。该功能根据自动采集获取的源实例数据进行自动评估目标实例规格,检测源实例存在风险,对客户进行告警。规格评估价格由平台功能能力计算。

  • 数据中台建设(七):数据资产管理

    价值管理和数据共享管理内容,可以认为数据资产管理就是数据治理的升级版,是数据治理2.0版本。 数据资产管理的内容主要包括:数据标准管理、元数据管理、主数据管理、数据质量管理、数据安全管理、数据交换管理(数据共享管理)、数据生命周期管理七个方面。 一、数据标准管理 数据标准(Data

    作者: Lansonli
    发表时间: 2022-05-06 01:59:19
    1111
    0
  • 方案概述

    约束与限制 盘古模型套件平台支持进行NLP模型、多模态模型的训练。不同模型训练所需的数据量和数据格式均有所差异,请基于数据要求提前准备训练数据数据量要求 自监督训练在单次的训练任务中,一个自监督训练数据集内,上传的数据文件不能超过10

  • 数据中台建设(三):数据中台架构介绍

    以将这些数据汇集到数据中台中。 数据开发 数据汇集到中台之后,数据都是按照原始状态堆砌在一起,业务无法使用,数据开发可以通过一整套数据加工及管理工具,将数据进行清洗处理。 数据体系 此部分主要是大数据平台数据仓库构建内容。 数据资产管理 通过数据体系建立起来的数据资产较为

    作者: Lansonli
    发表时间: 2022-04-30 15:20:57
    1647
    0
  • 方案概述

    响业务整体运行。 方案架构 图1 方案架构 架构图说明: 为了实现跨机房实时拷贝,Kafka默认提供了一个工具MirrorMaker,用来帮助用户实现数据在两个Kafka集群间的拷贝。 就具体实现而

  • 数据中台建设(五):打破企业数据孤岛和提取数据价值

    点击并拖拽以移动 打破企业数据孤岛和提取数据价值 一、数据汇集-打破企业数据孤岛 点击并拖拽以移动​ 要构建企业级数据中台,第一步就是将企业内部各个业务系统的数据实现互联互通,打破数据孤岛2,主要通过数据汇聚和交换来实现。 企业采集的数据可以是线上数据采集、线下数据采集、互联网数据采集、内部数

    作者: Lansonli
    发表时间: 2022-05-04 14:58:06
    568
    0
  • 方案概述

    方案概述 应用场景 近年来随着移动通信、物联网、社交媒体平台火速发展,图片和视频成为大众获取信息的主要途径,相比于文字,图片存储占用空间,传输过程也会耗费大量网络资源,在很多场景下,比如图片预览,小窗口展示时,其实并不需要加载原始图片,只需加载压缩

  • 数据中台建设(一):数据中台出现的背景

    点击并拖拽以移动数据中台出现的背景 一、数据建设中出现的问题 在企业数据建设过程中,都离不开大数平台建设大数平台建设涉及数据采集、数据存储、数据仓库构建、数据处理分析、数据挖掘机数据可视化等等一系列流程。 随着企业体量的增大,一个企业可能有总公司及很多个子公司,随着企业各类

    作者: Lansonli
    发表时间: 2022-04-30 09:18:52
    963
    0
  • 大数据迁移上云解决方案-详情

    服务咨询 方案技术架构 帮助客户平滑快速迁移上云,并一键式构筑数据接入、数据存储、数据分析和价值挖掘的统一大数平台 与华为云IOT物联网、ROMA平台、DGC、DLV等服务对接,为客户轻松解决数据通道上云、大数据作业开发调度和数据展现的困难 场景特点 • 存算分离,弹性伸缩,大大降低使用成本

  • 方案概述

    一个业务系统的某些数据时,就会出现获取的数据内容不符合要求,无法直接与自己数据结合使用等问题,不同业务系统间的数据共用难度,效率低,影响业务发展。 解决方案 数据集成FDI是ROMA Connect的数据集成组件,支持多种数据类型之间灵活、快速、

  • 方案介绍

    云盘的方案如表1所示。 存储空间受限 数据上云:将OBS作为数据存储池。OBS提供海量、安全、高可靠、低成本的数据存储能力,可供用户存储任意类型和大小的数据

  • 方案概述

    Connect的服务集成直接读取数据库中的数据,把读取到的数据封装为一个RESTful API,并开放给企业内或企业外的其他业务系统。其他业务系统通过调用该API,即可获取该业务系统数据库中的数据。 ROMA Connect的服务集成把数据数据封装为RESTful API有两种实现方式:

  • 方案概述

    MySQL的Binlog日志进行远程获取并解析,以便进行数据备份、数据恢复、数据同步等操作。 由于直接操作数据库获取日志,可能会带来误操作等安全风险。远程获取GaussDB for MySQL的Binlog日志可以避免直接操作数据库。获取的Binlog日志能够用于数据备份。通过获取Binlog日志,

  • 方案概述

    方案概述 基于ModuleSDK开发应用实现数据处理或自定义驱动时,分为开发和使用两个部分。 App应用的开发 利用AppClient和DriverClient进行自定义的业务处理

  • 方案分析

    页面,将导出的数据经由华为云备份(OBS 桶)导入,把数据 rdb 文件导入至华为云 Redis 实例 B。 数据导入完成后,对比 key 数据的一致性。 启动华为云上的业务程序,接入客户流量。 持续观测业务状态,确保业务稳定运行。 回滚方案: 中断华为云侧的客户访问请求,停止华为云的业务程序。查看