已找到以下 10000 条记录
  • MapReduce服务 MRS产品】【集群功能】云硬盘是必选项吗?

    【功能模块】数据转发至大数据平台分析并呈现https://support.huaweicloud.com/bestpractice-iothub/iot_bp_0002.html【操作步骤&问题现象】1、按照步骤进行购买,集群 产生费用,不可被代金券抵扣,2、云硬盘是必选资源吗?

    作者: 赵兴旺
    2341
    3
  • 数据中台建设(二):数据中台简单介绍

    四、​​​​​​​​​​​​​​数据中台与大数据平台关系 大数据平台更关心技术层面的事情,提供数据加工处理的能力,提供数据集成、数据开发、数据测试、任务上线等,针对的往往是技术人员。而数据中台的核心是数据服务能力,要结合场景,比如精准营销、风控等,通过服务直接赋能业务应用,数据中台不仅仅面向技术人员,更需要面向多个部门的业务人员。

    作者: Lansonli
    发表时间: 2022-05-02 03:07:37
    2151
    0
  • 录入基础数据 - 应用与数据集成平台 ROMA Connect

    录入基础数据 概述 数据资产信息架构中的基础数据目录,每个命名空间存放的是基础对象,即数据资产信息架构中每个业务模型都可以依赖的公共业务模型。若模型架构某些类型和基础对象之间有构建依赖关系,则资产目录中对应类型的数据实例可以通过编辑高级属性的方式来依赖到具体的基础对象实例。 前提条件

  • 钱塘古惑仔亮哥说大数据,谈谈云上大数据平台MRS

    本期直播特邀华为云大数据计算明星产品——MapReduce服务MapReduce Service)架构师亮哥,带领大家深入浅出快速玩转大数据

    播放量  4040
  • 华为云FusionInsight MRS融合大数据平台进阶之路

    融合大数据平台,帮助客户实现T+0数据入湖,一站式融合分析,让数据“慧”说话。相关文章:FusionInsight MRS 技术解读:单集群如何做到2万+规模华为云FusionInsight MRS通过信通院大数据能力评估 单集群突破2万+规模重磅发布!华为云EI智能数据湖FusionInsight

    作者: 沙漏
    5847
    1
  • 数据架构支持哪些数据建模方法? - 数据治理中心 DataArts Studio

    数据架构支持哪些数据建模方法? 问题描述 数据架构数据建模方法有哪些。 解决方案 DataArts Studio数据架构支持的建模方法有以下三种: 关系建模 关系建模是用实体关系(Entity Relationship,ER)模型描述企业业务,它在范式理论上符合3NF,出发点是

  • 数据架构示例 - 数据治理中心 DataArts Studio

    数据架构示例 DataArts Studio数据架构以关系建模、维度建模理论支撑,实现规范化、可视化、标准化数据模型开发,定位于数据治理流程设计落地阶段,输出成果用于指导开发人员实践落地数据治理方法论。 本章节操作场景如下: 对MRS Hive数据湖中的出租车出行数据进行数据模型设计。

  • 《企业级大数据平台构建:架构与实现》——2.4 YARN

    出现了多种多样的技术组件。有用来构建数据仓库的Hive,也有基于内存的计算框架Spark,还有我们之前介绍过的NoSQL数据库HBase等。这些技术组件的出现,极大地丰富了大数据的生态体系,但同时也引出了一些新的问题。作为一个大数据底层支撑平台,同时部署Hive、HBase和Sp

    作者: 华章计算机
    发表时间: 2019-06-06 16:09:27
    4573
    0
  • 数据治理平台 - 数据管理与分析

    数据治理平台 数据平台总体架构 本项目一期以离线数据分析为主,按照华为云数据使能方案的离线数据湖子方案,以华为公有云为载体,为客户建设离线数据平台,作为本次项目数据分析应用的数据底座。 离线数据平台整体架构如下,核心由三个云服务组成,大数据平台MRS、数据仓库平台DWS、数据集成治理平台DataArts

  • HCIA-Big Data-华为云开发者学堂

    通过模拟试题进行自我检测,了解考试题型 考试范围 覆盖大数据行业的发展趋势,大数据特点以及华为鲲鹏大数据,常用大数据组件基础技术原理,华为大数据解决方案及成功案例等 知识点占比 1. 大数据技术发展趋势及鲲鹏大数据 3% 2. 常用且重要大数据组件基础技术原理 93% 3. 华为大数据服务解决方案 4% 模拟测试

  • 数据培训

    华为云官方学习平台,提供一站式在线学习、实验、考试、认证,零基础也可轻松上云 立即学习 热门课程/实验推荐 大数据入门与应用 课程 从大数据的产生到大数据的应用,为您揭开大数据神秘的面纱 从大数据的产生到大数据的应用,为您揭开大数据神秘的面纱 立即学习 球星薪酬决定性因素分析 认证

  • 平台介绍

    Studio? 数据湖治理中心DGC数据治理中心DataArts Studio是为了应对上述挑战,针对企业数字化运营诉求提供的具有数据全生命周期管理和智能数据管理能力的一站式治理运营平台,包含数据集成、数据开发、数据架构数据质量监控、数据资产管理、数据服务、数据安全等功能,支持

  • 平台介绍

    Studio? 数据湖治理中心DGC数据治理中心DataArts Studio是为了应对上述挑战,针对企业数字化运营诉求提供的具有数据全生命周期管理和智能数据管理能力的一站式治理运营平台,包含数据集成、数据开发、数据架构数据质量监控、数据资产管理、数据服务、数据安全等功能,支持

  • 钱塘古惑仔亮哥说大数据,谈谈云上大数据平台MRS

    直播特邀华为云大数据计算明星产品——MapReduce服务MapReduce Service)架构师亮哥,带领大家深入浅出快速玩转大数据

    主讲人:亮哥,华为云技术专家,大数据平台MRS架构设计师
    直播时间:2020/09/29 周二 14:00 - 15:30
  • 数据平台、大数据平台数据中台……还分的清不?

    外的大数据平台与国内的大数据平台又有什么区别?接下来就让我们统一相关概念并梳理其关系,一次性说清让大家一目了然。1、大数据平台1.0数据平台1.0=传统大数据平台数据平台1.0时期,其实就是我们通常所看到的国内“传统大数据平台”的概念,此时的大数据平台是以处理海量数据存储、计

    作者: 技术火炬手
    发表时间: 2020-08-14 10:28:27
    4165
    0
  • 平台调研 - 云采用框架

    调研大数据平台及业务的架构图及数据流图,如下图: 大数据平台及业务的架构图和数据流图。 平台数据接入源。 数据流入方式(如:实时数据上报、批量数据抽取)。 分析大数据平台数据流向,数据平台内各个组件间的流向,例如:数据采集组件类型、采集组件下一层、存储数据组件,数据处理过程中的工作流等。

  • 【云知易】MapReduce服务 入门 01 创建MRS集群

    使用MRS的首要操作就是创建集群,本章节为您介绍如何在MRS管理控制台创建一个新的集群。操作步骤登录MRS管理控制台。单击“申请集群”,进入“集群配置”页面。 说明: 创建集群时需要注意配额提醒。当资源配额不足时,建议按照提示申请足够的资源,再创建集群集群配置样例如下图所示:计

    作者: 阅识风云
    发表时间: 2017-10-30 14:13:36
    9632
    0
  • 《企业级大数据平台构建:架构与实现》——2.3 HBase

    1 概述HBase的出现很好地弥补了大数据快速查询能力的空缺。让我们再次将时间拨回到2006年,那时Hadoop项目已经正式启动,开源社区已经拥有了HDFS和MapReduce。通过HDFS我们拥有了能够存储海量文件的分布式文件系统。通过MapReduce我们拥有了一种对海量数据进行批处理操作的途径

    作者: 华章计算机
    发表时间: 2019-06-06 15:58:38
    3341
    0
  • 基础功能架构

    架构设计:可以通过架构设计方便地画出您的业务架构和云上资源的部署架构。 功能包括业务架构画图和部署架构画图,部署架构还可以进行容量风险监测,部分云服务支持全链路画图。 容量优化:识别出您使用的服务或资源可能存在的容量风险,如cpu、内存、硬盘不足等。 功能包括容量风险识别、风险识别结果导出和容量报告下载。

  • 数据架构API - 数据治理中心 DataArts Studio

    数据架构API 概览 信息架构接口 数据标准接口 数据源接口 码表管理接口 流程架构接口 数据标准模板接口 审批管理接口 主题管理接口 主题层级接口 目录管理 原子指标接口 衍生指标接口 复合指标接口 维度接口 限定接口 维度表接口 事实表接口 汇总表接口 业务指标接口 版本信息接口