已找到以下 10000 条记录
  • 华为云FusionInsight MRS融合大数据平台进阶之路

    又给客户提供了企业级融合大数平台,帮助客户实现T+0数据入湖,一站式融合分析,让数据“慧”说话。相关文章:FusionInsight MRS 技术解读:单集群如何做到2万+规模华为云FusionInsight MRS通过信通院大数据能力评估 单集群突破2万+规模重磅发布!华为

    作者: 沙漏
    5847
    1
  • 用户数据平台

    解决方案架构 面向业务增长的客户全域数据赋能平台 为什么要CDP用户数据平台? - 数据孤岛,线上线下数据难以打通 - 无法实现个性化业务营销流程 - 看不清消费者、找不到消费者、难以沉淀合适的消费者 方案关键能力 - 支持20+数据源,10+目标端无缝集成,全链路监控与管理 - OneI

  • 数据质量 - 数据治理中心 DataArts Studio

    数据质量 质量作业和对账作业有什么区别? 如何确认质量作业或对账作业已经阻塞? 如何手工重启阻塞的质量作业或对账作业? 怎样查看质量规则模板关联的作业? 用户在执行质量作业时提示无MRS权限怎么办?

  • 数据平台大数据平台数据中台……还分的清不?

    国外的大数平台与国内的大数平台又有什么区别?接下来就让我们统一相关概念并梳理其关系,一次性说清让大家一目了然。1、大数平台1.0大数平台1.0=传统大数平台大数平台1.0时期,其实就是我们通常所看到的国内“传统大数平台”的概念,此时的大数平台是以处理海量数据存储、

    作者: 技术火炬手
    发表时间: 2020-08-14 10:28:27
    4165
    0
  • 企业级大数据平台构建:架构与实现》——1.1.2 数据孤岛

    1.1.2 数据孤岛如果企业内部存在多个分散的小集群,那么首先各种业务数据从物理上便会被孤立地存储于各自的小集群之中,我们就没有办法对数据进行全量的整合使用,数据便失去了关联的能力,大数据技术使用全量数据进行分析的优势也丧失了。其次,在这种情况下也很难实现对业务数据进行统一的模型

    作者: 华章计算机
    发表时间: 2019-06-06 15:18:56
    3222
    0
  • 云管理平台实践指南

    - CMP必须支持跨云的迁移功能。 这包括将工作负载从私有云服务转移到公有云服务。 该过程包括在公有云中提供等效资源(服务器,存储,网络,数据库等)以及迁移应用和数据集。 CMP不能对迁移的所有方面负责(例如,数据迁移,数据重定向等),而应作为代理来协调迁移,并确保服务和财务管理的完整性•

    作者: 烟花易冷
    发表时间: 2018-03-16 21:49:21
    9013
    1
  • 干货 | 政务大数据平台搭建方案

    近年来,各政务系统为贯彻落实国家大数据战略,推进数据资源开放共享,助力城市经济从高速增长转向高质量发展,建设市级政务大数据平台,整合城市全时空、全方位、全要素的数据资源,打通数据壁垒、促进数据流通、加快数据开放、创新数据应用、提升数据价值,开始与各各数据服务平台合力搭建政务大数据平台,全面推动智慧城

    作者: 马哥说数据
    发表时间: 2021-04-25 10:01:47
    2842
    0
  • MapReduce服务 MRS产品】【集群功能】云硬盘是必选项吗?

    【功能模块】数据转发至大数据平台分析并呈现https://support.huaweicloud.com/bestpractice-iothub/iot_bp_0002.html【操作步骤&问题现象】1、按照步骤进行购买,集群 产生费用,不可被代金券抵扣,2、云硬盘是必选资源吗?

    作者: 赵兴旺
    2341
    3
  • 数据中台建设(二):数据中台简单介绍

    四、​​​​​​​​​​​​​​数据中台与大数平台关系 大数平台更关心技术层面的事情,提供数据加工处理的能力,提供数据集成、数据开发、数据测试、任务上线等,针对的往往是技术人员。而数据中台的核心是数据服务能力,要结合场景,比如精准营销、风控等,通过服务直接赋能业务应用,数据中台不仅仅面向技术人员,更需要面向多个部门的业务人员。

    作者: Lansonli
    发表时间: 2022-05-02 03:07:37
    2151
    0
  • 大数据全栈成长计划

    1元起 点击领取权益 华为资深大数据工程师亲授 多年实战开发经验共享 华为云MRS大数据研发工程师、解决方案架构师 了解详情 主讲人:William 老师 华为云MRS大数据研发工程师、解决方案架构师 - 工作经历 华为数据平台研发,面向互联网、企业客户,提供可行高效极致性价的

  • 【云知易】MapReduce服务 入门 01 创建MRS集群

    使用MRS的首要操作就是创建集群,本章节为您介绍如何在MRS管理控制台创建一个新的集群。操作步骤登录MRS管理控制台。单击“申请集群”,进入“集群配置”页面。 说明: 创建集群时需要注意配额提醒。当资源配额不足时,建议按照提示申请足够的资源,再创建集群集群配置样例如下图所示:计

    作者: 阅识风云
    发表时间: 2017-10-30 14:13:36
    9632
    0
  • DeepData大数据平台

    客户建立起符合自身特征的数据架构和数据治理体系,平台主要目的是发现并解决数据问题,通过一系列措施如:数据去重,脱敏等操作统一数据标准,规范数据,减少数据问题发生,整体提高数据的应用价值。将实现业务目标作为数据管理和服务的核心驱动力,优化数据架构,提升数据仓库/信息化管理系统建设,

  • 大数据调度平台Airflow(一):什么是Airflow

    什么是Airflow Apache Airflow是一个提供基于DAG有向无环图来编排工作流的、可视化的分布式任务调度平台,与Oozie、Azkaban等任务流调度平台类似。Airflow在2014年由Airbnb发起,2016年3月进入Apache基金会,在2019年1月成为顶级项

    作者: Lansonli
    发表时间: 2022-03-19 16:00:19
    1168
    0
  • 平台功能架构

    平台功能架构 父主题: 平台介绍

  • 农业农村大数据平台

    无缝连接,实现在GIS展示平台的统一展示。数据采集系统支持物理拷贝,数据采集系统支持数据文件导入,数据采集系统支持接口数据对接,数据采集系统支持数据库对接,数据采集系统支持数据采集校验数据挖掘计算软件:以简化用户使用的设计思路而构建的大数据存储计算平台,特色是海量存,高效算,一站

    交付方式: License
  • 数据管理 - MapReduce服务 MRS

    数据管理 当创建MRS集群选择部署Hive和Ranger组件时,MRS提供多种元数据存储方式,您可以根据自身需要进行选择: 本地元数据:元数据存储于集群内的本地GaussDB中,当集群删除时元数据同时被删除,如需保存元数据,需提前前往数据库手动保存元数据。 外置数据连接:MRS

  • 乡村振兴大数据平台

    乡村振兴大数平台覆盖农、林、牧、渔等三农产业链相关产业图谱,紧扣国家战略客群梳理,服务于银行金融机构和区域/园区政府。助力政府和产业部门借鉴其他地区农村发展经验,发现各具特色的新型农业主体,科学规划本地乡村产业发展;,促进农民就业、发展农村特色招牌,为农村产业深度发展提供决策支撑;

  • 【9月29日 14:30】特邀MRS架构师亮哥,谈谈云上大数据平台MRS,人人争当MRS体验师

    果合并。那你了解MapReduce吗?本期体验师活动联合华为云大数据计算明星产品——MapReduce服务MapReduce Service)提供租户完全可控的企业级大数据集群云服务,轻松运行Hadoop、Spark、HBase、Kafka、Storm等大数据组件,带你快速玩转

    作者: 云湖湖
    4114
    2
  • 企业级大数据平台构建:架构与实现》——2.4 YARN

    出现了多种多样的技术组件。有用来构建数据仓库的Hive,也有基于内存的计算框架Spark,还有我们之前介绍过的NoSQL数据库HBase等。这些技术组件的出现,极大地丰富了大数据的生态体系,但同时也引出了一些新的问题。作为一个大数据底层支撑平台,同时部署Hive、HBase和Sp

    作者: 华章计算机
    发表时间: 2019-06-06 16:09:27
    4573
    0
  • 分析与运营平台设计

    分析与运营平台设计 数据分析处理基本流程 “OBS+CCE”搭建数据分析平台 基于“OBS+CCE”大数据组件对接