内容选择
全部
内容选择
内容分类
  • 学堂
  • 博客
  • 论坛
  • 开发服务
  • 开发工具
  • 直播
  • 视频
  • 用户
时间
  • 一周
  • 一个月
  • 三个月
  • 华为云FusionInsight MRS融合大数据平台进阶之路

    融合大数据平台,帮助客户实现T+0数据入湖,一站式融合分析,让数据“慧”说话。相关文章:FusionInsight MRS 技术解读:单集群如何做到2万+规模华为云FusionInsight MRS通过信通院大数据能力评估 单集群突破2万+规模重磅发布!华为云EI智能数据湖FusionInsight

    作者: 沙漏
    5846
    1
  • 浅谈大数据平台架构设计

    提供多种平台以及工具来助力数据平台:多种数据源的数据采集平台、一键数据同步平台数据质量和建模平台、元数据体系、数据统一访问平台、实时和离线计算平台、资源调度平台、一站式开发IDE。 六、元数据-大数据体系基石 元数据是打通数据源、数据仓库、数据应用,记录了数据从产生到消

    作者: 数据社
    发表时间: 2022-09-24 18:15:56
    189
    0
  • 钱塘古惑仔亮哥说大数据,谈谈云上大数据平台MRS

    很多企业的大数据业务采用Hadoop方案,因Hadoop有成熟的生态圈,开源、免费并可以有效解决问题。Hadoop生态圈中的明星计算引擎MapReduce,是解决大数据的最直接的方案之一,他的工作原理是把大块的任务切分为若干份小任务,由集群的每台服务器来计算,最后把结果合并。本期

    主讲人:亮哥,华为云技术专家,大数据平台MRS架构设计师
    直播时间:2020/09/29 周二 14:00 - 15:30
  • 深耕换来突破,大数据MapReduce最新版本出炉,尝鲜!

    应加上;当我们终止大数据集群时,MRS资源锁就会相应释放。 弹性伸缩增强:资源计划在大数据应用,尤其是实时分析处理数据的场景中,常常需要根据数据量的变化动态调整集群节点数量以增减资源。MRS的弹性伸缩功能已经支持根据集群负载对集群进行弹性伸缩。此外,如果数据量以天为周期有规律的变

    作者: 仰望星空
    11641
    3
  • 数据中台建设(二):数据中台简单介绍

    四、​​​​​​​​​​​​​​数据中台与大数据平台关系 大数据平台更关心技术层面的事情,提供数据加工处理的能力,提供数据集成、数据开发、数据测试、任务上线等,针对的往往是技术人员。而数据中台的核心是数据服务能力,要结合场景,比如精准营销、风控等,通过服务直接赋能业务应用,数据中台不仅仅面向技术人员,更需要面向多个部门的业务人员。

    作者: Lansonli
    发表时间: 2022-05-02 03:07:37
    2151
    0
  • 钱塘古惑仔亮哥说大数据,谈谈云上大数据平台MRS

    本期直播特邀华为云大数据计算明星产品——MapReduce服务MapReduce Service)架构师亮哥,带领大家深入浅出快速玩转大数据

    播放量  4040
  • 基于IoT平台的自贩机销量分析 - 代码示例

    华为物联网平台提供规则引擎能力,支持将设备上报的数据转发至华为云其他云服务,可实现将海量数据通过数据接入服务(DIS)转发至MapReduce服务MRS),分析后再由数据可视化服务(DLV)读取数据呈现为可视化报表,实现数据的一站式采集、处理和分析。

  • 基于IoT平台的自贩机销量分析 - 代码示例

    华为物联网平台提供规则引擎能力,支持将设备上报的数据转发至华为云其他云服务,可实现将海量数据通过数据接入服务(DIS)转发至MapReduce服务MRS),分析后再由数据可视化服务(DLV)读取数据呈现为可视化报表,实现数据的一站式采集、处理和分析。

  • 【转】什么是MRS

    、EVS数据多副本等能力打造一个高效、可靠、安全的计算环境。 数据集成 数据集成层提供了数据接入到MRS集群的能力,包括Flume(数据采集)、Loader(关系型数据导入)、Kafka(高可靠消息队列),支持各种数据源导入数据到大数据集群中。 数据存储 MRS支持结构化

    作者: FI小粉丝
    发表时间: 2021-06-24 06:45:35
    2302
    0
  • 数据仓库和Hadoop大数据平台有什么差别?

    本帖最后由 yd_65688703 于 2017-11-15 17:18 编辑 <br /> 数据仓库和Hadoop大数据平台有什么差别?

    作者: 婠
    11505
    1
  • 传统大数据平台Lambda架构学习

    IoT时代数据量巨大,夜间批计算时间窗可能不够;数据源一旦变化,适配工作量巨大;这种情况下,出现有一种改良的大数据平台架构Kappa,特点是流批一体处理。能够解决的问题是改进流计算来解决批量数据处理的问题,统一业务处理逻辑,如需重新计算,需重启一个流计算实例。它的劣势在于由于采

    作者: 极客潇
    1483
    3
  • 数据中台建设(三):数据中台架构介绍

    这些数据存储在不同的网络环境和存储平台,通过数据汇集工具可以将这些数据汇集到数据中台中。 数据开发 数据汇集到中台之后,数据都是按照原始状态堆砌在一起,业务无法使用,数据开发可以通过一整套数据加工及管理工具,将数据进行清洗处理。 数据体系 此部分主要是大数据平台数据仓库构建内容。

    作者: Lansonli
    发表时间: 2022-04-30 15:20:57
    1647
    0
  • 华为云EI智能数据湖FusionInsight 8.0 MRS新版本:融合大数据平台

    一、FusionInsight MRS概述        FusionInsight MRS是华为FusionInsigth HD企业级大数据平台本与原华为云MRS服务的融合版本,是华为云(Huawei Cloud)、HCS(Huawei Cloud Stack)统一的企业级大数据云服务。FusionInsight

    作者: 沙漏
    发表时间: 2020-07-02 11:47:07
    12441
    0
  • 相关云服务

    相关云服务 DWS Data Warehouse Service 数据仓库服务 数据仓库服务 MRS

  • 数据平台的账号无法登录数据平台开发系统

    【功能模块】医疗联合解决方案标准版【操作步骤&问题现象】1、数据平台的账号无法登录数据平台系统,提示“用户名或密码错误”。用户名:chinasoft2021【截图信息】【日志信息】(可选,上传日志内容或者附件)

    作者: ireufeling
    638
    7
  • 平台介绍

    提供数据智能搜索和运营监控。 数据服务数据服务定位于标准化的数据服务平台,提供一站式数据服务开发、测试部署能力,实现数据服务敏捷响应,降低数据获取难度,提升数据消费体验和效率,最终实现数据资产的变现。 数据安全数据安全为数据湖治理中心数据治理中心提供数据生命周

  • 平台介绍

    提供数据智能搜索和运营监控。 数据服务数据服务定位于标准化的数据服务平台,提供一站式数据服务开发、测试部署能力,实现数据服务敏捷响应,降低数据获取难度,提升数据消费体验和效率,最终实现数据资产的变现。 数据安全数据安全为数据湖治理中心数据治理中心提供数据生命周

  • 只需一步,轻松创建大数据集群

    日期等。例如:“mrs_20200616”。集群版本:默认选择最新版本即可(不同版本集群提供的组件有所不同,请根据需要选择集群版本)。组件选择:根据使用需要,选择“Hadoop分析集群”、“HBase分析集群”或“Kafka流式集群”。CPU架构:默认即可。集群节点:请根据自身需

    作者: 寒月点点
    发表时间: 2020-06-16 20:05:47
    7560
    0
  • 华为云携手甘肃省医疗保障局,以数字科技为智慧医疗注入新动能

    按照国家医保局的建设要求,应对旧医保平台进行优化和升级,而老医保平台还在使用传统数据库,扩展性较弱。 同时,新平台要求业务请求端到端时延应该缩短至秒级,而老医保平台结算类业务延迟高、响应慢,办事效率尤待加强。 从业务端来看,省级医保平台业务面向全省参保人口,并发量高、数据量大,业务数据量能达到百TB级

    作者: GaussDB 数据库
    发表时间: 2022-03-09 03:19:46
    1745
    0
  • 数据调度平台Airflow(一):什么是Airflow

    什么是Airflow Apache Airflow是一个提供基于DAG有向无环图来编排工作流的、可视化的分布式任务调度平台,与Oozie、Azkaban等任务流调度平台类似。Airflow在2014年由Airbnb发起,2016年3月进入Apache基金会,在2019年1月成为顶级项

    作者: Lansonli
    发表时间: 2022-03-19 16:00:19
    1168
    0