内容选择
全部
内容选择
内容分类
  • 学堂
  • 博客
  • 论坛
  • 开发服务
  • 开发工具
  • 直播
  • 视频
  • 用户
时间
  • 一周
  • 一个月
  • 三个月
  • 大数据解决方案

    网络安全等级保护大数据附录1)大数平台应对数据采集终端、数据导入服务组件、数据导出终端、数据导出服务组件的使用实施身份鉴别;2)大数平台应能对不同客户的大数据应用实施标识和鉴别;3)大数平台应为大数据应用提供集中管控其计算和存储资源使用状况的能力;4)大数平台应屏蔽计算、内

    作者: 数据库安全
    发表时间: 2019-11-20 08:57:49
    4828
    0
  • 对接大数据组件

    对接大数据组件 支持的大数据组件简介 Hadoop对接OBS Hive对接OBS Spark对接OBS Flume对接OBS DataX对接OBS Druid对接OBS Flink对接OBS

  • 从0到1搭建大数平台之调度系统

    但提供的功能比付费版本少。 XXL-JOB XXL-JOB一个分布式任务调度平台,其核心设计目标开发迅速、学习简单、轻量级、易扩展。将调度行为抽象形成“调度中心”公共平台,而平台自身并不承担业务逻辑,“调度中心”负责发起调度请求;将任务抽象成分散的JobH

    作者: 数据社
    发表时间: 2022-09-24 18:48:41
    196
    0
  • 轻量级云原生大数平台"CloudEon"正式开源

    ernetes作为容器编排平台的事实标准,自然也受到了越来越多的关注和使用。但是如果想在Kubernetes上部署和运维大数据服务有比较高的学习成本,需要专业的运维人员来进行管理和维护,在这种情况下,我们开发出CloudEon平台,致力于简化多种大数据服务在Kubernetes

    作者: yd_260573190
    发表时间: 2023-04-30 16:04:20
    53
    0
  • 华为云FusionInsight MRS融合大数平台进阶之路

    的性能。传统大数平台中T+1流水线示例传统大数平台中T+0流水线示例        在业务场景上,受Lambda/Kappa架构思想的影响,过去用户往往会建立两条流水线作业,一条T+1从Source->PDM->SUM->MARK的分层结构的批处理模型,另一条基于Flin

    作者: 沙漏
    5838
    1
  • 【云驻共创】华为大数据开发平台 DataFactory 行业应用典型案例

    模型设计的顺序应为:概念模型-> 逻辑模型 -> 物理模型 数据模型相互关系 这 3 个数据模型的关系: 概念模型和逻辑模型一对一关系 逻辑模型和物理模型一对多的关系,一个逻辑模型实体可以有多个物理实现(一个逻辑设计既可以存储在 MySQL、又可以存储在 Oracle

    作者: 宇宙之一粟
    发表时间: 2022-08-31 04:27:44
    418
    0
  • 华为大数据解决方案介绍

    而所有的这些大数据。所应用服务都离不开大数据的分析平台。 华为的大数平台叫Fusionlnsight,就是一个集大数据存储、处理与分析于一体的企业级统一化平台。Fusionlnsight平台在开源hadoop大数平台的基础上进行了功能强化,具有敏捷、智慧和可信等特点。其中

    作者: 考过IE励志当攻城狮
    发表时间: 2021-12-04 13:04:37
    5079
    0
  • 「直播回放」大数平台如何落地(附PPT下载)

    大家好,我峰哥~ 上上周日给大家做了第二次直播,数据看着比第一次有提升!总计用467人观看,比第一次直播人数增加了100人,这个增长还是很满意的,同时在本次直播中送了书籍和红包~ 直播回放已经上传,点击可以观看! 本次直播完整版的PPT如下:

    作者: 数据社
    发表时间: 2022-09-24 17:58:08
    136
    0
  • 智慧水务大数平台:存在什么问题,该如何解决?

    智慧水务大数平台建设整个智慧城市发展进程中重要的组成部分。现阶段,我国在智慧水务大数平台建设过程中遇到了许多问题,影响了大数平台建设的质量与效率。为此,非常有必要对智慧水务大数平台建设中发现的问题加以归纳、分析,并提出有针对性的解决方法,助力智慧水务大数平台建设。 智慧水务大数据平台概述

    作者: 国荣科技智慧城市
    61
    1
  • 《企业级大数平台构建:架构与实现》——1.4 平台辅助工具

    的方式;平台运维的职责保障大数平台的正常稳定运行,所以他们关注的平台的各种监控指标。而数据分析的职责基于平台数据做数据分析,所以他们关注的如何使用机器学习相关算法,用最快的速度验证自己的想法并得出反馈。通过前面的介绍,我们可以知道大数平台的基本能力从底层技术角度已经覆

    作者: 华章计算机
    发表时间: 2019-06-06 07:33:40
    2185
    0
  • 《企业级大数平台构建:架构与实现》——1.3.5 平台安全与管理

    1.3.5 平台安全与管理作为一个企业级大数平台产品,企业内部的大数据产品都会构建在这个平台之上,安全问题自然不容小视,我们至少会面对如下这些问题:1.?用户管理作为一个面向多个技术团队和业务团队的大数平台,多用户机制自然必不可少。用户我们平台资源分配对象的基本单元,诸如数

    作者: 华章计算机
    发表时间: 2019-06-06 07:32:09
    2240
    0
  • 支持的大数据组件简介

    支持的大数据组件简介 在华为云大数据存算分离方案中,OBS除了可以与大数平台对接外,还可以直接与开源的大数据组件对接。 当前支持的大数据组件如下: Hadoop Hive Spark HBase Presto

  • 分析与运营平台设计

    分析与运营平台设计 数据分析处理基本流程 “OBS+CCE”搭建数据分析平台 基于“OBS+CCE”大数据组件对接

  • 什么大数

           大数据(big data)指的是所涉及的资料量规模巨大到无法透过主流软件工具,在合理时间内达到撷取、管理、处理、并整理成为帮助企业经营决策更积极目的的资讯。大数据有5V特点:Volume(大量)、Velocity(高速)、Variety(多样)、Value(低价值密

    作者: 我是一只小小小鸟
    1043
    0
  • 在本地利用虚拟机搭建Hadoop大数平台

    /etc/profile# 测试$ echo $JAVA_HOME $ java -version5.  关闭主机后,克隆到大数平台一、   Hadoop平台单节点搭建1)  环境及需要软件:1.  物理机操作系统:windows 10 19032.  VM版本:15.5 pro3

    作者: Jack20
    1510
    3
  • 开源大数平台Hadoop和Spark对接OBS操作指南

    Spark平台中通过OBSFileSystem组件与OBS进行对接的操作步骤。对接OBS后,用户的数据即可存储在OBS平台,通过Hadoop和Spark进行大数据计算,实现计算存储分离。 3      开源大数平台对接OBS操作步骤3.1      Hadoop平台更新OBSFileSystem3

    作者: lanxinliuli
    6533
    0
  • Ambari+HDP3.1.0大数平台部署问题及总结★★★

    本次搭建Ambari+HDP3.1.0大数平台主要依据鲲鹏社区[大数据]鲲鹏生态_Ambari部署指南搭建,链接:https://bbs.huaweicloud.com/forum/forum.php?mod=viewthread&tid=27845&page=1&extra=#pid90118问题一:

    作者: 银河护卫队_zhh
    3472
    1
  • 端+云+大数据的智慧工地数据管理平台源码

    智慧工地管理平台将互联网+的理念和技术引入建筑工地,从施工现场源头抓起,最大程度的收集人员、安全、环境、材料等关键业务数据,依托物联网、互联网,建立云端大数据管理平台,形成“端+云+大数据”的业务体系和新的管理模式,打通从一线操作与远程监管的数据链条,实

    作者: yd_235362283
    发表时间: 2023-12-16 17:00:03
    72
    0
  • 如何理解数据仓库和Hadoop大数平台的差别?

          广义上来说,Hadoop大数平台也可以看做新一代的数据仓库系统, 它也具有很多现代数据仓库的特征,也被企业所广泛使用。因为MPP架构的可扩展性,基于MPP的数据仓库系统有时候也被划分到大数平台类产品。但是数据仓库和Hadoop平台还是有很多显著的不同。针对不同的使

    作者: 建赟
    1470
    2
  • 从0到1搭建大数平台之计算存储系统

    前面已经给大家讲了《从0到1搭建大数平台之数据采集系统》、《从0到1搭建大数平台之调度系统》,今天给大家讲一下大数平台计算存储系统。大数据计算平台目前主要都是围绕着hadoop生态发展的,运用HDFS作为数据存储,计算框架分为批处理、流处理。 一、传统的计算平台 我们都知道,没有大数据之前,

    作者: 数据社
    发表时间: 2022-09-24 17:32:47
    143
    0