- 学堂
- 博客
- 论坛
- 开发服务
- 开发工具
- 直播
- 视频
- 用户
- 一周
- 一个月
- 三个月
-
以企业级实时数据平台为例,了解何为敏捷大数据
的通用平台工具以企业级实时数据平台为例,我们在敏捷大数据理念原则的指导下,对实时数据平台整体端到端进行了模块化切分,并形成一系列标准化协议,最后以统一开放的原则确定了要开发哪些通用平台工具及其边界和接口规范。 上图是实时数据平台的概念模块架构图,在后续文章中我们会以实时数据平台为
-
SAP 云平台数据中心设计概述
文章目录 SAP数据中心内部的组成部分 SAP数据中心的安全性 SAP数据中心的绿色运营 SAP云平台编程环境 Jerry的前一篇文章企业数字化转型与SAP云平台介绍了SAP云平台在企业数字化转型中的重要地位和作用。作为一个平台即服务(PaaS)解决方案, SAP云平台实现了高度的
-
如何正确选择数据治理平台
数据驱动型团队依赖于数据准备平台,这些平台过去由数据专家完成任务,现在由最了解数据的运营人员完成。数据治理平台需要具有类似Excel的UI和智能指导的工作流驱动,需要功能直观且、易于使用。 如何正确选择数据治理平台.中琛魔方大数据平台表示有了基于云的数据治理平台,整个团队都会
-
大数据技术为什么快?
备份,大数据数据备份方式多分备份(数据复制,默认三个副本) 单份数据 多份数据(数据复制) 模型 传统的计算模型是移动数据到程序端,大数据计算模型是移动程序到数据端。io
-
数据开发工具平台登录失败,显示【平台许可已到期】
数据开发工具平台登录失败,显示【平台许可已到期】
-
Java 智慧工地监管平台源码 依托智慧工地平台,满足省、市级住建数据监管要求
Java 智慧工地监管平台源码 依托智慧工地平台,满足省、市级住建数据监管要求 智慧工地是将互联网+的理念和科技引入建筑工地,从施工现场源头抓起,最大程度的收集人员、安全、环境、材料等关键业务数据。通过结合物联网、大数据、互联网、云计算等技术建立云端大数据管理平台,形成&ldquo
-
《企业级大数据平台构建:架构与实现》—— 2.3.7 使用场景
询性能使得它在大数据领域成为一个多面手。1.?平台存储由于HBase构建在HDFS之上,这意味着它能像HDFS一样实现存储的线性扩容。同时它又能提供毫秒级的查询性能。所以它可以作为其他大数据组件的低层存储支持。比如Apache Kylin就是实用HBase作为其数据索引的存储载体。图2-11 Region
-
IntelliJ IDEA等平台
IntellIj平台同时支撑包括Goland、Pycharm等在内的IDE,若在其它相关IDE上开发,请下载配置好对应语言的编译器或者解释器。 这里以IDEA为例介绍IntelliJ平台插件的安装流程,其他IntelliJ系列的IDE请参考IDEA。
-
《企业级大数据平台构建:架构与实现》——2.4.8 使用场景
2.4.8 使用场景基于YARN扩展性强、可靠性强、支持多用户和支持多应用的特点,它非常适合于支撑企业内部构建统一的资源共享型大数据平台。借助YARN我们可以真正实现通过一套资源调度系统集成所有应用组件的单一大集群架构。1.?Spark任务调度Spark是一款分布式内存计算框架,
-
【云图说】第16期 华为云MRS,云上企业级大数据服务
-
《企业级大数据平台构建:架构与实现》—— 2.5.5 容错
5 容错传统分布式系统的容错方案有据复制和恢复日志两种方案。对于以数据为中心的系统而言,这两种方式都非常昂贵,因为它需要跨集群网络复制大量数据,而网络带宽的速度远远低于内存访问的速度。RDD天生是支持容错的。首先,它自身是一个不变的数据集,其次,Spark使用DAG作为其执行模型,所以它能够
-
【ABC产品】【数据导入功能】ABC平台元数据导入报错
【功能模块】1.由于线下环境升级,备份数据之后重新导入ABC平台报错。报错信息如下:请问:如何处理这种问题【操作步骤&问题现象】1、2、【截图信息】【日志信息】(可选,上传日志内容或者附件)
-
万字长文详解大数据应用实战案例-万亿级大数据监控平台建设方案
验。监控系统是整个运维环节乃至整个项目及产品生命周期中最重要的一环。百分点大数据技术团队基于大数据平台项目,完成了百亿流量、约3000+台服务器集群规模的大数据平台服务的监控,沉淀了一套适合自身业务和技术特点的监控架构设计思路、设计方法和落地方案。 以下是我为大家准备的几个精品
-
电信OC平台,数据流用json
数据流有json和二进制码流如果使用json格式上传,有相关资料吗
-
[智慧农业]数据上报云平台失败
【功能模块】智慧农业【操作步骤&问题现象】1、都是按照教材里面定义的2、【截图信息】原教程里的代码数据体定义找不到,上报函数也找不到.......【日志信息】(可选,上传日志内容或者附件)
-
PHP实现拼车平台数据表
#=====================拼车平台======================#创建数据库create database car_platform; #用户表DROP TABLE IF EXISTS `car_users`;CREATE
-
华为大数据平台凭什么成为行业领跑者?
上案例。IDC评估大数据管理平台中涉及到的核心组件以及平台安装部署、运维管理等支持性功能组件,也评估平台对于分析预测、认知工具的支持能力。综观这些标准和权重数值,可看出IDC注重的是技术能力、战略的长远发展以及应用情况。这也不难理解。任何产品平台都是在众多技术中选择、优化,考验的
-
【云知易】MapReduce服务 入门 01 创建MRS集群
使用MRS的首要操作就是创建集群,本章节为您介绍如何在MRS管理控制台创建一个新的集群。操作步骤登录MRS管理控制台。单击“申请集群”,进入“集群配置”页面。 说明: 创建集群时需要注意配额提醒。当资源配额不足时,建议按照提示申请足够的资源,再创建集群。集群配置样例如
-
大数据技术
代表产品批处理计算 大规模数据批量处理 MapReduce、Spark…… 流计算 针对流数据的实时计算 storm、s4、Flume、Streams、Puma、DStream、Super Mario、银河流数据处理平台……图计算 针对大规模图结构数据的处理 P
-
大数据技术
代表产品批处理计算 大规模数据批量处理 MapReduce、Spark…… 流计算 针对流数据的实时计算 storm、s4、Flume、Streams、Puma、DStream、Super Mario、银河流数据处理平台……图计算 针对大规模图结构数据的处理 P