已找到以下 10000 条记录
  • 分布式数据库架构

    分布式数据库总体设计有两个思路和方向,一个是基于共享存储的架构(share everything),另一个是基于数据分片的架构(share nothing)。共享存储的架构特点是底层存储共用一份数据池子,上层数据库server层可以弹性扩展,典型的案例像DB2 pureScale,Oracle

    作者: 重新来过
    4475
    1
  • 分布式数据存储倾斜快速检测

    前言数据存储倾斜(即图中1-4被占用存储资源不均衡)是Shared nothing分布式架构下的重要难题,它破坏了MPP架构中各个节点对等的要求,导致倾斜节点所需存储及计算资源都远大于其他节点,进而导致性能下降(木桶效应)、full disk或oom等严重问题。 技术背景目前各类

    作者: along_2020
    发表时间: 2020-07-10 17:00:47
    7366
    1
  • Ceph 分布式存储架构解析与工作原理

    目录 文章目录 目录 Ceph 简介 Ceph 的架构:分布式服务进程 Ceph Monitor(MON) Ceph Object Storage Device Daemon(OSD) Ceph Metadata Server(MDS)[可选]

    作者: 云物互联
    发表时间: 2021-08-05 17:46:25
    1441
    0
  • 分布式身份 - 可信分布式身份服务

    分布式身份 注册个人分布式身份 注册企业分布式身份 更新企业DID服务 查询分布式身份文档 父主题: API

  • Hive分布式数据仓库(1)

           Hive 是基于Hadoop构建的一套数据仓库分析系统,用来进行数据提取、转化、加载,这是一种可以存储、查询和分析存储在Hadoop中的大规模数据的机制。Hive数据仓库工具能将结构化的数据文件映射为一张数据库表,并提供SQL查询功能,能将SQL语句转变成MapRe

    作者: 胡辣汤
    1371
    0
  • Hive分布式数据仓库(2)

    MetaStore组件: 该组件是Hive用来负责管理元数据的组件。Hive的元数据存储在关系型数据库中,其支持的关系型数据库有Derby和Mysql,其中Derby是Hive默认情况下使用的数据库,它内嵌在Hive中,但是该数据库只支持单会话,在生产中并不适用,在我们日常的开发中,

    作者: 胡辣汤
    1170
    0
  • 分布式系统调度

    遇见你,遇见未来 华为 | +智能,见未来 天才少年招聘 分布式系统调度 分布式系统调度 领域方向:存储 职位名称: 存储专家 分布式系统调度 存储 存储专家 挑战课题方向简介 研究分布式系统中存储、网络、计算资源的调度,实现资源共享与隔离能力,预测与调度能力: 1、解决资

  • 分布式数据库中间件 DDM - 分布式数据库中间件 DDM

    服务介绍 分布式数据库中间件 DDM 分布式数据库中间件DDM介绍 02:47 分布式数据库中间件DDM介绍 操作指导 分布式数据库中间件 DDM 购买DDM实例 02:40 购买DDM实例 分布式数据库中间件 DDM 创建逻辑库并关联数据节点 03:00 创建逻辑库并关联数据节点 分布式数据库中间件

  • DAOS 分布式异步对象存储存储模型

    Shard 中存储的任何数据类型所使用的总字节数。 一旦 Target 失败并从 Pool 映射中排除,Pool 中的数据冗余将自动在线恢复。这种自愈过程称为重建。重建进度定期记录在永久内存中存储的 Pool 中的特殊日志中,以解决级联故障。添加新 Target 时,数据会自动迁移到新添加的

    作者: debugzhang
    发表时间: 2021-03-29 15:03:54
    4168
    0
  • 盘点分布式文件存储系统

    在项目的数据存储中,结构化数据通常采用关系型数据库,非结构化数据(文件)的存储就有很多种方式,服务器本地存储、Nas挂载、ftp等等,今天就来盘点一下,分布式文件存储系统。 一、分布式存储简介 1、什么是分布式存储 在开始介绍分布式存储之前,先了解一下,非分布式存储方案。 在单

    作者: 三分恶
    发表时间: 2021-02-11 00:06:56
    7355
    0
  • 获取单个专属分布式存储池详情 - 专属分布式存储服务 DSS

    String 专属分布式存储池名称。 id String 专属分布式存储池ID。 project_id String 专属分布式存储池归属的project_id。 capacity Integer 申请的专属分布式存储池容量,单位GB。 type String 专属分布式存储池的存储类型 SAS:高IO专属分布式存储池。

  • Ceph分布式存储扩容指南

    介绍Ceph是一个统一的分布式存储系统,设计初衷是提供较好的性能、可靠性和可扩展性。它支持用3种方式存储数据,分别为:对象存储、块设备存储、文件系统存储。Ceph项目最早起源于Sage就读博士期间的工作(最早的成果于2004年发表),并随后贡献给开源社区。在经过了数年的发展之后,

    作者: 肖邦的忧伤
    8537
    1
  • 分布式OS技术研究

    遇见你,遇见未来 华为 | +智能,见未来 项目实习生 分布式OS技术研究 分布式OS技术研究 领域方向:边缘计算 工作地点: 深圳 分布式OS技术研究 边缘计算 深圳 项目简介 随着计算的不断发展,直播会议、AI应用、游戏ARVR等业务对数据隐私、时延、成本等提出更高

  • 华为分布式数据库GaussDB(for openGauss)全网商用

    新闻报道 了解华为最新动态 了解华为 新闻报道 华为分布式数据库GaussDB(for openGauss)全网商用 新闻报道 华为分布式数据库GaussDB(for openGauss)全网商用 2021-02-23 近日,华为正式发布云数据库GaussDB(for

  • 科蓝分布式事务平台

    t,支持多种存储方式:文件、Redis、数据库,为客户打造一站式的分布式解决方案。 1).提供分布式事务处理的客户端,方便开发者将自己的应用接入分布式事务中;2).提供分布式事务处理的服务端,用来管理分布式事务处理过程中的事务记录,以及异常情况处理;3).提供分布式事务处理的运营

  • 分布 - 数据仓库服务 GaussDB(DWS)

    容时关闭自动分布功能,在扩容成功之后再手动使用分布功能执行分布任务,在这种分段模式下,扩容和分布都可以做到失败重试。 当前分布支持离线分布和在线分布两种模式,默认情况下,提交分布任务时将选择离线分布模式。 在分布开始前或分布暂停过程中,支持对未分布的表按照schema、表维度设置重分布优先级。

  • DAOS 分布式异步对象存储|Pool

    Pool 是分布在不同存储节点上的一组 Target,在这些存储节点上分布数据和元数据以实现水平可伸缩性,并对其进行复制或纠删码编码以确保持久性和可用性(请参考 DAOS 分布式异步对象存储存储模型 DAOS Pool 一节)。 Pool Service Pool Service

    作者: debugzhang
    发表时间: 2021-04-13 04:30:09
    3085
    0
  • 分布式缓存(Redis) - 开天集成工作台 MSSI

    分布式缓存(Redis) 分布式缓存(Redis)包含“String附加字符串”、“Hash删除域”、“删除键”、“List删除表头元素”等执行动作。 连接参数 分布式缓存(Redis)连接器使用IAM认证,连接参数说明如表1所示。 表1 连接参数说明 名称 必填 说明 示例值/默认值

  • 分布式数据库:概念与解析

    案。什么是分布式数据库?分布式数据库是一个数据库系统,其中的数据存储在多个物理位置,这些位置通过网络相互连接。每个位置都有一个数据库管理系统(DBMS)的实例,可以独立地处理本地数据。这些DBMS实例可以协同工作,以提供全局的数据访问和管理能力。主要特点:物理分布:数据在物理上分

    作者: 炒香菇的书呆子
    41
    2
  • 分布式消息 DMS

    分布式消息 DMS 华为分布式消息服务(Distributed Message Service,简称DMS)是一项基于高可用分布式集群技术的消息中间件服务,提供了可靠且可扩展的托管消息队列,用于收发消息和存储消息。使用DMS,可以创建消息队列,将消息队列作为一个传输