已找到以下 10000 条记录。
  • 云计算-构建Ceph集群分布式存储部署

    Ceph是一种软件定义存储,Ceph的分布式基因使其可以轻易管理成百上千个节点、PB级及以上存储容量的大规模集群,同时基于计算的扁平寻址设计使得Ceph客户端可以直接和服务端的任意节点通信,从而避免因为存在访问热点而导致性能瓶颈。Ceph是一个统一存储系统,即支持传统的块、文件存储协议,例如

    作者: 嚯嚯嚯www
    发表时间: 2022-05-17 12:06:56
    1295
    0
  • 分布式缓存之Memcached

    分布式缓存       分布式缓存出于如下考虑:首先是缓存本身的水平线性扩展问题,其次是缓存大并发下本身的性能问题,再次避免缓存的单点故障问题(多副本副本一致性)。       分布式缓存的核心技术包括首先是内存本身

    作者: SHQ5785
    发表时间: 2024-05-31 14:39:10
    20
    0
  • 分布式缓存之Memcached

    分布式缓存       分布式缓存出于如下考虑:首先是缓存本身的水平线性扩展问题,其次是缓存大并发下本身的性能问题,再次避免缓存的单点故障问题(多副本副本一致性)。       分布式缓存的核心技术包括首先是内存本

    作者: SHQ5785
    发表时间: 2023-12-07 08:51:57
    42
    0
  • 【MindSpore】【分布式】添加自动化分布式运行字段后报错

    在不启用如下分布式的字段时,训练任务正常运行: ```python context.set_auto_parallel_context(parallel_mode=ParallelMode.AUTO_PARALLEL, gradients_mean=False) ``` 但是在启

    作者: 编程大赛最佳伴侣
    5500
    11
  • 【atlas800-9000-mindspore】【分布式训练】分布式训练退出,Device 0 is occupied

    910_mindspore:v0.5.0-ubuntu-py37-arm64 ``` # mindspore training ## 分布式训练 ### rank_table_2pcs.json ```json {     "board_id": "0x0020",     "chip_info": "910"

    作者: 软星包子
    4416
    8
  • 分布式进阶(二十) Kafka简介

    有(N+M)个broker,那么其中有N个broker存储该topic的一个partition,剩下的M个broker存储该topic的partition数据。 如果某topic有N个partition,集群中broker数目少于N个,那么一个broker存储该topic的一

    作者: SHQ5785
    发表时间: 2020-12-29 16:31:50
    1953
    0
  • 分布式概念

    RPC(remote procedure call) 整个应用分散成多个服务使得整个系统变得更为复杂。我们需要在分布式开发中引入额外的技术,以解决服务之间交互和分布式部署导致的问题。 RPC(远程过程调用),即在本地调用远程机器的函数或者对象方法,使实际的体验和调用本地函数或者对象方法无异。

    作者: 武师叔
    发表时间: 2022-09-29 08:38:52
    135
    0
  • 分布式消息服务DMS和分布式消息服务Kafka是什么关系?

    分布式消息服务DMS和分布式消息服务Kafka是什么关系?

    作者: tianzongyun
    4994
    0
  • 缩容实例分片(分布式) - 云数据库 GaussDB

    选择删除分片数量。单击“下一步”。 图2 分片缩容 确认无误后,单击“提交”进行分片数量缩容。 一个分片中默认包含个DN副本,因此每删除一个分片会缩减个DN副本。 父主题: 扩容和缩容实例

  • MRS支持什么类型的分布式存储? - MapReduce服务 MRS

    MRS支持什么类型的分布式存储? 问: MRS集群支持什么类型的分布式存储?有哪些版本? 答: MRS集群内使用主流的大数据Hadoop,目前支持Hadoop 3.x版本,并且随集群演进更新版本。 同时MRS也支持用户将数据存储在OBS服务中,使用MRS集群仅作数据计算处理的存算分离模式。

  • 【云知易】RDS关系型数据库 入门 03 创建只读副本

    指导您创建只读副本。RDS集群创建成功后,可根据业务需要创建只读副本,但这将产生一定的费用。只读副本的CPU/内存和数据库端口可以重新配置,存储空间以及类型与主实例保持一致。在创建只读副本之前,您需要注意一下内容。租户可用余额不足100元,此时将不允许新增只读副本。一个集群中,最多可以增加5个只读副本。RDS

    作者: 阅识风云
    发表时间: 2017-12-21 03:34:21
    3242
    0
  • KafKa - 分区副本ISR选举机制

    这些副本分散的保存在不同的Broker上,从而能够对抗部分Broker宕机带来的数据不可用。 如下图,在3节点的 kafka 集群中,对 topic:主题1 分了个分区副本。 在 kafka 分区中的副本机制中,又分了 Leader 节点 和 Follower 节点,消息会写到Leader

    作者: 小毕超
    发表时间: 2022-06-23 14:22:01
    391
    0
  • redis 实现分布式

    redis 实现分布式锁Redis 分布式锁其实就是在系统里面占一个“坑”,其他程序也要占“坑”的时候,占用成功了就可以继续执行,失败了就只能放弃或稍后重试。占坑一般使用 setnx(set if not exists)指令,只允许被一个程序占有,使用完调用 del 释放锁。

    作者: 火灵
    1150
    0
  • 分布式数据库架构

    分布式数据库总体设计有两个思路和方向,一个是基于共享存储的架构(share everything),另一个是基于数据分片的架构(share nothing)。共享存储的架构特点是底层存储共用一份数据池子,上层数据库server层可以弹性扩展,典型的案例像DB2 pureScale,Oracle

    作者: 重新来过
    4464
    1
  • 注册个人分布式身份 - 可信分布式身份服务 TDIS

    注册个人分布式身份 功能介绍 注册个人分布式身份 URI POST /v1/{project_id}/tdis/did 表1 路径参数 参数 是否必选 参数类型 描述 project_id 是 String 租户从IAM申请到的projectid,一般为32位字符串 最小长度:32

  • 注册企业分布式身份 - 可信分布式身份服务 TDIS

    注册企业分布式身份 功能介绍 注册企业分布式身份 URI POST /v1/{project_id}/tdis/firm-did 表1 路径参数 参数 是否必选 参数类型 描述 project_id 是 String 租户从IAM申请到的projectid,一般为32位字符串 最小长度:32

  • 指导文档bug提醒-ceph14.2.1分布式存储

    html问题现象:安装ceph报错一个软件未安装成功 解决: 增加安装Deltarpm包(增量 RPM 套件)的步骤:yum -y  install deltarpm 、问题位置https://support.huaweicloud.com/instg-kunpengsdss/kunpengcephblock_03_0005

    作者: benzwong
    3687
    1
  • 分布式复制系统设计-总结

    多台机器保留多份相同的数据副本,需仔细考虑并发和所有可能出错并处理。至少,需处理好: 节点不可用 网络中断 这里甚至不考虑更隐蔽的失效场景,如由于bug导致的无提示的数据损坏。 多副本方案: 主从复制 所有客户端将写都发到单主节点,该节点将数据更改事件发送到其他副本(从节点)。每个副本都能接收读请求,但内容可能过期

    作者: JavaEdge
    发表时间: 2022-08-21 05:27:07
    207
    0
  • Hive分布式数据仓库(1)

           Hive 是基于Hadoop构建的一套数据仓库分析系统,用来进行数据提取、转化、加载,这是一种可以存储、查询和分析存储在Hadoop中的大规模数据的机制。Hive数据仓库工具能将结构化的数据文件映射为一张数据库表,并提供SQL查询功能,能将SQL语句转变成MapRe

    作者: 胡辣汤
    1370
    0
  • 分布式数据库目标

    发了一系列新的分布式问题:分布式sql:与单机SQL兼容性支持的分片模式分布式事务:事务隔离级别事务ACID特性分布式负载均衡负载均衡度数据重分布水平分布式管理集权管理工具集群监控工具Gauss100-OLTP分布版本优秀的sharding架构,需要解决传统挑战,还要完美应对引入

    作者: GaussDBA
    2763
    0