已找到以下 10000 条记录
  • 分布式集群控制管理

    我的Ubuntu上是没有这个文件的,到后来才知道采用 Upstart方式的Ubuntu上是没有inittab这个文件的。在旧式的System V initialization中,/etc/inittab可是个相当重要的文件。init进程启动后第一时间

    作者: SHQ5785
    发表时间: 2023-12-08 11:01:32
    41
    0
  • Hbase伪分布式模式部署

    类似,HBase也可以在伪分布式模式下进行部署。在伪分布式模式中,HBase运行在单个节点上,每个HBase守护进程(包括HMaster、HRegionServer和HQuorumPeer)运行在单独的进程中。为了体现分布式,可以使用HDFS替代本地文件系统。所以,需要首先启动HDFS。

    作者: 看山
    发表时间: 2021-09-28 14:46:35
    1409
    0
  • [openGauss] 分布式数据库能力

    [openGauss] 分布式数据库能力可获得性本特性自openGauss 2.1.0版本开始引入。特性简介基于分布式中间件shardingsphere使openGauss具备分布式数据库能力。使用32个鲲鹏920(128核)节点组网(1*shardingsphere-proxy

    作者: jerrywang1983
    62
    3
  • 干货分享 分布式并行计算

    ### 分布式计算 分布式计算是最近这些年谈到的一种新的计算方式。分布式计算就是在多个服务或者互相共享信息,这些服务既可以在同一台计算机上运行,也可以在通过网络连接起来的多台服务器上运行。也被称为集群。 使用分布式计算有很多好处。它实现了可扩展性并简化了资源共享。它还有助于提高计算过程的效率。

    作者: NengjinZheng
    258
    2
  • 分布式服务基础知识

    定要监视的文件描述符范围。 (2)注册文件描述符:使用epoll_ctl函数将需要监视的文件描述符添加到epoll对象中。 (3)处理事件:当文件描述符发生变化时,会触发epoll_wait函数等待事件的发生。在等待过程中,可以通过epoll_ctl函数取消对某个文件描述符的监视,或者添加新的文件描述符。

    作者: 赵KK日常技术记录
    发表时间: 2023-07-23 17:27:12
    18
    0
  • 分布式 id 生成器

    符号的,最高位是符号位,正数是0,负数是1,所以id一般是正数,最高位是0§ 41位时间截(毫秒级)。注意,41位时间截不是存储当前时间的时间截,而是存储时间截的差值(当前时间截 - 开始时间截)§ 这里的的开始时间截,一般是我们的id生成器开始使用的时间,由我们程序来指定的(如

    作者: 云享专家
    发表时间: 2019-10-15 17:25:49
    3540
    0
  • 分布式锁+AOP实现缓存

    1、分布式锁+AOP实现思想 随着业务中缓存及分布式锁的加入,业务代码变的复杂起来,除了需要考虑业务逻辑本身,还要考虑缓存及分布式锁的问题,增加了程序员的工作量及开发难度。而缓存的玩法套路特别类似于事务,而声明式事务就是用了aop的思想实现的。 以 @Transactional

    作者: 别团等shy哥发育
    发表时间: 2023-04-19 22:58:10
    102
    0
  • hadoop-分布式存储工作原理及名词解释

    分布式存储工作原理及流程图 上图中 主从式结构当中,由于主节点含有整个文件系统的目录结构信息,主节点是最重要的。 主节点运行的时候会把命名空间的信息都放在内存当中,因此,存储文件越多,主节点的内存就需要的越多,要求大内存 在 hadoop 中,分布式存储系统称为

    作者: 互联网老辛
    发表时间: 2021-06-08 16:58:26
    1585
    0
  • 查询申请文件

    file_desc String 文件描述 file_id String 文件ID

  • 【MindSpore1.3】分布式训练出错

    【功能模块】【操作步骤&问题现象】两台机器,每个单卡,分布式训练失败。device_ip配置和实际一致。详细信息在附件中。【截图信息】【日志信息】(可选,上传日志内容或者附件)

    作者: 橙叶子
    3065
    5
  • redis实现分布式

    前言 分布式锁一般有三种实现方式: 1. 数据库乐观锁; 2. 基于Redis的分布式锁; 3. 基于ZooKeeper的分布式锁。 本篇博客将介绍第二种方式,基于Redis实现分布式锁。虽然网上已经有各种介绍Redis分布式锁实现的博客,然而他们的实

    作者: 小鲍侃java
    发表时间: 2021-09-10 14:15:07
    1916
    0
  • 浅谈缓存与分布式

    我们的系统。 解决方案是不管这个数据是否存在,都对其进行存储,比如某个请求需要的数据是不存在的,那么仍然将这个数据的key进行存储,这样下次请求时就可以从缓存中获取,但若是每次请求数据的key均不同,那么Redis中就会存储大量无用的key,所以应该为这些key设置一个指定的过期时间,到期自动删除即可。

    作者: wangweijun
    发表时间: 2022-03-29 14:27:35
    371
    0
  • 分布式进阶(二十) Kafka简介

    roker,那么每个broker存储该topic的一个partition。 如果某topic有N个partition,集群有(N+M)个broker,那么其中有N个broker存储该topic的一个partition,剩下的M个broker不存储该topic的partition数据。

    作者: SHQ5785
    发表时间: 2020-12-30 00:31:50
    2941
    0
  • 上传申请文件

    file_desc String 文件描述 file_id String 文件ID

  • 唯快不破 华为云发布分布式编译构建系统CodeArts Build

    Build提供代码下载加速技术,通过对源码文件树进行特征识别码计算,基于构建专用的分布式文件存储系统,对源码进行权限加密和去重存储,实现文件一次缓存多次复用,大大减少了从代码仓下载文件的次数。同时,通过VPC内的专用网络通道,高效地从缓存复用代码,从而实现构建时代码的高效下载。 3、 编译速度快:大规模分布式、精准

  • 分布式缓存服务的几种规格

    本帖最后由 云彩飞扬 于 2018-1-31 14:32 编辑 <br /> <p>Redis类型的缓存实例支持“单机”、“主备”和“集群”三种实例类型。</p><p>Memcached类型的缓存实例支持“单机”和“主备”两种实例类型。</p><p>Redis和Memcache

    作者: 云彩飞扬
    3565
    0
  • 文件格式介绍 - 云数据迁移 CDM

    如果想要在文件系统间按原样复制文件,则可以选择二进制格式。二进制格式传输文件文件的速率高、性能稳定,且不需要在作业第二步进行字段匹配。 文件传输的目录结构 CDM的文件传输,支持单文件,也支持一次传输目录下所有的文件。传输到目的端后,目录结构会保持原样。 增量迁移文件 使用CD

  • 北交联合云分布式消息平台

    北交联合云分布式消息平台主要负责将同步消息处理转化为异步消息处理,用于应对前端高并发场景,缓解热点压力,提升系统可用性,增强用户体验。产品功能·发送消息-提供消息发送的客户端驱动程序。·查询消息-能够查询到生产者所发送的消息信息,出队入队的消息数量,死信数等信息。·监听消息-提供

    交付方式: License
  • 分布式缓存服务Memcached版

    分布式缓存服务Memcached版 分布式缓存服务Memcached版 分布式缓存服务Memcached版是一个高性能、分布式的缓存系统,可有效加快应用速度、提升应用的可扩展性,降低对后端数据库的性能依赖。分布式缓存服务Memcached版是兼容Memcached的内存数据库服务

  • 分布式训练功能介绍 - AI开发平台ModelArts

    相关章节 创建单机多卡的分布式训练(DataParallel):介绍单机多卡数据并行分布式训练原理和代码改造点。 创建多机多卡的分布式训练(DistributedDataParallel):介绍多机多卡数据并行分布式训练原理和代码改造点。 示例:创建DDP分布式训练(PyTorch+