内容选择
全部
内容选择
内容分类
  • 学堂
  • 博客
  • 论坛
  • 开发服务
  • 开发工具
  • 直播
  • 视频
  • 用户
时间
  • 一周
  • 一个月
  • 三个月
  • dataset模块总览

    PKSampler | PK采样器,在指定的数据集类别P中,每种类别各采样K条数据。 | | DistributedSampler | 分布式采样器,在分布式训练中对数据集分片进行采样。 |表格出自MindSpore官方采样器的使用方法,先调用采样器类中的初始化方法将其实例化为对象,再讲

    作者: 钟文
    447
    0
  • Java整合RocketMQ实现生产消费

    RocketMQ 的分布式事务消息功能,在普通消息基础上,支持二阶段的提交能力。将二阶段提交和本地事务绑定,实现全局提交结果的一致性。 第一阶段会发送一个半事务消息,半事务消息是指暂不能投递的消息。 如果发送成功则执行本地事务,并根据本地事务执行成功与否,向 Broker 半事务消息状

    作者: 王二蛋!
    发表时间: 2024-01-25 21:08:40
    6
    0
  • Flume从搭建到实战

    x的称为Flume OG。 Flume目前只有Linux系统的启动脚本,没有Windows环境的启动脚本。 、Flume NG的介绍 3.1 Flume特点 flume是一个分布式、可靠、和高可用的海量日志采集、聚合和传输的系统。支持在日志系统中定制各类数据发送方,用于收集数据;同时

    作者: SHQ5785
    发表时间: 2022-07-08 12:37:55
    503
    0
  • 【手把手带你玩转HetuEngine】(二)HetuEngine应用场景与案例

    不必要的数据读取,有效减少IO与网络传输,提升性能 PB级数据秒级响应 MPP架构,算力资源、存储资源横向扩展,从容实现PB级海量数据高并发秒级响应 单租户并发1000 分布式架构,有效破解传统MPP并发瓶颈。单租户并发达1000+ 智能预计算  基于智

    作者: HetuEngine九级代言
    发表时间: 2023-07-03 14:55:24
    205
    0
  • Apriori算法的理论基础、应用

    例子: 若数据集中有100个商品,每一笔交易都可以通过一个100位的位向量来表示。这种方式可以显著减少数据的存储需求。 使用Hashing技术 通过使用哈希表来存储候选项集和它们的计数,可以加速支持度的计算。 例子: 在生成候选项集时,可以使用哈希函数来将项集映射到哈希表的一个位置,并在该位置增加相应的计数。

    作者: TechLead
    发表时间: 2023-11-15 18:55:18
    19
    0
  • 【云驻共创】与学长共话成长,领跑毕业新未来

    面。转发面则接收控制面的指令,基于统计复用进行快速转发。 传统分布式网络存在的问题: 1. 配置复杂,随着网络规模的增大以及协议的演进,网络的配置越来越复杂,以至于在一台台设备上单独去配已经不可持续 2. 分布式系统的控制面对全网信息的感知能力有限,从实时性和消息的广泛性都有一

    作者: 宇宙之一粟
    发表时间: 2022-09-27 07:05:23
    384
    0
  • 【Django开发】前后端分离django美多商城项目第5篇:短信验证码,1. 避免频繁发送短信验证码逻辑分析【附代码文档】

    pipeline通过减少客户端与Redis的通信次数来实现降低往返延时时间。 实现的原理 实现的原理是队列。 Client可以将个命令放到一个tcp报文一起发送。 Server则可以将条命令的处理结果放到一个tcp报文返回。 队列是先进先出,这样就保证数据的顺序性。 2. pipeline操作Redis数据库

    作者: 程序员一诺python
    发表时间: 2024-08-23 20:37:10
    57
    0
  • 云计算&云服务,傻傻分不清?

    t><b>云计算</b></align><align=left>“云计算”是指一种<b>技术架构</b>,主要包含了虚拟化、自动化部署、分布式计算等技术,这个技术架构的优点是可以对外表现非常优秀的并行计算性能、规模伸缩性和健壮性。</align> <align=left><b>云

    作者: 花粉
    5835
    1
  • GaussDB(DWS)负载管理核心技术解密五: 空间管控解密

    DWS)通过在创建用户时指定存储空间的 大小实现对存储资源的管理,包括指定:永久表存储空间(PREM SPACE)、临时表 存储空间(TEMP SPACE)及算子落盘空间(SPILL SPACE)。存储空间管理支持对组用户和业务用户的存储空间管理,当业务用户对应的组用户存 在空间

    作者: wangjx_huawei
    发表时间: 2021-05-24 08:57:15
    1903
    0
  • Apache Doris 2.1.5 版本正式发布

    24 日正式发布。2.1.5 版本在湖仓一体、多表物化视图、半结构化数据分析等方面进行了全面更新及改进,同时在倒排索引、查询优化器、查询引擎、存储管理等 10 余方向上完成了若干问题修复,欢迎大家下载使用。 官网下载:https://doris.apache.org/ GitHub 下载:https://github

    作者: SelectDB技术团队
    发表时间: 2024-07-25 14:50:03
    3
    0
  • 2021物联网安全形势报告:去年有十亿级智能电子设备遭到攻击

    设备使用率的飞速增长。大约一半攻击发生在家庭和小微企业的网络上,直面外网的路由器首当其冲。攻击类型包括一些可疑的网络流量行为,且通常涉及分布式拒绝服务(DDoS)、暴力攻击、网络钓鱼、以及基于 DPI 策略的攻击。报告中提到的“小型路由器”,尤其常见于家庭、咖啡店和其它非工业场所

    作者: 一览芳华
    329
    9
  • 新版Redis不再“开源”,对使用者都有哪些影响?

    多线程分布式架构,可支持QPS 1w到1000w的灵活调整。GeminiDB具有稳定的低时延,平均时延&lt;1ms,P99时延&lt;2ms,保障业务24小时稳定运行。 除此之外,GeminiDB采用先进的存算分离架构,最高可支持数百TB存储,可灵活独立扩容计算、存储资源,综合降本30%+。

    作者: GaussDB 数据库
    发表时间: 2024-03-27 09:18:35
    0
    0
  • Java 定时任务-最简单的3种实现方法-转载

    号都表示匹配所有的时间。   cron 表达式在线生成地址:https://cron.qqe2.com/  知识扩展:分布式定时任务 上面的方法都是关于单机定时任务的实现,如果是分布式环境可以使用 Redis 来实现定时任务。  使用 Redis 实现延迟任务的方法大体可分为两类:通过 ZSet

    作者: 泽宇-Li
    32
    0
  • 【网络安全】你必须知道的几个网络安全概念

    等功能现已成为标准。 二、 DDoS防御 DDoS防御可以限制分布式拒绝服务 (DDoS) 攻击对网络操作的破坏性影响,采用多层方式保护防火墙内部的网络资源以及组织外部的资源,例如来自互联网服务提供商或内容交付网络的资源。 、安全访问服务边缘(SASE) 安全访问服务边缘(SASE

    作者: 行云管家
    发表时间: 2022-01-13 07:06:16
    764
    0
  • TPOPS上进行数据库实例备份失败

    SYS_EXCEPTION:OP_STATUS_FAILURE备份计划配置参数如下-存储方式:NASNAS服务器部署模式:单服务器备份类型:全量备份方式:手动备份存储容量告警阈值(%):80备份根路径 :/data/backup分布式gaussdb库的数据库实例挂载的nas如下:[root@localhost

    作者: 余生吃蔬菜
    38
    2
  • 一篇文章搞懂数据仓库:常用ETL工具、方法

    目录 一、什么是ETL? 二、ETL &amp;&nbsp;ELT 、常用的ETL工具 3.1 sqoop 3.2 DataX 3.3&nbsp;Kettle 3.4&nbsp;canal 3.5 StreamSets 四、ETL加载策略 4.1 增量 4

    作者: 不吃西红柿
    发表时间: 2021-07-14 17:34:11
    10822
    0
  • 【Redis基础】一起读懂Redis持久化机制(RDB+AOF 图文详解)

    主线程和 bgsave 子进程相互不影响。但是,如果主线程要修改一块数据,那么,这块数据就会被复制一份,生成该数据的副本。然后,bgsave 子进程会把这个副本数据写入 RDB 文件,而在这个过程中,主线程仍然可以直接修改原来的数据。 自动触发:自动触发是由我们的配置文件来完成的。

    作者: 辰兮
    发表时间: 2022-03-22 16:53:09
    381
    0
  • 认识弹性云服务器应用场景

    、Hadoop计算密集型。推荐使用磁盘增强型弹性云服务器,主要适用于需要对本地存储上的极大型数据集进行高性能顺序读写访问的工作负载,例如:Hadoop分布式计算,大规模的并行数据处理和日志处理应用。主要的数据存储是基于HDD的存储实例,默认配置最高10GE网络能力,提供较高的PPS性能和网络低

    作者: 建赟
    2887
    1
  • HDC.Cloud |【鲲鹏云移植】【干货分享】Disconf 2.6.35安装指导

    1、软件介绍Disconf是一个分布式配置管理平台,专注于各种「分布式系统配置管理」的「通用组件」和「通用平台」, 提供统一的「配置管理服务」。2、预制条件Disconf需要依赖openjdk,Mariadb,Tomcat,Nginx,zookeeper,redis,需提前安装好,本次安装基于euler2

    作者: 李耳King
    2573
    0
  • 基于MindStudio的TensorFlow模型开发 使用TensorFlow GPU2Ascend

    训练的顺利执行。Distributed Strategy分布式策略。如果原始脚本支持分布式训练,需要指定原始脚本使用的分布式策略,便于工具对分布式脚本进行自动迁移。打开此开关,在下方出现的下拉框中选择原始脚本中使用的分布式策略。tf.distributed.Strategyhor

    作者: yd_238274089
    70
    0