内容选择
全部
内容选择
内容分类
  • 学堂
  • 博客
  • 论坛
  • 开发服务
  • 开发工具
  • 直播
  • 视频
  • 用户
时间
  • 一周
  • 一个月
  • 三个月
  • 【云驻共创】完全零基础,怎样入门大数据?

    由于每个人的学习能力稍有不同,故而学习时间上会有些出入,不要妄自菲薄,只要认真学习,都可以学有所成。  我会从个方向说明学习过程,可以进行快速入门,当然个人建议大学生们夯实基础,逐一进行,已经工作的可以跳过基础,直接进入第部分。 1、大数据发展趋势(目的:帮助您坚定思想) 2、大数据基础铺垫(目的:帮助您打牢基础)

    作者: 红目香薰
    发表时间: 2022-02-23 07:39:58
    1095
    0
  • 为什么我要选择 Spark on K8s?

    然而,伴随着信息量的指数级增长,大数据也开始面临存储资源告急、算力吃紧、数据处理效率无法满足业务增长诉求等一系列问题,导致唱衰之声此起彼伏。而近年来兴起的容器技术,以其轻量化、易迁移、扩容快等优势,结合计算存储分离的分布式架构,可以更好地发挥大数据平台在海量数据集、高并发、实

    作者: 鲲鹏小玩家
    发表时间: 2020-02-12 02:09:01
    4095
    0
  • 小熊派+FATFS:存储采集的数据

    以及获取六轴数据:[小熊派+Mpu6050:获取轴加速度、轴陀螺仪数据](https://bbs.huaweicloud.com/forum/forum.php?mod=viewthread&tid=121250&page=1&extra=#pid1027241)。 本文,将获取的数据存储于SD卡中,便于后面我们对数据进行分析利用。

    作者: ttking
    1760
    1
  • 云计算产品设计脑洞

    er等轻量级虚拟机实现。这个系统的拥有者是用户,而组织内的成员可以向用户推送各种工作APP及更新。这个系统的所有持久化数据都存储在云端、本地运行的是一个副本,定期和云端同步。云端存有所有的数据和历史。</align> 以上只是硬件部分和基础架构部分,citrix和vmware

    作者: 难易
    10264
    2
  • 利用虚拟机实现磁盘阵列 RAID5磁盘配额小实践

    of Independent Disks):独立冗余磁盘阵列,简称磁盘阵列。RAID是按照一定的形式和方案组织起来的存储设备,它比单个存储设备在速度、稳定性和存储能力上都有很大提高,并且具备一定的数据安全保护能力。 RAID 的主要实现方式分为硬件RAID 方式和软件RAID 方式:

    作者: Jack20
    发表时间: 2021-06-25 02:16:45
    4338
    0
  • 深度学习之小批量误差

    算不同样本上单独的更新。换言之,我们在计算小批量样本 X 上最小化 J(X) 的更新时,同时可以计算其他小批量样本上的更新。这类异步并行分布式方法将在进一步讨论。小批量随机梯度下降的一个有趣动机是,只要没有重复使用样本,它将遵循着真实泛化误差的梯度。很多小批量随机梯度下降方法的实

    作者: 小强鼓掌
    315
    1
  • 华为HCIP-AI认证题库中的部分问题

    接口调用. A:True B:False 答案:A 29、第方应用在使用HIAI Engine-ASR的接口识别来自mic的录音时,需要打开的权限是? A:麦克风权限 B:不需要申请权限 C:存储权限 D:通讯录权限 答案:A 30、对远程真机的描述正确的是?

    作者: AI浩
    发表时间: 2021-12-22 16:20:55
    1271
    0
  • serverless 开源框架对比

    云计算的下一代计算范式,Everything is Serverless 无服务器和传统云计算之间的个基本区别是: 解耦计算和存储;它们分别缩放并独立定价, 通常存储由独立服务提供,计算是无状态的 执行一段代码而不是分配执行代码的资源的抽象。用户提供一段代码,云端自动配置

    作者: Leo Xiao
    发表时间: 2021-03-09 02:11:15
    8563
    3
  • 上干货!大厂面试走心经验分享!

    )(逮住 Redis 真就往死里问啊)看你博客里有微服务,讲讲微服务、分布式?项目中各个服务之间怎么调用的?我说用 JSF(JSF 是京东内部的RPC通信工具,类似于 dubbo)分布式 CAP 定理讲讲分布式事务解决方案,各自优缺点(内心。。。还好前几天看过)写题 忘记具体是啥了

    作者: cxuan
    发表时间: 2021-07-14 18:02:57
    1111
    0
  • 通过HPA+CronHPA组合应对业务复杂弹性伸缩场景

    ▍背景 在k8s集群中,容器水平自动伸缩(HPA),可以根据容器资源的使用量,在设置好的副本范围内,自动扩缩容工作负载副本数(replicas)。HPA是基于指标阈值进行伸缩的,常见的指标有CPU和内存。也可以通过自定义指标,例如QPS、连接数等进行伸缩。但是存在一种场景:基于

    作者: 云容器大未来
    发表时间: 2024-05-16 11:15:43
    159
    0
  • 《Spark数据分析:基于Python语言 》 —3.4.3 回顾本地模式

    个JVM中。本章已经介绍过,这种形式对于开发、单元测试,还有调试,都是很有用的,但是对于运行生产环境的应用还有不足之处,因为这种形式不是分布式的,无法伸缩扩展。另外,本地模式下Spark应用中失败的任务默认不会重新执行。当然,这部分行为也是可以通过重载来避免的。在以本地模式运行S

    作者: 华章计算机
    发表时间: 2020-02-12 11:16:03
    1770
    0
  • OBS对象存储服务介绍

    本视频介绍了华为云对象存储服务OBS的基本概念、产品优势、应用场景及使用方式。

    播放量  5940
  • 支持鲲鹏!厦门出台政策培育鲲鹏计算产业!

    新增高科技就业岗位超过10000个。”&nbsp;软件园期(厦门日报资料图片)“到2025年,全市至少培育或引进3家全球性行业领军企业,涵盖研发设计、生产制造、集成、创新等领域。鲲鹏产业生态不断完善,聚集一批国内知名的鲲鹏产业链上下游(OS、分布式存储、数据库、中间件、大数据平台、云服务、应用

    作者: 云舒云卷
    发表时间: 2020-06-17 09:21:23
    5297
    0
  • KUNPENG平台GlusterFS6.5.0移植自动安装脚本

    1 GlusterFS简介GlusterFS是一个开源的分布式文件系统,是Scale存储的核心,能够处理千数量级的客户端。是整合了许多存储块(server)通过Infiniband RDMA或者 Tcp/Ip方式互联的一个并行的网络文件系统。容量可以按比例的扩展,且性能却不会因此

    作者: 行解大鹏
    4766
    0
  • GaussDB中的视图管理

    GaussDB中的视图管理引言数据库管理是企业数据存储和分析的核心。GaussDB作为华为推出的一款高性能分布式数据库,它提供了强大的数据管理功能,包括数据的存储、查询、更新和删除等。在这些功能中,视图(View)是一个重要的概念,它允许用户以一种逻辑上简化的方式访问和操作数据。

    作者: 炒香菇的书呆子
    6
    1
  • 【鲲鹏翱翔】大数据组件03-Hbase2.1.0移植安装指南

    1.   简介HBase–Hadoop Database,是一个高可靠性、高性能、面向列、可伸缩的分布式存储系统,利用HBase技术可在廉价PC Server上搭建起大规模结构化存储集群,海量数据的快速随机访问。2.   部署环境Packet NameVersionDetailCentOSCentOS

    作者: 南七技校林书豪
    3694
    3
  • Ceph测试调优案例分享

    发现在出现掉速为0时,会出现某个OSD盘的时延超高,达到秒级。根据ceph的写入流程,首先会向主OSD写入数据,随后向两个副本osd写入数据。当全部副本写入完毕,流程结束。若一个流程阻塞,会阻塞整体的写入。         为了验证是否为磁盘影响,通过blktrace命令分析磁盘一段时间内的读写过程。1

    作者: luyao@汪汪队
    10454
    3
  • 近期更新的GaussD技术好文十篇

    近期更新的GaussD技术好文十篇《GaussDB T 1.0.2分布式集群TPC-C之BenchmarkSQL性能测试》https://www.modb.pro/db/22557《GaussDB T 1.0.2单机环境TPC-C之BenchmarkSQL性能测试》https://www

    作者: ToyaAkira
    2448
    2
  • Orchestra: 通过全局一致聚类的无监督联邦学习

    技术并没有设计成具有上面列出的属性。为了解决这种情况,我们提出了一种新的无监督联邦学习技术Orchestra,它利用联邦的层次结构来编排分布式集群任务,并强制将客户的数据全局一致地划分为可识别的集群。我们展示了Orchestra的算法流程在线性探测下保证了良好的泛化性能,允许它在

    作者: 可爱又积极
    324
    1
  • 就是越来越好用,MindSpore自动安装!CPU一键安装

    量子奇异值, 很容易理解3:        1.  分区不够详细, 像MindQuantum我觉得就可以自成一块       2. 关于分布式并行的干货特别少,只有30条,不太能答疑解惑4:        CSDN: https://bbs.csdn.net/topics/607068336

    作者: yy_ds_922992
    339
    0