内容选择
    内容分类
    学堂 博客 论坛 开发服务 开发工具 直播 视频 用户
    时间
    一周 一个月 三个月
    内容选择
    全部
    内容选择
    内容分类
    • 学堂
    • 博客
    • 论坛
    • 开发服务
    • 开发工具
    • 直播
    • 视频
    • 用户
    时间
    • 一周
    • 一个月
    • 三个月
    重置 确定

    • Spark---核心

      性。 RDD之间依赖关系，可以基于上一个RDD重新计算出RDD。 哪里体现RDD的分布式 RDD是由Partition组成，partition是分布在不同节点上的。 RDD提供计算最佳位置，体现了数据本地化。体现了大数据中”计算移动数据不移动“的概念。 2、Java和Scala中创建RDD的方式

      开发者  >  博客
      作者： 前进的蜗牛
      发表时间： 2023-11-21 11:08:24
      32
      0

    • Ceph对象存储 安装指南 （CentOS 7.6 & openEuler 20.03）

      介绍Ceph是一个统一的分布式存储系统，设计初衷是提供较好的性能、可靠性和可扩展性。它支持用3种方式存储数据，分别为：对象存储、块设备存储、文件系统存储。Ceph项目最早起源于Sage就读博士期间的工作（最早的成果于2004年发表），并随后贡献给开源社区。在经过了数年的发展之后，

      开发者  >  其他
      作者： 大西瓜
      16372
      0

    • Zipkin基础知识介绍

      可以打开浏览器访问 http://ip:9411 即可。 三、Zipkin架构 架构图如下： 如上图所示，各业务系统在彼此调用时，将特定的跟踪消息传递至zipkin，zipkin在收集到跟踪信息后将其聚合处理、存储、展示等，用户可通过web UI方便获得网络延迟、调用链路、系统依赖等等。

      开发者  >  博客
      作者： SHQ5785
      发表时间： 2023-12-06 09:42:28
      37
      0

    • 《重新定义Spring Cloud实战》

      社区生态和理解分布式系统架构原理的一本实践参考。相信本书对一线架构师拓展技术视野，实践落地微服务架构有所帮助。也感谢许进对Spring Cloud和微服务架构在国内的推广所做出的贡献。杨波拍拍贷基础架构研发总监，资深架构师，极客时间《微服务架构和实践160讲》作者Preface 3

      开发者  >  博客
      作者： 华章计算机
      发表时间： 2019-06-04 15:32:46
      17018
      0

    • 浅谈基于 OpenStack 和 k8s 轻量研发私有云建设

      上手技术门槛较高，最痛苦的事情，莫过于看它的架构。 不信？好，扔个 OpenStack 架构图给你看： 我还是用一个简单的图吧，看得更明白些。如下： k8s 架构图如下： 看上去比 OpenStack 的架构图稍微好点，不过从技术上来说也是比较复杂的。 拥抱开源面临的困难 云计算发展到今天，无论是

      开发者  >  博客
      作者： zuozewei
      发表时间： 2021-07-19 09:42:46
      6594
      0

    • 2024 年全国大学生物联网设计竞赛（华为杯）命题华为赛道数通赛题--交流贴

      【赛题任务】边缘计算是在靠近物或数据源头的网络边缘侧，融合网络、计算、存储、应用核心能力的分布式开放平台，就近提供边缘智能服务，满足行业数字化在敏捷联接、实时业务、数据优化、应用智能、安全与隐私保护等方面的关键需求。它可以作为连接物理和数字世界的桥梁，使能智能资产、智能网关、智能

      开发者  >  其他
      作者： 华为--马老师
      338
      2

    • 最适合计算机大学生的Java毕业设计项目--音乐视频网站系统！

         随着社会的快速发展，计算机的影响是全面且深入的。人们生活水平的不断提高，日常生活中人们对音乐方面的要求也在不断提高，听歌的人数更是不断增加，使得音乐网站的设计的开发成为必需而且紧迫的事情。音乐网站的设计主要是借助计算机，通过对音乐网站的设计所需的信息管理，增

      开发者  >  博客
      作者： Java李杨勇
      发表时间： 2022-07-31 02:53:40
      778
      0

    • 【DTSE Tech Talk 精选问答】NO.70丨openGemini兼容普罗生态，云原生可观测性新势力

      rtex作为其分布式方案虽提高了可扩展性和稳定性，但在海量时间线和范围查询时仍面临成本高性能低的问题。OpenGemini兼容Promtheus读写API，充分发挥其存储底座和向量化计算引擎的优势，在多场景下表现优异。本次直播主要介绍OpenGemini的基本架构、性能提升的关键

      开发者  >  其他
      作者： 云小宅
      39
      2

    • Flink-CDC解析（第47天）-转载

      而基于查询的方式是很难做到增量同步的。  从架构角度去看： 该表将架构分为单机和分布式，这里的分布式架构不单纯体现在数据读取能力的水平扩展上，更重要的是在大数据场景下分布式系统接入能力。例如 Flink CDC 的数据入湖或者入仓的时候，下游通常是分布式的系统，如 Hive、HDFS、Iceberg、Hudi

      开发者  >  其他
      作者： 泽宇-Li
      420
      4

    • 《OpenStack高可用集群（上册）：原理与架构》—2.2.2　镜像服务Glance

      nce支持多种后端存储服务，例如本地文件系统作为存储介质、Swift（OpenStack Object Storage）作为存储介质或者AWS S3兼容的API作为存储介质以及分布式存储集群Ceph等。Glance作为OpenStack的一个核心系统项目，其架构是基于组件设计的，

      开发者  >  博客
      作者： 华章计算机
      发表时间： 2019-05-28 22:00:38
      3989
      0

    • 走向批处理-交互式分析一体化： Trino容错模式深度测评与思考

      确保HDFS上的残留文件及时被清理，避免存储空间耗尽 华为云交互式分析引擎HetuEngine基于三层服务化+容器化架构，可有效应对上述挑战： 针对问题1： 借助于全容器化的部署架构，HetuEngine的任一计算实例（对应于1个分布式Trino集群）中的任一软件进程在发生故障

      开发者  >  博客
      作者： HetuEngine九级代言
      发表时间： 2023-09-19 16:56:39
      2559
      0

    • Hbase（一） 简介

      S3：s3:（基于块）s3n:（原生模式，不超过5G）单机和分布式运行模式 单机模式：是默认模式，使用本地文件系统，ZK和HBASE运行在一个JVM中 伪分布式：一个主机，多个进程的模拟分布式，基于HDFS文件系统 分布式：conf/hbase-site.xml的属性hbase.cluster

      开发者  >  博客
      作者： 大数据小粉
      发表时间： 2016-11-11 14:15:33
      9500
      0

    • 《Spring Cloud微服务架构进阶》——2.2　Spring Cloud特性

      Cloud提供了多种方式来促进云原生开发风格。Spring Cloud提供了一系列组件，可以在分布式系统中直接使用，这些组件大大降低了分布式系统的搭建和开发难度。这些组件大多数由Spring Boot提供，Spring Cloud在此基础上添加了分布式系统的相关特性。Spring Cloud依赖于Spring Cloud

      开发者  >  博客
      作者： 华章计算机
      发表时间： 2019-06-02 23:43:49
      6120
      0

    • 漫谈“数据湖”之价值与架构

      orm、Flink等支持流式处理等特殊计算方式。由于Hadoop的可扩展性，可以很方便地实现全量数据存储。结合数据生命周期管理，可做到全时间跨度的数据管控。4.3 数据湖 vs 云计算云计算采用虚拟化、多租户等技术满足业务对服务器、网络、存储等基础资源的最大化利用，降低企业对IT

      开发者  >  博客
      作者： SUNSKY
      发表时间： 2019-09-02 20:11:10
      6775
      0

    • 【问答官】作为AI专业初学者，专注计算机视觉算法，要求的技术栈有哪些，有无推荐的学习路线

      作为AI专业初学者，专注计算机视觉算法，要求的技术栈有哪些，有无推荐的学习路线

      开发者  >  其他
      作者： 陈皮陈皮我吃陈
      1226
      2

    • java实现编辑距离算法(levenshtein distance)，计算字符串或者是文本之间的相似度【附代码】

      表里的每一个值都代表着将str1转换成str2所需要的步数，每个单元格的值都遵循这样一个规律，第一行和第一列都是从0到n；其他的值要分情况计算，行索引和列索引对比大小，相同的话直接取左上方单元格的值，不同的话对比其左上方、左边、上边，找到三个单元格之中的最小值再加1即这个单元格的值。

      开发者  >  博客
      作者： 扎哇太枣糕
      发表时间： 2022-05-17 00:29:58
      417
      0

    • kafka解决了什么问题？

      在互联网事业中一展宏图。借助云计算，很容易开发出如下原型系统： 1.Web应用：部署在云服务器上，为个人电脑或者移动用户提供的访问体验。 2.SQL数据库：为Web应用提供数据持久化以及数据查询。 这套架构简洁而高效，很快便能够部署到华为云等云计算平台，以便快速推向市场。互联网不就是讲究小步快跑嘛！

      开发者  >  博客
      作者： 拿烟斗的小男孩
      发表时间： 2017-11-28 14:51:23
      10598
      0

    • 重磅！AI&数据系列新品发布，加速千行百业智能升级

      应用为中心的转变，并依托分布式云架构，将服务延伸到业务所需的地方，为企业业务创新提供弹性、敏捷、智能的云原生架构和云服务。目前，80%的中国Top50互联网企业已经选择了华为云的云原生解决方案。 华为云架构与技术规划部部长朱海培表示，华为云基于两个重要架构原则构建云原生全系列产品

      开发者  >  博客
      作者： 华为云头条
      发表时间： 2021-06-18 06:22:08
      1895
      0

    • Spark01 —— Spark基础

      RDD是描述数据存储位置的(主要数据抽象)，并不实际存储数据。 RDD是一个大的不可变、分区、并行处理的数据集合，每个子集合就是一个分区，存储在集群的工作节点上的内存和硬盘。 RDD是数据转换的接口，数据规模经过转换越来越小，最终指向目标数据类型， RDD指向了 ​ 或存储在Hive(

      开发者  >  博客
      作者： Byyyi耀
      发表时间： 2024-05-06 10:27:51
      27
      0

    • 《OpenStack高可用集群（上册）：原理与架构》—2.2.7　其他OpenStack服务

      eat是一种编排引擎，Heat能够利用基于文本的模板文件同时部署多个复杂的云应用，用户在模板中写入量化的基础架构资源，这些资源可以包括实例模板配置参数、浮动IP地址、存储设备、安全组和用户等，之后用户便可使用此模板进行批量部署。Ceilometer。Ceilometer是Open

      开发者  >  博客
      作者： 华章计算机
      发表时间： 2019-05-28 22:13:02
      3825
      0
    总条数： 10000
    点击加载更多