内容选择
全部
内容选择
内容分类
  • 学堂
  • 博客
  • 论坛
  • 开发服务
  • 开发工具
  • 直播
  • 视频
  • 用户
时间
  • 一周
  • 一个月
  • 三个月
  • MRS IoTDB时序数据库的架构设计与实现(3)

    服务。 5.2 元数据分层管理 元数据管理策略是MRS IoTDB分布式设计中的要点。在进行元数据管理策略设计时首先要考虑元数据在读写流程中的用途: 写入数据时需要元数据进行数据类型、权限等合法性检查 查询数据时需要元数据进行查询路由。同时,由于时序数据场景中元数 据庞大,还需要考虑元数据对内存资源的消耗。

    作者: cloudsong
    发表时间: 2021-06-25 08:22:48
    3262
    0
  • 《企业级大数据平台构建:架构与实现》—— 1.1.3 服务孤岛

    1.1.3 服务孤岛企业内部各自为政的小集群的首要任务是支撑团队或项目组自身的业务场景来满足自身的需求,所以在实现功能的时候不会以面向服务的思维来抽象提炼服务,很可能都没有可以暴露出来供小集群外部使用的服务。退一步讲就算这些小集群有提供出来的服务,那么它们也缺乏统一的顶层设计,在

    作者: 华章计算机
    发表时间: 2019-06-06 15:20:05
    2928
    0
  • 万字长文带你详解数据存储引擎结构(下)

    存储文档的减少方式一种常见的压缩存储时间序列的方式是把多个数据点合并成一行。Opentsdb支持海量数据的一个绝招就是定期把很多行数据合并成一行,这个过程叫compaction。类似的vivdcortext使用MySql存储的时候,也把一分钟的很多数据点合并存储到MySql的一行以减少行数。ES可实现类似优化,那就是Nested

    作者: 技术火炬手
    发表时间: 2020-09-15 11:21:32
    7656
    0
  • ORACLE数据字典详解

      Oracle中的数据字典有静态和动态之分。静态数据字典主要是在用户访问数据字典时不会发生改变的,但动态数据字典是依赖数据库运行性能,反映数据库运行的一些内在信息,所以在访问这类数据字典时往往不是一成不变的。以下分别就这两类数据字典来论述。 1.1 静态数据字典 这类数据字典主要是由表和视图组成,应该注意的是,

    作者: SHQ5785
    发表时间: 2023-12-29 09:21:34
    44
    0
  • GaussDB集群架构

    mongos(路由)、Config(配置)和Shard(分片)组件构成。数据读写请求经dds mongos分发,通过查询config信息,并行分配到相应shard,可轻松应对高并发场景,且config和shard均采用三副本架构,保证高可用。图1 集群架构dds mongos为单节点配置,用户可以通过多个dds

    作者: Gauss松鼠会小助手2
    11
    1
  • 高并发架构系列:数据库主从同步的 3 种方案

    史上最全负载均衡原理图文详解 什么是幂等性?四种接口幂等性方案详解 史上最强大型网站演变全过程架构详解 Dubbo的详细介绍、设计思路、以及4适用场景 微服务Dubbo和SpringCloud微服务架构设计优劣势比较 如何解决Redis缓存雪崩、缓存穿透、缓存并发等5难题 我是 mikechen

    作者: mikechen的互联网架构
    发表时间: 2024-11-07 20:53:20
    0
    0
  • WEB架构的演变

    使用Freemarker来处理。 我们再来看看第四道菜:增加数据缓存 就是将数据库查到的数据进行缓存。我们接下来简单说一下数据缓存。数据缓存可以使用redis和memcache。 我们要将百分百确定很多人会用的数据将其缓存。 再看看第五道菜:增加webserver 增加了一台网

    作者: Regan Yue
    发表时间: 2021-09-23 05:03:35
    1255
    0
  • 主流大数据厂商激烈角逐湖仓一体新架构,华为云引领技术潮流

    现阶段企业对数据管理解决方案的需求,逐渐聚焦于数据如何支撑重要决策,并不断促使数据管理解决方案走向湖仓一体,提升企业的数据价值创造力。数据仓库与数据湖是企业经常会使用到的两种数据管理解决方案,数据仓库到数据湖的演进并不是替代关系,数据仓库诞生较早,借鉴了数据库的数据理念,通过预先定义

    作者: 沙漏
    3772
    0
  • 《企业级大数据平台构建:架构与实现》——2.1.7 使用场景

    2.1.7 使用场景在所有的软件架构中,底层文件系统永远都是最为重要的基础设施之一。HDFS作为Hadoop生态主要的分布式文件系统,可以说是一切其他系统的基石。1.?文件服务器因为HDFS具有分布式存储、高可用和友好的文件系统接口等特性,所以其可作为分布式文件服务器使用,用来存储海量的大型文件或附件。2

    作者: 华章计算机
    发表时间: 2019-06-06 15:45:34
    3030
    0
  • 《企业级大数据平台构建:架构与实现》—— 2.3.6 MemStore与HFile

    6 MemStore与HFile为了提高数据写入时的吞吐量,HBase并不会实时的将写入的数据直接刷入磁盘,而是先将数据放入内存中进行保管,MemStroe对象就是负责此项任务的逻辑对象,它将数据以Key-Values的形式保存在内存中。将数据直接放入内存读写虽然很快,但这样做并不

    作者: 华章计算机
    发表时间: 2019-06-06 16:06:38
    5316
    0
  • 《企业级大数据平台构建:架构与实现》——2.1.3 核心设计目标

    这一假设简化了数据一致性问题,并且使高吞吐量的数据访问成为可能。5.?移动计算比移动数据更划算一个应用请求的计算,距离它操作的数据越近就越高效,在数据达到海量级别的时候更是如此。因为这样就能降低网络阻塞的影响,提高系统数据的吞吐量。将计算移动到数据附近,比将数据移动到应用所在之

    作者: 华章计算机
    发表时间: 2019-06-06 15:40:33
    5338
    0
  • SQL Server数据架构与对象相关知识笔记

     点击并拖拽以移动 1、数据架构简介 数据架构是从SQL Server2005版本之后引入的概念。数据架构独立于创建它的数据厍用户而存在,每个对象都属于一个数据架构(对象包括表、视图、存储过程、函数、触发器等) 2、 数据库、架构数据库对象 数据架构是一个独立于数据库用户的非重复

    作者: IT技术分享社区
    发表时间: 2023-01-31 13:38:32
    90
    0
  • 如何对导出的PDF进行分类,顶层的PDF能单独显示

    业务场景:用户希望对导出的PDF进行分类,顶层的PDF能单独显示解决方案:如图:(PDF导出界面图),传统的输出方式合并界面会把顶层和底层融合到一个PDF中,利用箭头所指单独页面可对导出的PDF进行分类,一类是顶层的PDF,一类是CBB底层。如下图所示,上面的文件夹为底层原理图,下面的是顶层原理图

    作者: pEDA答疑专家3号
    20
    1
  • 万字长文带你详解数据存储引擎结构(上)

    来辅助查找数据,用以加速对数据数据的访问。考虑到经常需要范围查找,因此其索引一般使用树型结构。譬如MySQL、SQL Server、Oracle中,数据存储与索引的基本结构是B-树和B+树。 主流的NoSQL数据库则使用日志结构合并树(Log-structured Merge Tree)来组织数据。LSM

    作者: 技术火炬手
    发表时间: 2020-09-15 10:55:43
    11204
    2
  • Spark简介以及架构

    建的大数据处理框架。最初在2009年由加州大学伯克利分校的AMPLab开发,并于2010年成为Apache的开源项目之一。 首先,Spark为我们提供了一个全面、统一的框架用于管理各种有着不同性质(文本数据、图表数据等)的数据集和数据源(批量数据或实时的流数据)的大数据处理的需

    作者: DataLakeInsight
    19075
    3
  • 数据中心网络架构演进 — 从 VQN 到 SD-WAN

    真正要实现什么? SD-WAN 的应用场景 企业组网互联 SD-EN 数据中心互联 SD-DCI 云间互联 SD-CX 企业用户接入云 数据中心接入云 多云(Multi-Cloud)互联 SD-WAN 的技术架构 实践案例:企业用户利用 SD-WAN CPE 接入公有云 VPC

    作者: 云物互联
    发表时间: 2021-08-05 16:40:22
    1743
    0
  • 2021年数据ZooKeeper(六):ZooKeeper选举机制

    同步leader状态,不参与投票。 LEADING,领导者状态。 数据ID 服务器中存放的最新数据version。 值越大说明数据越新,在选举算法中数据越新权重越大。 逻辑时钟 也叫投票的次数,同一轮投票过程中的逻辑时钟值是相同的。每投完一次票这个数据就会增加,然后与接收到的其它服务器返回的投票

    作者: Lansonli
    发表时间: 2021-09-28 15:11:58
    1196
    0
  • 架构师之路系列文章

    安全架构 架构师之路 《架构师之路 — 架构师的职责》 《架构师之路 — 软件架构 — Overview》 《架构师之路 — 软件架构架构软件的过程》 《架构师之路 — 软件架构 — 应用架构设计模式》 《架构师之路 — 软件架构 — 系统架构设计模式》 《架构师之路

    作者: 云物互联
    发表时间: 2022-02-06 14:31:08
    711
    0
  • 详解如何在数仓中管理元数据(文末彩蛋~)

    大系统:数据源元数据、ETL元数据数据仓库元数据、BI 元数据数据源元数据 例如:数据源的 IP、端口、数据库类型;数据获取的方式;数据存储的结构;原数据各列的定义及 key 对应的值。 ETL元数据 根据 ETL 目的的不同,可以分为两类:数据清洗元数据数据处理元数据数据清洗元数据

    作者: 数据社
    发表时间: 2022-09-24 18:55:57
    197
    0
  • MySQL mysqldump数据导出详解

    */; 3.导出两个表的数据两个数据库的所有数据 mysqldump -uroot -proot --databases db1 db2 > D:/database/file.sql 4.导出指定数据库中的指定表的数据表 导出指定表的导出文本中,没有创建数据库的判断语句,只有删除表-创建表-导入数据

    作者: DevFeng
    发表时间: 2021-10-16 09:01:12
    2000
    0