已找到以下 10000 条记录
  • 数据Apache Druid(二):Druid数据结构及架构原理

    上图中描述了Druid集群内部实时/批量数据写入以及查询的请求过程。当实时数据达到Realtime Node后,在时间窗口内的数据会停留在RealTime Node内存中,而时间窗口外的数据会组织成Segment存储到Deep Storage中,同时Segment的元数据信息会被注册到元数据库中(这里是MySQL)

    作者: Lansonli
    发表时间: 2022-08-17 16:39:00
    304
    0
  • 什么是鲲鹏CPU架构与x86 CPU架构 - 弹性云服务器 ECS

    什么是鲲鹏CPU架构与x86 CPU架构 弹性云服务器实例主要包含两种架构,x86 CPU架构和鲲鹏CPU架构。 x86 CPU架构 采用复杂指令集CISC(Complex Instruction Set Computer),CISC是一种计算机体系结构,其中每个指令可以执行一些

  • 详解 - 云数据库 GaussDB

    Streaming是一个特殊的算子,它实现了分布式架构的核心数据shuffle功能,Streaming共有三种形态,分别对应了分布式结构下不同的数据shuffle功能: Streaming (type: GATHER):作用是coordinator从DN收集数据。 Streaming(type:

  • 微机原理:CPU架构详解

    分别存储指令和数据,每个存储模块都不允许指令和数据并存,以便实现并行处理。改进型哈佛结构具有一条独立的地址总线和一条独立的数据总线,利用公用地址总线访问两个存储模块(程序存储模块和数据存储模块),公用数据总线则被用来完成程序存储模块或数据存储模块与CPU之间的数据传输,两条总线由程序存储器和数据存储器分时共用。

    作者: timerring
    发表时间: 2022-07-24 08:30:01
    403
    0
  • 详解 - 云数据库 GaussDB

    Streaming是一个特殊的算子,它实现了分布式架构的核心数据shuffle功能,Streaming共有三种形态,分别对应了分布式结构下不同的数据shuffle功能: Streaming(type: GATHER):作用是coordinator从DN收集数据。 Streaming(type:

  • 数据Flink进阶(二):数据架构的演变

    有Lambda架构之外,还有Kappa架构、混合架构及湖仓一体架构,以上各个架构都是在大数据不同时期针对公司业务数据分析场景提出的,都是解决企业数据分析过程中业务痛点问题的架构。 四、有状态流计算架构 Lambda架构中针对实时数据处理我们可以使用Spark计算框架进行分析,Sp

    作者: Lansonli
    发表时间: 2023-03-19 03:55:15
    409
    0
  • 数据平台架构解析——以讯飞大数据平台Odeon为例

    数据通道:SQL、NoSql数据库及日志多源数据接入与导出 数据管理:完善的元数据管理、数据质量标准管理体系,同时具备完整的数据隔离及授权机制 数据分析:支持离线批处理、流式计算、OLAP、AdHoc等多种计算方式 数据服务:基于Greenplum和Kylin的数据服务架构,提供DaaS(数据即服务)服务

    作者: 孙中明
    发表时间: 2022-04-08 01:12:56
    856
    0
  • 《R数据科学实战:工具详解与案例分析 》 —1.6 pdftools—PDF文件

    数,一个用来从PDF中提取数据(此处的数据包括数字型和文字型数据),另一个则用来将文件渲染成PDF格式。本节我们只讨论第一个母函数—pdf_info。pdf_info函数下面一共包含6个子函数,功能各不相同,详见表1-15。但是6个子函数的参数完全一致,分别是pdf、opw和up

    作者: 华章计算机
    发表时间: 2019-11-09 18:18:21
    6492
    0
  • 查找流程架构详情 - 数据治理中心 DataArts Studio

    查找流程架构详情 功能介绍 查找流程架构详情。 调用方法 请参见如何调用API。 URI GET /v2/{project_id}/design/biz/catalogs/{id} 表1 路径参数 参数 是否必选 参数类型 描述 project_id 是 String 项目ID,获取方法请参见项目ID和账号ID。

  • 信息架构接口 - 数据治理中心 DataArts Studio

    信息架构接口 查询多种类型的表信息 父主题: 数据架构API

  • 模型架构 - 数据管理与分析

    模型架构 图1 模型架构 图2 模型架构--类 模型架构中类信息的维护 图3 新增类 图4 录入类信息 图5 编辑类 图6 修改类信息 在适配器中该类已经被添加了sql语句的,不能编辑修改,如要修改,必须将该类下面对应的sql语句都删除掉。 图7 类属性 单击按钮弹出页面进行修改。

  • 集成架构设计 - Haydn解决方案工厂

    单击左上角“【创建集成架构】按钮开始新建集成架构。 填写架构名称后,选择从已有架构复制。 依次选择工作空间、解决方案、集成架构、部署架构(可选),自定义填写架构名称和架构描述后点击“确定”。 图5 从已有架构创建集成架构 如果待复制的架构在同一空间&同一方案下,您也可以直接点击左上角的架构复制按钮进行快速复制。

  • 智能运维架构

    华为云 | +智能,见未来 博士招聘 智能运维架构师 智能运维架构师 领域方向:智能运维 工作地点: 杭州、东莞、西安 智能运维架构师 智能运维 杭州、东莞、西安 岗位职责 从事云服务运维系统的智能运维业务算法设计开发工作,利用大数据,机器学习,AI等技术持续提升在异常识别,故障

  • 详解 - 云数据库 GaussDB

    Bitmap Index Scan 使用位图索引抓取数据页。 Index Scan using index_name 使用简单索引搜索,该方式按照索引键的顺序在索引表中抓取数据。该方式最常用于在大数据量表中只抓取少量数据的情况,或者通过ORDER BY条件匹配索引顺序的查询,以减少排序时间。

  • 详解 - 云数据库 GaussDB

    Bitmap Index Scan 使用位图索引抓取数据页。 Index Scan using index_name 使用简单索引搜索,该方式按照索引键的顺序在索引表中抓取数据。该方式最常用于在大数据量表中只抓取少量数据的情况,或者通过ORDER BY条件匹配索引顺序的查询,以减少排序时间。

  • AXE模式功能详解 - 隐私保护通话 PrivateNumber

    AXE模式功能详解 隐私保护通话AXE模式中,A为业务受益用户,为了保护A的真实号码不被泄露,隐私保护通话平台为A绑定一个分机主号码X和一个分机号E。 绑定关系建立后,其他用户拨打X号码再输入分机号E即可联系A用户。A用户拨打X号码可回呼之前通话用户或企业指定号码。 AXE模式下

  • 数据Kudu(二):Kudu架构

    删除的数据彻底删除,另外也减少了文件数,提升索引效率。 经过以上了解Kudu数据存储实现的原理,我们可以知道Kudu中写入数据时优先写入内存,可以加快数据插入效率;数据在磁盘中存储在DiskRowSet中,有主键,DiskRowSet结构类似parquet结构,可以保证数据扫描分

    作者: Lansonli
    发表时间: 2022-11-29 00:37:30
    112
    0
  • 数据NiFi(二):NiFi架构

    NiFi架构 一、​​​​​​​NiFi核心概念 NiFi的基本设计理念是基于数据流的编程Flow-Based Programming(FBP),应用是由处理器、连接器组成的网络。数据进入一个节点,由该节点对数据进行处理,根据不同的处理结果将数据路由到后续的其他节点进行处理。这是

    作者: Lansonli
    发表时间: 2022-12-31 06:33:18
    194
    0
  • pdf转图片方法 - 文字识别 OCR

    根据给定的参数,解析当前页作为图片数据 """ # 获取指定页面的pdf格式,注意:页面参数是事先解析出来的,不然会存在问题。 return doc[page].getPixmap(matrix=trans, alpha=False) def pdf_to_jpg(self

  • 数据中心网络架构 — 新型大二层网络架构

    目录 技术背景 数据中心的东西流量成为了主流 服务器虚拟化带来的虚拟机迁移问题 大二层网络架构 大二层网络架构的问题 技术背景 数据中心的东西流量成为了主流 早期数据中心的流量有 80% 为南北向流量(Nor

    作者: 云物互联
    发表时间: 2021-08-23 15:06:25
    1379
    0