已找到以下 10000 条记录
  • 带你快速入门GDS导入导出,玩转PB级数仓GaussDB(DWS)

    r_reason_desc char(100) ); 2、创建与目标表一致的外表 #外表中配置了数据源格式信息、GDS服务的访问信息,从而GaussDB(DWS)最终可以通过外表将数据服务器上的数据引流进数据库实表中。 DROP TABLE IF EXISTS foreign_tpcds_reasons;

    作者: yd_220527686
    发表时间: 2023-01-06 06:26:09
    576
    0
  • 查看数据血缘 - 数据治理中心 DataArts Studio

    查看数据血缘 首先在数据目录组件完成元数据采集任务,当数据开发作业满足自动血缘解析要求或已手动配置血缘,然后成功完成作业调度后,则可以在数据目录模块可视化查看数据血缘关系。 约束限制 数据血缘关系更新依赖于作业调度,数据血缘关系是基于最新的作业调度实例产生的。 对于同一版本的数据

  • python爬虫信息技术实践之Sqlite数据存储

    、2、3、4、6或8个字节的形式存储。REAL,该值是个浮点值,存储为8个字节的IEEE浮点数。TEXT,该值是个文本字符串,使用数据库编码(UTF-8、UTF-16BE或UTF-16LE)存储。BLOB,该值是数据的二进制大对象,以原始形式存储。 有一个名为id的列,为其分配了INTEGER

    作者: tea_year
    发表时间: 2024-06-20 12:00:23
    33
    0
  • 【转载】图数据库的技术发展

    系模型之上。关系型数据库和图数据库的主要差异是数据存储的方式,关系型数据天然就是表格式的,因此存储数据表的行和列中。数据表可以彼此关联协作存储,也很容易提取数据,尤其在查找某个区间内的数据组很有优势,但是却无法清晰直观地体现出数据之间包含的潜在关系。关系型数据库是以实体建模这一

    作者: 无双
    3344
    0
  • 数据技术学习——湖仓一体

    p; 数据库&数据仓库&数据数据库(DataBase):面向OLTP,要求数据强一致性,低时延,大量小型增删改查操作。 数据仓库(Data Warehouse):整合散落的数据库孤岛中的数据,按主题分类,便于快速OLAP。通常由MPP技术构建。 数据湖(Data

    作者: Eric Shi
    发表时间: 2024-04-07 18:06:36
    64
    0
  • 数据技术栈与常见概念

    3. 数据仓库 数据仓库是用于集中存储和管理数据的系统。它将来自各个数据源的数据进行抽取、清洗、转换和加载,构建规范化的数据模型,为分析和查询提供高效的数据访问。数据仓库通常采用关系型数据库或列式数据库来存储数据,并支持复杂查询和分析操作。 4. 数据数据湖是一种存储海量原

    作者: 赵KK日常技术记录
    发表时间: 2023-06-30 19:15:13
    16
    0
  • 数据场景下使用OBS实现存算分离方案概述 - 对象存储服务 OBS

    无全局视图,数据只能在集群内部使用。 拷贝是跨集群数据共享的唯一途径,数据拷贝耗时长。 公共数据集多份存储数据冗余。 2 计算存储资源绑定,导致资源浪费 计算和存储资源无法均衡,当计算和存储需求不一致时,只能等比扩容,势必造成一种资源的浪费。 3 数据三副本存储,利用率低,成本高 Hadoop分布式文件系统(HD

  • 实时数据分析技术架构

    实时数据分析技术架构基于企业内核,采用统一SQL引擎,多引擎协同,实现数据体系内自闭环,从而达到一份数据多个引擎调用,高效多维度分析。依据流数据和时序数据特征打造出从优化器、执行器到存储的全系列、高性能、可扩展的实时数仓,提供四大技术创新:1.    CEP引擎告别T+1模式改

    作者: 小强鼓掌
    12
    3
  • 互联网协议 — 数据路由技术

    路由(Routing) 路由表 路由设备构建路由表的方式 路由记录优先 路由环路 黑洞路由 等价路由 路由(Routing) 路由(routing)是指数据包从源节点到目的节点过程中,决定端到端路径的行为。 路由通常与桥接(Bridgi

    作者: 云物互联
    发表时间: 2021-08-05 16:39:02
    1383
    0
  • 浅谈数据中台

    打通数据建模对全域数据进行沉淀形成数据资产,从而提供统一的数据服务功能。 二、如何建立数据中台 建设数据中台主要就是从数据模型、数据资产、数据治理、数据服务四部分出发。 首先需要做整体规划,哪些数据需要纳入到数据中台中,根据数据接入的情况,进行技术选型,评估集群的配置,规划至少3年的计算和存储资源。

    作者: 数据社
    发表时间: 2022-09-14 11:47:44
    302
    0
  • 修改对象元数据 - 对象存储服务 OBS

    参数解释: 元数据操作指示符。 约束限制: 无 取值范围: REPLACE_NEW:表示对于已经存在值的元数据进行替换,不存在值的元数据进行赋值,未指定的元数据保持不变(自定义头域作替换处理)。 REPLACE:表示使用当前请求中携带的头域完整替换,未指定的元数据(本表中除x-o

  • 数据库代理最佳实践 - 云数据库 RDS

    数据库代理最佳实践 使用Hint语法实现RDS for MySQL读写分离 在读写分离权重分配体系之外,Hint可以作为另外一种SQL补充语法来指定相关SQL到主节点或只读节点执行。 Hint注释仅作为路由建议,非只读SQL、事务中的场景不能强制路由到只读节点。 使用MySQL命

  • 采集数据源的元数据 - 数据治理中心 DataArts Studio

    采集数据源的元数据数据简介 配置元数据采集任务 查看任务监控 父主题: 数据目录

  • 中国数据技术大会书单

    racle、检索数据、对检索的数据进行排序、过滤数据、高级数据过滤、使用通配符过滤、使用正则表达式执行搜索、创建计算字段、使用数据操作函数、汇总数据、组合数据、使用子查询、连接表、创建高级连接、组合查询、插入数据、更新和删除数据、创建和操作表、使用视图、使用存储过程、使用游标、使

    作者: G-washington
    发表时间: 2019-09-04 10:12:16
    5086
    0
  • GaussDB技术解析之删除表中数据

    GaussDB技术解析之删除表中数据在使用表的过程中,可能会需要删除已过期的数据,删除数据必须从表中整行的删除。SQL不能直接访问独立的行,只能通过声明被删除行匹配的条件进行。如果表中有一个主键,用户可以指定准确的行。用户可以删除匹配条件的一组行或者一次删除表中的所有行。使用DE

    作者: Gauss松鼠会小助手2
    17
    3
  • GaussDB(GWS) 窗口函数总结【玩转PB级数仓GaussDB(DWS)】

    UUID类型 JSON类型 RoaringBitmap类型 HLL数据类型 对象标识符类型 伪类型 列存表支持的数据类型 XML类型 窗口函数 下面进入正题,工作中是否有遇到如下几种情况? 根据区域,对门店的销售数据进行排序 找出每个部门绩效前3的员工对齐进行奖励 用户前后两次消费间隔的时间

    作者: 林欣
    发表时间: 2023-02-03 15:15:16
    478
    0
  • 华为云FusionInsight引领全球大数据技术发展

    存在较大的容忍空间。数据仓库擅长做交互式分析,在数据存储容量和数据加工方面存在成本高的问题。因此,传统的做法是把大数据数据仓库组合起来,大数据存储大量的明细数据,并执行批处理加工任务;然后把加工的结果数据(专题数据),通过工具加载到另外一个数据仓库集群,对外进行高性能交互式分析

    作者: 沙漏
    4517
    0
  • 使用函数进行加密 - 数据仓库服务 GaussDB(DWS)

    使用函数进行加密 数据加密作为有效防止未授权访问和防护数据泄露的技术,在各种信息系统中广泛使用。作为信息系统的核心,GaussDB(DWS)数仓也提供数据加密功能,包括透明加密和使用SQL函数加密。 GaussDB(DWS)主要提供了哈希函数和对称密码算法来实现对数据列的加解密。哈希

  • 互联网协议 — 数据交换技术

    文章目录 目录 数据交换技术 传统的 2 层交换技术 具有路由功能的 3 层交换技术 具有网络服务功能的 7 层交换技术 数据交换技术 交换技术是随着电话通信的发展和使用而出现的通信技术。电话刚开始使用时,只能实现固定的两个人之

    作者: 云物互联
    发表时间: 2021-08-05 15:18:17
    953
    0
  • 数据技术之Maxwell入门案例学习

    "old":{"name":"nihao"}} 插入多条数据,只有最后一条插入的数据commit状态为true,其他的数据从往后按顺序排列,xoffset作为标识 JSON数据 (4)修改test_maxwell 库的 test 表的一条数据,查看 maxwell 的控制台输出 mysql>

    作者: 7&
    发表时间: 2023-02-10 02:00:36
    77
    0