内容选择
全部
内容选择
内容分类
  • 学堂
  • 博客
  • 论坛
  • 开发服务
  • 开发工具
  • 直播
  • 视频
  • 用户
时间
  • 一周
  • 一个月
  • 三个月
  • 华为云ROMA集成关键技术-增量数据集成技术

    本方案主要面向源端数据源是数据库类型,其他数据源类型可以根据本思路进行相应的适配。 总体步骤概述如下: 调度器在源端数据库中创建本发明所需要的元数据表和触发器。数据库中的数据发生变化时,通过触发器写入关键元数据到元数据表中。 调度器从元数据表获取所有表的变化元数据,进行依赖分析,然后调度排序

    作者: 华为云PaaS服务小智
    发表时间: 2022-12-06 08:25:38
    805
    0
  • 华为云之数据仓库GaussDB(DWS)的使用体验【玩转PB级数仓GaussDB(DWS)】

    立且互不共享的CPU、内存、存储等系统资源的逻辑节点组成。在这样的系统架构中,业务数据被分散存储在多个节点上,数据分析任务被推送到数据所在位置就近执行,并行地完成大规模的数据处理工作,实现对数据处理的快速响应。 集群逻辑架构 二、购买云数据仓库GaussDB(DWS)

    作者: 江湖有缘
    发表时间: 2023-01-14 16:27:51
    278
    0
  • 数据技术栈与常见概念

    3. 数据仓库 数据仓库是用于集中存储和管理数据的系统。它将来自各个数据源的数据进行抽取、清洗、转换和加载,构建规范化的数据模型,为分析和查询提供高效的数据访问。数据仓库通常采用关系型数据库或列式数据库来存储数据,并支持复杂查询和分析操作。 4. 数据数据湖是一种存储海量原

    作者: 赵KK日常技术记录
    发表时间: 2023-06-30 19:15:13
    16
    0
  • 数据挖掘与知识发现技术挑战-节选

    在价值,而大数据挖掘技术的实现离不开云计算 技术。大数据知识工程的实际应用中,富格式文 本知识发现是极具技术挑战的任务。 总之,云计算是大数据处理的核心支撑技术, 是大数据挖掘与知识发现的主流方式。没有互联 网,就没有虚拟化技术为核心的云计算技术,没 有云计算就没有大数据知识工程的支

    作者: andyleung
    1139
    1
  • 《云数据中心网络与SDN:技术架构与实现》——1.14 Overlay最新技术——EVPN

    代什么特定类型的技术。不过,目前业界对于EVPN一词的理解是指,基于MP-BGP作为控制平面,来为以太网VPN分发MAC/IP路由的技术。1.14.1 传统网络对SDN的反击EVPN控制平面的思路起源于Juniper在2010年提给IETF的MAC-VPN(数据面是MPLS),之

    作者: 华章计算机
    发表时间: 2019-06-06 13:40:51
    11181
    0
  • GaussDB技术解析之删除表中数据

    在使用表的过程中,可能会需要删除已过期的数据,删除数据必须从表中整行的删除。SQL不能直接访问独立的行,只能通过声明被删除行匹配的条件进行。如果表中有一个主键,用户可以指定准确的行。用户可以删除匹配条件的一组行或者一次删除表中的所有行。使用DELETE命令删除行,如果删除表cus

    作者: Gauss松鼠会小助手2
    13
    3
  • 存储服务2024.12月技术干货合集

    -1-1.html一文带你了解关系型数据库和NoSQL数据库的各有所长https://bbs.huaweicloud.com/forum/thread-02119169962273785087-1-1.html华为云数据脱敏服务支持非结构化数据脱敏知识点https://bbs.huaweicloud

    作者: Jack20
    558
    0
  • 数据告诉你:2018年该学习什么技术

    前几天,数据科学家Julia Silge在Stack Overflow官方博客上分享了一组分析数据,他在文中揭示了快速增长的技术,快速衰落的技术,稳步增长的技术。我们从中可以看到,2018年你学习什么技术最值钱! 文中数据来源于Stack Overflow 的提问标签,且相同的标签提问次数都不少于10000次。

    作者: 老夫子
    9796
    11
  • 数据技术学习——Redis

    RDB在指定的时间间隔内生成数据集的时间点快照。适合灾难恢复,对Redis性能影响小,恢复数据比AOF快;缺点是实例故障时丢失数据多,备份数据集较大时可能造成业务短时中断。 AOF采用Redis协议保存服务器执行的所有写操作命令,并在服务器启动时通过重新执行这些命令来还原数据集。另外支持后台

    作者: Eric Shi
    发表时间: 2023-03-02 03:46:34
    1639
    0
  • 租户数据迁移

    租户数据迁移 当租户数据量增多,或者资源需求提升,目前资源环境不适合租户使用时,需要将租户数据从物理数据库中迁移。 行隔离-数据分片迁移 schema隔离-schema迁移 数据库隔离-整体数据迁移

  • 通过数据API开放数据

    认”。 接入数据源。 配置ROMA Connect接入业务系统的数据库,确保可以正常从数据库读取数据。不同类型数据源的接入配置不同,此处以MySQL数据库为例,其他类型数据库请参考接入数据源。

  • DWS: PB高性能企业数据仓库

    作者: 彩虹上的水瓶座
    8311
    28
  • 中国数据技术大会书单

    racle、检索数据、对检索的数据进行排序、过滤数据、高级数据过滤、使用通配符过滤、使用正则表达式执行搜索、创建计算字段、使用数据操作函数、汇总数据、组合数据、使用子查询、连接表、创建高级连接、组合查询、插入数据、更新和删除数据、创建和操作表、使用视图、使用存储过程、使用游标、使

    作者: G-washington
    发表时间: 2019-09-04 10:12:16
    5086
    0
  • 跟踪技术程序中的实体数据

    procedures -- a new dataset and baselines》介绍了一个基于追踪实体的新数据集,其阐述如下:我们引入了TechTrack,一个用于在技术过程中跟踪实体的新数据集。这个数据集是通过注释WikiHow上的开放领域文章来准备的,由1351个过程组成,例如,“如何连接打

    作者: RabbitCloud
    626
    4
  • 存储技术体系

    存储涉及的知识面很广,既涉及云存储服务端的技术,又涉及终端设备应用开发相关的技术。本文章关注云存储系统服务端技术。云存储技术体系结构分为四层:硬件层、单机存储层、分布式存储层、存储访问层,下面分别介绍。硬件层硬件层包括存储、网络以及CPU。在存储方面,除了传统的SAS或者SATA

    作者: 凌洛
    发表时间: 2018-08-07 08:26:10
    11147
    0
  • 创建存储策略

    期的含义是备份数据至少保留15天,且备份数据中必须包含2个完全备份的数据。 图7 配置数据流和数据保留策略 选择是否开启加密功能,单击“Next”。开启加密后,备份数据将按照选择的加密方式进行加密存储,此处以开启加密为例。

  • 数据仓库技术与Hive入门

    问题: 数据分析对数据进行读取操作,会让读取压力倍增 OLTP仅存储数周或数月的数据 数据分布在不同系统不同表中,字段类型数据不同意 数据仓库构建 主要特征 数据仓库是分析数据的平台,而不是创造数据的平台 数据仓库的数据反映的是相当长的时间历史数据的内容 数据仓库中一般

    作者: 北山啦
    发表时间: 2023-12-07 16:23:04
    7
    0
  • 宜人贷PaaS数据服务平台Genie:技术架构及功能

    好的说明了数据平台Genie的组成以及数据使用流程。先说数据使用流程,首先所有数据(包括结构化数据和非结构化数据)都会在数据仓库中进行标准化,如:单位统一,字典统一,数据格式统一,数据命名统一等等。统一规范的数据会直接或者间接的被数据集市使用,作为数据集市的入口。数据集市之间业务

    作者: 橘座
    发表时间: 2019-09-05 22:15:14
    3768
    0
  • 数据组件-Hive部署基于MySQL作为元数据存储

    先启动mysql,并查看有几个数据库 ------mysql -uroot -proot mysql>show databases; 再次打开多个窗口,分别启动hive hive 启动hive之后,返回mysql窗口查看数据库数量,会显示增加了metastore数据

    作者: 芝士味的椒盐
    发表时间: 2022-04-19 05:12:57
    653
    0
  • 《云数据中心网络与SDN:技术架构与实现》——3.3 关键技术

    3.3 关键技术本节将对SDDCN的关键技术,包括网络边缘、网络核心、服务链、可视化、安全和高可用进行概要性的介绍。这些关键技术并不是独立的,彼此之间会有很多的交叉,希望读者能够将它们结合起来进行理解。3.3.1 网络边缘网络边缘把控着流量的入口,负责在流量开始传输前对其进行一些

    作者: 华章计算机
    发表时间: 2019-06-06 14:40:45
    9295
    0