已找到以下 10000 条记录
  • 数据倾斜调优 - 数据仓库服务 GaussDB(DWS)

    前面的计划可以看到,这里对于非倾斜数据和倾斜数据做了分别处理。对于s表中的非倾斜数据,依旧按照原有的方案,根据数据的hash值进行重分布;而对于倾斜数据(即等于0的数据),则通过轮询发送的方式,均衡地发送到所有节点。通过这样的方式,解决了倾斜数据分布不均衡的问题。 同时,为了保证

  • 查询ClickHouse数据 - MapReduce服务 MRS

    查询ClickHouse数据 本章节介绍查询ClickHouse数据样例代码。 查询语句1:querySql1查询创建ClickHouse表创建的tableName表中任意10条数据;查询语句2:querySql2通过内置函数对创建ClickHouse表创建的tableName表中的日期字段取年月后进行聚合。

  • 查询ClickHouse数据 - MapReduce服务 MRS

    查询ClickHouse数据 本章节介绍查询ClickHouse数据样例代码。 查询语句1:querySql1查询创建ClickHouse表创建的tableName表中任意10条数据;查询语句2:querySql2通过内置函数对创建ClickHouse表创建的tableName表中的日期字段取年月后进行聚合。

  • 网络及数据安全最佳实践 - 配置审计 Config

    网络及数据安全最佳实践 本文为您介绍网络及数据安全最佳实践的应用场景以及合规包中的默认规则。 应用场景 该合规规则包从网络和数据安全等方面进行检测,帮助用户的信息资产免受网络攻击和数据泄露的威胁。关于网络及数据安全的相关要求请参见“CIS Control v8”。 免责条款 本合

  • 内存数据库技术之 redis数据库缓存技术

    缓存技术出现的原因 为了应对高并发、大流量、大数据量,提高效率。 2. redis热点: 2.1 NOSQL:Not Only SQL 2.2 高性能、持久存储、高并发 10万次/s 2.3 基于键值对类型 1G 2.4内存数据库 2.5异步操作 Redis是一个开源的使用ANSI C语言

    作者: tea_year
    发表时间: 2022-02-24 05:37:46
    650
    0
  • 实时即未来,大数据项目车联网之实时ETL任务消费数据

    网络原因,车辆行驶在信号差的地方,数据传输不完整; 数据传输过程中,数据会传TSP造成数据丢失; 数据采集终端设备故障,导致数据部分丢失 数据入库,正确数据入hive与hbase库各一份,错误数据入hive n 先入hdfs,再关联hive表 / * 需求:原始数据ETL操作 *

    作者: Maynor学长
    发表时间: 2022-10-20 06:18:52
    236
    0
  • 数据库对象位置函数 - 数据仓库服务 GaussDB(DWS)

    regclass) 描述:指定关系的文件路径名。 返回值类型:text 备注:pg_relation_filepath类似于pg_relation_filenode,但是它返回关系的整个文件路径名(相对于数据库集群的数据目录PGDATA)。 父主题: 数据库对象函数

  • 【云解析DNS】显/隐性URL转发、操作日志、批量导出域名列表等体验优化特性上线!

    析支持批量导出域名列表 帮助文档:cid:link_0   操作入口:在DNS控制台公网域名列表页,点击域名列表上方“导出”按钮,即可导出全部或所选公网域名 帮助文档:cid:link_1 操作入口:在DNS控制台内网域名列表页,点击域名列表上方“导出”按钮,即可导出全部或所选内网域名

    作者: ECS小助手2024
    177
    2
  • 使用python简单获取新冠肺炎数据,并进行本地保存

    浏览器),选择 network中的 XHR ,查看网站中的数据加载项 : 找到湖北 选择最后一个加载项,打开可以发现文件中的信息为所需要获取的数据,通过与网页中的数据对比可以发现为湖北的数据。 选择 headers 查看数据项的具体信息。 http 请求为 POST 请求,参数为 province

    作者: 花溪
    发表时间: 2021-02-08 16:36:47
    4302
    0
  • 数据库 GaussDB

    点继续,实现数据库HA切换时连接不断、事务自动回放,业务无感知 数据可靠:数据持久性高达99.9999999999%,保证数据安全可靠,保护业务免受故障影响 国内首款纯软全密态数据库,高安全保障 国内首款纯软全密态数据库,高安全保障 纯软全密态:支持国密算法、透明加密,通过数学算

  • MPPDB数据库的定义

    Parallel Processor )。 在数据库非共享集群中,每个节点都有独立的磁盘存储系统和内存系统,业务数据根据数据库模型和应用特点划分到各个节点上,每台数据节点通过专用网络或者商业通用网络互相连接,彼此协同计算,作为整体提供数据 库服务。非共享数据库集群有完全的可伸缩性、高可用、高性能、优秀的性价比、资源共享等优势。

    作者: 彩虹上的水瓶座
    3550
    1
  • 查看主机监控数据 - 智能边缘云 IEC

    进入边缘实例列表页面。 单击实例的名称,查看详情。 进入实例详情页面。 选择“监控”页签,查看监控数据。 在实例监控区域,您可以通过选择时长,查看对应时间的监控数据。 具体监控指标说明请参见主机监控指标。 父主题: 监控数据

  • 创建元数据连接 - 迁移中心 MGC

    SQL文件地址 填写用于存放执行作业时生成的SQL文件文件夹地址。您需要拥有该文件夹的读写权限。 须知: 迁移完成后,您需要手动清理该路径下生成的文件夹,以释放存储空间。 表7 Delta Lake(无元数据)连接参数配置说明 参数 配置说明 所属源 仅需在源端创建元数据连接。

  • 使用canal开源工具,数据从mysql导入到ES

    在华为云CSS的console界面上打开kibana,查询数据成功。 四、验证canal自动导出增量数据1.       使用mysql客户端(mysql shell,heidisql等),新增/修改/删除mysql数据库中mytest.user表的数据,将会自动同步到ES的mytest_user索引下面2

    作者: marsWEI
    11845
    3
  • 数据挖掘系列(5)使用mahout做海量数据关联规则挖掘

    上一篇介绍了用开源数据挖掘软件weka做关联规则挖掘,weka方便实用,但不能处理大数据集,因为内存放不下,给它再多的时间也是无用,因此需要进行分布式计算,mahout是一个基于hadoop的分布式数据挖掘开源项目(mahout本来是指一个骑在大象上

    作者: 格图洛书
    发表时间: 2021-12-29 16:21:59
    638
    0
  • 准备数据源 - IoT边缘 IoTEdge

    连接。(ID代表从站号,F为Function代表寄存器类型) 单击鼠标右键,选择修改寄存器数据格式。(寄存器通过临接组合的方式表示复杂类型数据,协议为大端格式协议,寄存器内字节间与寄存器间顺序可交换。) 双击对应位置修改对应点位数据(可设置数据自动改变)。 父主题: 操作步骤

  • 数据基础HDFS入门

    HDFS是hadoop项目的核心子项目,是分布式计算中数据存储管理的基础。是基于流数据模式访问和处理超大文件的需求而开发的, 可以运行于廉价的商用服务器上。 它所具有的高容错、 高可靠性、 高可扩展性、 高获得性、 高吞吐率等特征为海量数据提供了不怕故障的存储, 为超大数据集的应用处理带来了很多便利。

    作者: 俺想吃蜂蜜
    发表时间: 2022-04-13 00:26:53
    670
    0
  • GaussDB数据库事务介绍

    一、前言随着大数据和互联网技术的不断发展,数据库管理系统的作用越来越重要,实现数据的快速读写以及保证数据的安全性和完整性成为企业在选择数据库技术时最为关注的问题之一。事务是保证数据一致性和完整性的关键机制之一,因此事务管理在数据库技术中占据了极为重要的位置。在这里我们将着重介绍华

    作者: Gauss松鼠会小助手2
    91
    1
  • 管理测试工程 - 性能测试 CodeArts PerfTest

    在PerfTest测试工程列表中选中一个或多个待导出的工程,单击“导出”,保存测试工程文件ProjectList(序列号).json到本地。 如果测试工程中包含SLA规则,导出工程时,无法导出SLA规则的相关内容。 如果全局变量上传了文件导出测试工程时,无法导出对应的文件。 可扩展测试工程暂不支持导出工程。 暂不支持导出含有MQTT协议的工程。

  • 删除数据实例 - 工业数字模型驱动引擎

    选择“模型设计 > 数据模型管理”,默认进入“数据实体”页面。 在左侧导航栏选择“数据实例”,进入数据实例页面。 选择具体实体模型。 在“条件筛选”处选择“数据类型”,根据选择的数据类型输入实体编码或名称,然后选择图数据库类型的“数据源”,单击“搜索”。 单击目标实例“操作”列或勾选实例后单击“删除”,弹出提示信息。