已找到以下 10000 条记录
  • 《吊打面试官》- 大数据工程师50道中大厂面试真题保姆级详解

    什么是Hive分区和分桶? 分区(Partition)是Hive一个重要概念,通过对一个或多个列进行划分,把数据按分区列值存储到不同目录,从而优化查询效率。查询时只扫描所需要分区目录即可。 分桶(Bucket)是指对分区数据进一步进行哈希取值,把数据分成更小桶。通过分桶可以有效减少数据倾斜问题

    作者: Byyyi耀
    发表时间: 2024-05-06 10:52:39
    209
    0
  • 数据一致性比对解决方案

    提到级count、字段级数值sum、时间类型差值sum、字符类型checksum。下文以TD搬迁GaussDB(DWS)为例:记录数a) 级count(*)数据类型a) 汇总Sum(cola)b) 平均Avg(cola)c)  例外,针对float类型这种存在精度缺失场

    作者: 小强鼓掌
    28
    3
  • 学习网络规划设计 助力企业轻松上云

    DNS:云解析服务 提供高可用,高扩展权威DNS服务和DNS管理服务,把人们常用域名或应用资源转换成用于计算机连接IP地址,从而将最终用户路由到相应应用资源上。对等连接:两个VPC之间网络连接。终端节点:VPC终端节点能够将VPC私密地连接到终端节点服务,使VPC云资源无需弹性公网IP就能够访问终端节点服务。      

    作者: 开发者学堂小助
    发表时间: 2020-08-14 15:39:59
    7588
    0
  • 【获奖名单已公示】【云咖问答】第5期 数仓专家面对面,畅聊数据脱敏那些事,好礼等您拿!

     随着大数据时代到来,人人用数变得越来越迫切,数据作为重要生产要素和流动载体,如何加强技术层面的数据安全和隐私保护,对数据仓库产品本身提出更高要求。GaussDB(DWS)提供指定用户范围内列级敏感数据动态脱敏功能,实现数据库内敏感数据可算、库外不可见脱敏效果,具有灵活

    作者: 论坛小助手SUN
    发表时间: 2023-10-11 11:14:32
    3999
    2
  • 【成长之路】本科比赛作品设计经验分享

    三、创新性设计一个好的参赛作品,不只是要完成基础功能,还要有别人不具备创新点。而物联网项目,不仅要做到精确获取数据,更重要是如何高效利用这些数据。以我们作品为例,在监测棚内数据基础上,我们又对这些数据进行了一些处理。凭借华为物联网平台便捷数据管理能力,我们做到了数据异常预警、历史数据记录、作物长势

    作者: 柠檬PH=2
    发表时间: 2021-06-30 01:53:09
    2803
    0
  • 【云驻共创】GaussDB(DWS)湖仓融合技术解析

    在传统湖仓两层架构,湖和仓元数据是隔离,这导致了在共享数据时仍需要进行ETL(提取、转换、加载)操作。湖和仓权限也是隔离,不支持统一权限管理。这种架构不仅增加了数据处理复杂性,还降低了数据共享效率。 逐渐走向湖仓一体架构。在湖仓一体架构,在存算分离基础上

    作者: 皮牙子抓饭
    发表时间: 2024-04-12 10:18:54
    39
    0
  • 《Python语言程序设计》 —3 函  数

    Area是要调用函数名称;紧跟函数名一对小括号是函数实参列,与函数形参列相对应。因为CalCircleArea并没有参数,所以调用时实参列为空。Python语言中,开发者在程序定义变量名、函数名、类名等都是Python语言自定义标识符,它们命名规则完全相同

    作者: 华章计算机
    发表时间: 2019-11-18 20:33:14
    5673
    0
  • 【技术架构】kubernetes设计架构简析

    Etcd 数值变化来获得通知,并且获得更新后数据来执行相应操作。工作节点kubelet 是工作节点执行操作 agent,负责具体容器生命周期管理,根据从数据库获取信息来管理容器,并上报 pod 运行状态等; 负责Node节点上pod创建、修改、监控、删除等全生命周期管理

    作者: 乔戈里峰
    发表时间: 2018-12-26 17:46:55
    7794
    0
  • 更改云数据库 RDS for PostgreSQL数据库中OWNER报错 - 云数据库 RDS

    更改云数据库 RDS for PostgreSQL数据库中OWNER报错 问题描述 使用root用户登录并创建my_db数据库,并在该数据库下创建mytable,然后将mytable所有者更改为其他用户test时报错。 ALTER TABLE mytable OWNER

  • 基于STM32设计小说阅读器(翻页、字体切换、颜色切换、语音播报)

    这是基于ST32F103ZET6设计小说阅读器,虽然对于真实小说阅读器产品来讲,实用性和功能方面还差很多,但是对于刚入门STM32、单片机开发工程师来讲,这里面设计技术才是最有价值。 所以这篇文章小说阅读器主要是用来作为嵌入式单片机工程师入门练手项目、大学生课程设计等。目的不在于小

    作者: DS小龙哥
    发表时间: 2022-08-30 03:04:53
    449
    0
  • 实施步骤

    硬件配置选择高性能硬件设备对于提升 MongoDB 查询性能至关重要。快速磁盘驱动器可以减少数据读取时间,尤其是在处理大量数据时。例如:使用 SSD 固态硬盘比传统机械硬盘读写速度快得多,能够显著提高数据库响应速度。大容量内存可以使常用数据完全加载到内存,从而减少磁盘 I/O

  • DSC能够识别哪些数据源对象? - 数据安全中心 DSC

    DSC能通过内置规则和自定义规则从OBS、RDS、Elasticsearch、DWS、DLI海量数据中分析并识别出敏感对象。 DSC支持数据源如1所示。 1 支持数据源 数据源 具体数据类型 扫描限制 RDS(关系型数据库) MySQL、SqlServer、PostgreSQL类型。

  • 【华为云社区19年5月刊】本期推荐:Mysql数据库开发36条原则

    为聚焦AI基础平台,加速行业智能化落地一个“焦炭老板”烦忧和喜乐道路千万条,不堵最重要!华为云城市智能体来为您“指路”你复联梦还在吗?—— 来自安踏&华为云问候华为张顺茂:华为云 FusionPlant平台做工业互联网黑土地华为张顺茂:华为FusionPlant平台助力国

    作者: 华为云社区精选
    9634
    3
  • 基本概念 - 工业数字模型驱动引擎

    聚合服务是数据服务的基本单位,也是实现业务功能最小单元。聚合即组合,指的是不同数据实体组合,通过这些组合便可以探索查询数据库中有关联数据。 环境变量 环境变量作用在于可以定义一个全局变量,使您可以在请求和脚本存储和重用数据。通过将值存储在变量,可以在所有脚本开发引用它,如果需要更新值,则只需在一个位置进行更改。

  • 机电装备智能设计APP套件配套服务

    取工程师历史积淀卓越设计经验,采用生成式人工智能训练夹具设计大模型,对持续反馈用户设计需求进行解析,推理最优零部件结构和目标参数,在三维设计软件自主仿真验证并生成标准化与高质量3D CAD模型、工程图纸和数控机床加工代码。该产品能够提高设计效率,降低设计难度,提供需求到

    交付方式: 人工服务
  • 通过AstroZero脚本实现提交限制功能 - Astro轻应用 AstroZero

    通过AstroZero脚本实现提交限制功能 期望实现效果 在开发前端页面时,可以在脚本单添加一些提交限制,来提升用户体验和数据安全。例如,在脚本定义一个延迟时间(如图1),在规定时间内提交单时,提示“Submission failed: Not PortalUser

  • 云迁移解决方案

    移实施方案设计目标系统分析,云上架构设计原则等;操作系统、计算资源、存储资源、负载均衡、云上网络方案选型;迁移流程方案设计需要准备工作、制度策略等;并列举三个云上创新方案设计。 目标学员 合作伙伴解决方案专家SA 课程目标 根据云迁移调研评估,掌握迁移实施方案设计,完成云上

  • 大二Web课程设计——海贼王乔巴专题漫画(可以很好应付老师作业)HTML+CSS

    HTML实例网页代码, 本实例适合于初学HTML同学。该实例里面有设置了css样式设置,有div样式格局,这个实例比较全面,有助于同学学习,本文将介绍如何通过从头开始设计个人网站并将其转换为代码过程来实践设计。 精彩专栏推荐👇🏻👇🏻👇🏻👇🏻文末获取源码

    作者: IT司马青衫
    发表时间: 2022-08-10 15:24:21
    147
    0
  • SAP HANA简介 - SAP HANA

    Processing),联机分析处理。是数据仓库系统主要应用,支持复杂分析操作,侧重决策支持,并且提供直观易懂查询结果。 OLTP(On-Line Transaction Processing),联机事务处理。是传统关系型数据库主要应用,主要是基本、日常事务处理,例如银行交易。 支持结构化数据和非结构化数据

  • 模板方法设计模式(Template Pattern)

    一个抽象类公开定义了执行它方法方式/模板。它子类可以按需要重写方法实现,但调用将以抽象类定义方式进行。这种类型设计模式属于行为型模式。 意图 定义一个操作算法骨架,而将一些步骤延迟到子类。模板方法使得子类可以不改变一个算法结构即可重定义该算法某些特定步骤。 主要解决

    作者: JavaEdge
    发表时间: 2021-06-03 17:26:58
    1145
    0