内容选择
全部
内容选择
内容分类
  • 学堂
  • 博客
  • 论坛
  • 开发服务
  • 开发工具
  • 直播
  • 视频
  • 用户
时间
  • 一周
  • 一个月
  • 三个月
  • 设计负载均衡方案以应对大量数据存储需求

    本文将介绍如何设计一个高效的负载均衡方案,包括负载均衡算法、数据分片、数据复制等关键技术。我们将分析每个技术的优缺点,并讨论如何将它们组合在一起,以实现一个高性能、可扩展、高可用的 Redis 存储系统。 二、负载均衡算法 负载均衡算法用于确定如何将请求分配给多个节点。在 Redis 中,常用的负载均衡算法有以下几种:

    作者: 赵KK日常技术记录
    发表时间: 2023-07-04 15:34:51
    50
    0
  • 不间断的Web服务(Nginx进行负载均衡)

    服务,以此来提高系统的可伸缩性与可靠性。 下图为负载均衡示例图,当用户请求发送后,首先发送到负载均衡服务器,而后由负载均衡服务器根据配置规则将请求转发到不同的web服务器上。 2.Nginx负载均衡策略 nginx内置负载均衡策略主要分为三大类,分别是轮询、最少连接和ip hash

    作者: 神龙居市
    发表时间: 2022-11-22 13:21:33
    438
    0
  • 数据湖(五):Hudi与Hive集成

    ​Hudi与Hive集成 一、​​​​​​​配置HiveServer2 Hudi与Hive集成原理是通过代码方式将数据写入到HDFS目录中,那么同时映射Hive表,让Hive表映射的数据对应到此路径上,这时Hudi需要通过JDBC方式连接Hive进行元数据操作,这时需要配置HiveServer2。

    作者: Lansonli
    发表时间: 2022-06-06 05:12:19
    1503
    0
  • 【详解】Hive权限管理

    以下是一个简化的示例,展示了如何Hive中创建角色、添加用户到角色以及授予权限。 首先,确保你已经安装了Hive,并且有适当的Hive服务器正在运行。在这个示例中,我们将使用Hive命令行工具​​hive​​。 # 启动Hive命令行工具 hiveHive命令行中,你可以执行以下命令来管理角色、用户和权限。

    作者: 皮牙子抓饭
    发表时间: 2024-12-11 10:41:47
    318
    0
  • Hive高级特性-ACID特性

    删除数据的表仍可以使用矢量化查询。 例子: (1)开启事务 参考update和delete的开启事务 (2)修改一些配置,否则可能会报错 set hive.auto.convert.join=false; -- Hive是否启用基于输入文件大小的有关将common join转换为mapjoin的优化。

    作者: living
    发表时间: 2021-01-21 22:18:33
    9246
    0
  • 使用华为云弹性负载均衡实现高可用性和负载均衡的应用部署【玩转华为云】

    在今天的技术博客中,我将与大家分享如何利用华为云的弹性负载均衡服务来实现应用程序的高可用性和负载均衡。随着互联网应用的不断增长,确保应用的稳定性和可扩展性变得尤为重要。华为云的弹性负载均衡服务提供了一个可靠且智能的解决方案,让我们一起来看看吧! 弹性负载均衡简介 弹性负载均衡(Elastic Load

    作者: 皮牙子抓饭
    发表时间: 2023-06-06 17:06:03
    18
    1
  • Hive经典简答题

    4.Hive支持的数据格式 Text,SequenceFile,ParquetFile,ORC,RCFILE 5.进入Hiveshell窗口的方式? 第一种交互方式:Hive交互shell(直接通过bin/hive的方式) 第二种交互方式:Hive JDBC服务

    作者: 大数据梦想家
    发表时间: 2021-09-28 17:43:33
    1049
    0
  • 数据湖的hive跟manas的hive数据对接用什么

    我们项目组想把上游数据湖的hive数据接入到manas平台的hive里,不知用什么工具或平台对接,请高人指点。

    作者: 江川健一郎
    2546
    3
  • GaussDB(DWS)对接Hive

    only;同读外表比,主要调整增加了WRITE ONLY字眼; 另外,当前只支持ORC外表写入,不支持parquet; 关注部分hive的ORC类型在impala里无法访问(自动转换类型);对应hive上创建相同表 Beeline > create table pdm.t00_ccy_parm2 (字段 字段定义

    作者: 你讲道理的说
    1339
    0
  • Hive小文件合并

    GA一个局点,ISV在使用Hive过程中产生了大量的小文件,文件格式是ORC。请问有没有什么好的方法做Hive的小文件合并。

    作者: 无昵称_20210507
    4009
    2
  • Hive快速入门系列(11) | Hive的自定义函数

    info+"__, I love Hive! __ "; } } 12345678910111213141516171819 2. 将jar包添加到hive hive (myhive)> add jar /opt/module/hive/lib/hive_java.jar; 12 3

    作者: 不温卜火
    发表时间: 2020-12-03 00:06:14
    2813
    0
  • Linux查看Hive进程

    使用ps命令查看Hive进程 bashCopy code ps -ef | grep hive 通过以上命令,可以列出所有包含"hive"关键词的进程信息。可以从输出结果中找到与Hive相关的进程信息,如HiveServer2、HiveMetastore、Hive Thrift Server等。

    作者: 皮牙子抓饭
    发表时间: 2024-08-20 15:36:37
    97
    0
  • Hive存储格式简单介绍

    一、 Hive文件存储格式 Hive支持的存储格式有: textfile、sequencefile、orc和parquet这几种格式。Hive 的存储方式有列式存储和行式存储。 textfile和sequencefile的存储格式是给予行存储的;而orc和parquet是基于列存储的(实质上也不是完全的列存储。

    作者: kala_1314
    发表时间: 2019-01-18 16:37:43
    3582
    0
  • Hive UDF,就这

    GenericFuncDesc,内部调用GenericUDF方法。 2. 启用常量传播优化器优化时,ConstantPropagate中遍历树过程调用; 此优化器默认开启,可参数控制"hive.optimize.constant.propagation"。 Constant

    作者: 汤忒撒
    发表时间: 2021-11-08 11:59:23
    2340
    0
  • 【MRS产品】【hive 功能】hive运行报错堆栈深度超过限制

    【功能模块】HIVE模块【操作步骤&问题现象】1、hive运行作业报错堆栈深度超过限制2、stack depth limit exceeded【截图信息】【日志信息】(可选,上传日志内容或者附件)

    作者: marshal丶张
    4058
    3
  • ApplyArchiveRule Apply Archive Rule - API

    Apply archive rule retroactively to archive existing findings that meet the archive rule criteria.接口URL: "/v5/analyzers/{analyzer_id}/archive-rul

  • 图解网络:什么是网关负载均衡协议GLBP?

    VRRP:UDP 112 GLBP:UDP 3222 8、是否默认启用抢占 HSRP:默认情况下不启用抢占 VRRP:默认情况下启用抢占 GLBP:默认情况下,GLBP 抢占是禁用的,但是,可以手动启用此功能 9、选举 HSRP: 最高优先级 最高 IP 地址 VRRP:不支持

    作者: wljslmz
    发表时间: 2022-09-13 06:53:07
    212
    0
  • hive建表3

    Hive查询期间,将前面的查询结果保存为结果表,在结果表中查询数据 create table result as select b.item,b.total,case when total<800 then 'cold' when total>=800 and total

    作者: 没头脑
    发表时间: 2022-06-18 00:21:18
    258
    0
  • 华为云服务-运维篇-弹性负载均衡

    baidu.com的时候如何将用户的请求分发到集群中不同的机器上呢,这就是负载均衡在做的事情。 三、华为云平台-如何负载均衡 弹性负载均衡-ELB 华为云平台下负载均衡主角是 ELB(Elastic Load Balance), 即弹性负载均衡。 它能够将访问流量根据转

    作者: 风一样的美男子
    发表时间: 2022-12-14 07:36:37
    427
    0
  • Hive优化(十七)-严格模式

    严格模式 Hive提供了一个严格模式,可以防止用户执行那些可能意向不到的不好的影响的查询。 通过设置属性hive.mapred.mode值为默认是非严格模式nonstrict。开启严格模式需要修改hive.mapred.mode值为strict,开启严格模式可以禁止3种类型的查询。

    作者: 百忍成金的虚竹
    发表时间: 2021-03-25 15:49:49
    1596
    0