内容选择
全部
内容选择
内容分类
  • 学堂
  • 博客
  • 论坛
  • 开发服务
  • 开发工具
  • 直播
  • 视频
  • 用户
时间
  • 一周
  • 一个月
  • 三个月
  • HBase操作实践之JAVA API

    类型转化工具类,HBase中数据类型为字节, 所有类型存入后都变成字节,需要相互转化。 HBase客户端连接 注意:配置windows向linux的ip映射。 // 获得客户端 //1. 读取配置文件 Configuration conf = HBaseConfiguration

    作者: tea_year
    发表时间: 2024-06-28 22:17:50
    0
    0
  • HBase的3个重要机制

    而且regionserver级别的flush会阻塞客户端读写 2.(hbase.hregion.memstore.flush.size) 默认:128M 单个region里memstore的缓存大小,超过那么整个HRegion就会flush。 3.(hbase.regionserver.opt

    作者: 大数据梦想家
    发表时间: 2021-09-28 14:54:46
    1027
    0
  • HBase架构原理

    的非常稀疏。HBase 访问接口 HBase 支持很多种访问,访问HBase的常见接口如下: 1、Native Java API,最常规和高效的访问方式,适合Hadoop MapReduce Job并行批处理HBase表数据。 2、HBase Shell,HBase的命令行工具,最简单的接口,适合HBase管理使用。

    作者: Smy1121
    发表时间: 2019-06-21 12:20:24
    3461
    0
  • 【大数据】HBase分布式数据库架构及原理

    文章目录 一、HBase的整体架构1、Client客户端2、ZooKeeper集群3、HMaster4、HRegionServer5、Region 1. HBase的数据存储原理2. HBase读数据流程3. HBase写数据流程4. HBase的flush、compact机制4

    作者: 橙子园
    发表时间: 2022-05-25 16:22:33
    456
    0
  • 使用Flume消费kafka topic数据并存储到HBase

    html)。操作步骤:    1. 从HBase客户端拷贝配置文件hbase-site.xml到Flume server所在节点(流式core节点)的配置目录 "/opt/Bigdata/MRS_x.x.x/1_x_Flume/etc/" 下。通常可以在分析集群Master节点HBase客户端安装目录如“

    作者: misssuk
    发表时间: 2020-05-25 21:20:57
    9555
    0
  • HBase经典案例集锦一:读写慢(2-6):连接池设置较小导致应用写hbase

    sync打印;打印业务侧jstack日志,通过jstack确定,都是在等待链接;问题解决参考     客户端连接不够,客户端hbase-site.xml配置文件中修改hbase.client.pool.size 默认为1,修改值最好和应用并发数设置一样。

    作者: zhiru
    1275
    0
  • HBase WAL源码分析

    WALWAL(Write-Ahead-Log)是HBase的RegionServer在处理数据插入和删除的过程中用来记录操作内容的一种日志。大致过程如下图所示,首先客户端启动一个操作来修改数据,每一个修改都封装到KeyValue对象实例中,并通过RPC调用发送到含有匹配Regio

    作者: yd_267869256
    557
    0
  • 海量数据的黎明——HBase

    ook-messages-hbase,这是Facebook的员工Nicolas Spiegelberg写的,他也是HBase的committer。本文节选自《HBase权威指南》内容简介本书探讨了如何通过使用与HBase高度集成的Hadoop将HBase的可伸缩性变得简单;把大型

    作者: G-washington
    发表时间: 2020-02-14 19:43:26
    7353
    0
  • HBase集群搭建之三:HBase安装及分布式配置

    mv /usr/local/hbase-2.2.5 /usr/local/hbase配置/usr/local/hbase/conf/目录下的hbase-env.sh、hbase-site.xml、regionservers文件。1.hbase-env.sh1597976337383035681

    作者: 行大运
    发表时间: 2020-08-21 10:28:34
    9647
    0
  • HBase快速入门系列(6) | Hbase简单的API操作

    apache.hbase</groupId> <artifactId>hbase-server</artifactId> <version>1.3.1</version> </dependency> <dependency> <groupId>org.apache.hbase</groupId>

    作者: 不温卜火
    发表时间: 2020-12-03 01:15:54
    3265
    0
  • 安装oracle客户端并验证oracle客户端

    shutdown immediate 安装oracle客户端 #创建oracle目录,进入oracle目录 mkdir -p oracle cd oracle #安装wget命令 yum -y install wget #下载oracle客户端 wget https://download

    作者: QGS
    发表时间: 2021-03-18 07:28:20
    7063
    0
  • ES索引HBase场景实操

    具体集群资源配置。3 将数据导入HBase3.1 相关配置参考HD产品文档章节:业务操作指南 > HBase > (华为增强)BulkLoad Tool  > 按自定义方式导入数据3.2 创建HBase表执行:hbase shell进入hbase的命令行执行创建表命令1:create

    作者: 南派三叔
    1253
    0
  • SparkStreaming批量写入HBase

    场景说明场景说明用户可以在Spark应用程序中使用HBaseContext的方式去操作HBase,使用streamBulkPut接口将流数据写入HBase表中。数据规划在客户端执行hbase shell进入HBase命令行。在hbase命令执行下面的命令创建HBbase表:create

    作者: LCDsxg
    1564
    0
  • HBase基于PE工具的读写性能测试

    0.2版本健康状态正常,安装HBase服务2、安装有HBase客户端,例如安装路径为 /opt/client/HBase二、上传PE工具如附件解压缩后获取hbase-server-2.2.3-hw-ei-302002-tests.jar 和 hbase-mapreduce-2.2

    作者: suwei
    1779
    0
  • HBase维护经典案例集锦

    count,导致HBase 读写慢★★★2-9 多spark任务写入hbasehbase服务不可用3-1zookeeper频繁Full GC导致hbase服务不可用★★★★3-2meta表或者namespace表所在节点regionserver重启导致hbase服务不可用★★★

    作者: suwei
    3089
    1
  • hbase rowkey 如何设计和 hbase如何优化

    1a1b2c3d4e5hbase(main):002:0> create 'user_pp1','info','partition',SPLITS_FILE => '1'0 row(s) in 3.0460 seconds=> Hbase::Table - user_pp1hbase(main):003:0>

    作者: tscswcn
    发表时间: 2019-03-16 22:29:08
    3053
    0
  • hbase认证问题

    各位老师,有没有遇到过这种问题,单独的hive可以查到数据,单独地hbase经过zk可以往hbase中put数据,但是连起来,先查hive,再把hive的结果,用hbase链接zk,往hbase中put数据,就报用户认证错误。具体保错如下图,请老师帮忙解决下,谢谢啦。 469221

    作者: 王小羽
    4292
    4
  • HBase经典案例集锦四:重启异常(5-5):WAL日志分裂异常导致HBase启动超时

    使用hbase用户登录客户端,进行以下操作:停止hbase服务认证通过后,执行hdfs dfs -mv /hbase/WALs /tmp/,将该目录移走重启hbase服务,等待region全部上线手动回放WAL:hbase org.apache.hadoop.hbase.mapreduce

    作者: zhiru
    1257
    0
  • HBase(十一)集群监控

    集群监控工具集成Hbase使用hadoop的监控框架,基于MetricsContext的可用的实现:GangliaContext:指标推送到GangliaFileContext:指标写入磁盘文件TimeStampingFileContext:写入文件的同时,加入时间戳前缀Comp

    作者: 大数据小粉
    发表时间: 2016-11-16 08:54:30
    10134
    0
  • HBase学习入门之HBase数据模型

    从逻辑视图来看,HBase中的数据是以表形式进行组织的,而且和关系型数据库中的表一样,HBase中的表也由行和列构成,因此HBase非常容易理解。但从物理视图来看,HBase是一个Map,由键值(KeyValue,KV)构成,不过与普通的Map不同,HBase是一个稀疏的、分布式的、多维排序的Map。

    作者: zhy1003
    发表时间: 2021-12-14 07:49:28
    1655
    0