自定义博客皮肤VIP专享

*博客头图：

点击选择上传的图片

格式为PNG、JPG，宽度*高度大于1920*100像素，不超过2MB，主视觉建议放在右侧，请参照线上博客头图

请上传大于1920*100像素的图片！

博客底图：

点击选择上传的图片

图片格式为PNG、JPG，不超过1MB，可上下左右平铺至整个背景

栏目图：

点击选择上传的图片

图片格式为PNG、JPG，图片宽度*高度为300*38像素，不超过0.5MB

主标题颜色：

RGB颜色，例如：#AFAFAF

Hover：

RGB颜色，例如：#AFAFAF

副标题颜色：

RGB颜色，例如：#AFAFAF

预览取消提交

自定义博客皮肤

-+

上一步保存

刘本龙的专栏

个人邮箱：3089008201@qq.com. 技术交流群：684457529

我也要用

原创 Java对象占用堆内存大小计算

概述最近在看hbase源码，里面有对象占用内存大小的计算。正好笔记记录一下。一般来说，int占4个字节，long占8个字节，等等。但是对象在队中的存储不止其包含的字段所占用的空间，还包括对象头，对齐填充等信息。接下来就结合hbase源码分析一下对象在堆中的存储情况。原生类型(primitiv...

2019-11-27 17:57:40 404 0

原创 hbase/hadoop异常：No lease on /hbase/archive/data/... File is not open for writing

问题描述我在进行hbase快照拷贝时报了以下错误： ./hbase org.apache.hadoop.hbase.snapshot.ExportSnapshot -snapshot "MODEL.THIRD_PARTY_KV-11211752-snapshot" -copy...

2019-11-21 19:11:36 843 0

原创 hbase 预分区Pre-splitting 解决热点问题

预分区在创建表时我们可以指定分区数量及规则等信息。最简单的方法是在创建表时指定分割点数组。请注意，将字符串文字指定为拆分点时，它们将基于字符串的基础字节表示形式创建拆分点。因此，当指定分割点“ 10”时，实际上是在指定字节分割点“ \ x31 \ 30”。分割点将定义n + 1个区域，其...

2019-11-05 19:59:17 250 0

原创 hbase集群滚动重启Rolling Restart

概述在我们修改了regionserver的配置后，需要对某个或所有的regionserver进行重启。或者在集群升级到新的版本时进行滚动升级。以上都需要尽可能的不影响业务，集群保持存活可用。当然最简单的方法是停止整个集群，修改完后再重启，但是显然不适用。下面看看如何使用rolling-re...

2019-11-05 11:59:44 739 0

原创 HBASE手动触发major_compact

定时执行脚本 #!/bin/bash source /etc/profile sh ./hbase shell <<EOF major_compact 'table_name' EOF major_compact 语法： #Compact all regions ...

2019-11-05 11:26:52 693 0

原创 hbase扩容缩容

初始化集群初始化集群：hadoop三个DataNode，HBASE集群只有一个regionserver。后面我们不停服的情况下，动态添加一个机器node4，在node4上启动Hregionserver服务。 hbase动态扩容配置regionservers 配置每台机器的regionse...

2019-11-04 19:38:37 1390 0

原创 hbase 负载均衡

概述 hbase 有多个regionserver，固需要负载均衡。本文讲述hbase的负载均衡如何使用。以下命令都是在hbase shell 控制台使用的。 balance_switch hbase(main):001:0> help 'balance_switch' ...

2019-11-04 19:32:22 260 0

原创 hadoop 动态扩容缩容

初始化集群初始化集群：hadoop三个DataNode，HBASE集群只有一个regionserver。后面我们不停服的情况下，动态添加一个机器node4，在node4上启动DataNode和Hregionserver服务。 hadoop动态扩容准备工作准备工作与新搭建集群类似，这里参...

2019-11-04 19:09:44 308 0

提示

确定要删除当前文章？

取消删除