易陆发现互联网技术论坛

 找回密码
 开始注册
查看: 85|回复: 2
收起左侧

hadoop 清理hbase相关数据

[复制链接]
发表于 2025-3-11 17:00:01 | 显示全部楼层 |阅读模式

马上注册,结交更多好友,享用更多功能,让你轻松玩转社区。

您需要 登录 才可以下载或查看,没有账号?开始注册

x
/vdata/software/hbase/bin/hbase shell                                                                                                                                                                                                                                                                                                                                                                                                                8 F" @1 t1 B4 w9 F4 d  o
SLF4J: Class path contains multiple SLF4J bindings.                           
2 Z0 C2 S3 H& {, v2 d) _3 E) @9 j3 L% Zhbase(main):001:0> list                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                  
- B! J! O& T  H4 V, ETABLE                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                               
' T( u2 w4 T1 |pinpoint:AgentEvent                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                         3 t! O& C0 M& ?7 {% w0 Q
pinpoint:AgentInfo                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                              
7 I4 I- _( I0 Mpinpoint:AgentLifeCycle                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                             0 V1 J! q; a; l' B: ]1 V
pinpoint:AgentStatV2                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                           1 w. C$ g3 T/ F6 V6 B% o
pinpoint:ApiMetaData                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                        7 o- e5 Z7 |. t  C  M. [" N
pinpoint:ApplicationIndex                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                        
% \$ w2 M8 z) C' Q  npinpoint:ApplicationMapStatisticsCallee_Ver2                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                     * w; R3 V) M7 @3 `/ j+ C: y
pinpoint:ApplicationMapStatisticsCaller_Ver2                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                     
7 |9 ]6 Z4 L) A/ c9 ~# C) c6 B/ Apinpoint:ApplicationMapStatisticsSelf_Ver2                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                         $ b* |7 ?0 L4 o( w% q: z
pinpoint:ApplicationStatAggre                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                              2 x  b* R/ r1 ?6 _1 T! z
pinpoint:ApplicationTraceIndex                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                          
& |6 b1 K0 i+ K2 K$ Fpinpoint:HostApplicationMap_Ver2                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                      
) \  ~6 M& \% Z! Y. U  d; hpinpoint:SqlMetaData_Ver2                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                 4 ~7 z2 ^% I4 V
pinpoint:StringMetaData                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                     
! l: o2 ^( m% O* T( j0 u9 tpinpoint:TraceV2                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                     
' q6 c' C' v2 i- p( F15 row(s)                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                           ; S+ J7 l8 F" B
Took 0.3029 seconds                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                           8 |$ X' x5 N( y) ^
=> ["pinpoint:AgentEvent", "pinpoint:AgentInfo", "pinpoint:AgentLifeCycle", "pinpoint:AgentStatV2", "pinpoint:ApiMetaData", "pinpoint:ApplicationIndex", "pinpoint:ApplicationMapStatisticsCallee_Ver2", "pinpoint:ApplicationMapStatisticsCaller_Ver2", "pinpoint:ApplicationMapStatisticsSelf_Ver2", "pinpoint:ApplicationStatAggre", "pinpoint:ApplicationTraceIndex", "pinpoint:HostApplicationMap_Ver2", "pinpoint:SqlMetaData_Ver2", "pinpoint:StringMetaData", "pinpoint:TraceV2"]                                                                                                                                                                                                           " R: Y; o3 f0 k* f' q! C
hbase(main):002:0>                                                                                                                                                                                                                                                                                                                                                                                                      5 g  K  t, A$ h3 l8 ~5 {% }
hbase(main):003:0> compact 'pinpoint:AgentStatV2'                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                       
7 I8 R, W0 ^# U) iTook 1.0937 seconds                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                  5 f7 _* p( Y4 C. ]  v2 v
hbase(main):004:0>                          
; q0 D6 a# f: m# Nhbase(main):005:0>  list_snapshots                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                            
; h% W- s6 |* L: U9 I8 q' A% YSNAPSHOT                                         TABLE + CREATION TIME                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                         + n3 E2 k, T6 a0 u9 `* N% @( \' m4 D
0 row(s)                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                       
! B( {) z, F* ?6 \4 eTook 0.0139 seconds                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                          ) p$ f$ Q# t8 Z" u3 G0 |
=> []                                                                             - ]) X3 V9 A4 R" W& F9 H4 A

- O. w" G. E  ~7 o/ a3 T: S
! q/ |" w2 i! \: s0 \( {4 Q
 楼主| 发表于 2025-3-11 17:00:02 | 显示全部楼层
[devops@hadoop1 data]$ pwd                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                      ) r3 ^$ S4 d+ R1 J6 [2 m
/vdata/software/hbase/hbase_data/archive/data                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                   
% Y: e2 W' F, i1 }& [[devops@hadoop1 data]$ cd ..                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                    / R! h! J, z1 [$ g- A
[devops@hadoop1 archive]$ cd ..                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                 
& }" f% w  }! p) D[devops@hadoop1 hbase_data]$ cd ..                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                              & v6 R( q- Q+ C
[devops@hadoop1 hbase]$ cd bin/                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                 
0 b& H, F, L" e' f' t+ r[devops@hadoop1 bin]$ ls                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                        / t% F+ ~$ I* H: F
considerAsDead.sh     hbase             hbase-config.cmd  hbase-jruby             master-backup.sh  replication               start-hbase.sh            test                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                    
% N! o/ n# v9 Z8 F) X9 qdraining_servers.rb   hbase-cleanup.sh  hbase-config.sh   hirb.rb                 region_mover.rb   rolling-restart.sh        start-hbase-zookeeper.sh  zookeepers.sh                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                           - v) i5 k" g0 L0 v2 \% }$ {, {
get-active-master.rb  hbase.cmd         hbase-daemon.sh   local-master-backup.sh  regionservers.sh  shutdown_regionserver.rb  stop-hbase.cmd                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                    ! V: {2 D- N, K, c4 O5 {
graceful_stop.sh      hbase-common.sh   hbase-daemons.sh  local-regionservers.sh  region_status.rb  start-hbase.cmd           stop-hbase.sh                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                     & q& g1 ?+ o& Q+ D
[devops@hadoop1 bin]$ more hbase-                                      
4 p! }3 v' f+ U$ w) ?& C& a- D& g, M+ w6 l# ^6 |  Q/ E
8 V3 y: W! Z# q9 B$ }0 C) t
[devops@hadoop1 bin]$ pwd% `8 r7 H7 N8 q" h! X' q/ a7 o
/vdata/software/hbase/bin; f' a/ W% R  l9 f% M* w
[devops@hadoop1 bin]$ 1 z$ Y6 \/ U* |; x" r; o/ l
, W, m5 H  M3 j1 u: ]1 p: D

8 H$ v* N: j4 C% C
 楼主| 发表于 2025-3-11 17:00:03 | 显示全部楼层
使用hbase shell
+ }7 \' ?7 V: R7 n2 a2 f) C( a- I4 r; B! Z; P
打开终端,进入hbase shell 环境:
. F, y( e3 x0 N+ y. X$ e  Ahbase shell # o- A% e# P0 y$ _: [8 a) N" p8 R) Q, m

- y- p- G$ E  m进入hbase shell 之后,首先禁用表格的自动flush功能,以提高清空效率:
2 k' K% E8 {" u4 A4 ^7 k" P" o% F9 _8 e' Y
hbase> disable  'table_name'8 d$ T5 q# c' e" X

8 g; Q: g0 a& J5 z& d! e9 Lhbase> alter 'table_name',{NAME => 'cf' ,METHOD => 'table_att','MAX_FILESIZE' => '0'}! ]/ N% e# P8 r4 d+ k3 h' \
* I: F3 \  E+ i' z! i- P- o
清空表格中的数据:
: Z8 B* ]1 e9 C5 A: A9 ^6 q$ N    hbase >truncate 'table_name'+ S/ J  @5 f1 M/ {3 J% K! j+ P$ ^

  R6 i4 c0 l0 g! b$ R7 H+ t启动用表格的自动flush功能:2 |; B5 {6 o* b
hbase> enable  'table_name'  
& u% w* v0 F+ J4 B8 S: x) z- a' i. t; G1 f( _0 U
9 \" J( |) `; H% I9 w
以上就清空hbase的表格数据了。
* d( H: A9 h" \' d( L9 N( m! t  i; f- S7 g
您需要登录后才可以回帖 登录 | 开始注册

本版积分规则

关闭

站长推荐上一条 /4 下一条

北京云银创陇科技有限公司以云计算运维,代码开发

QQ|返回首页|Archiver|小黑屋|易陆发现技术论坛 ( 蜀ICP备2026014127号-1 )点击这里给我发消息

GMT+8, 2026-4-8 21:26 , Processed in 0.050256 second(s), 22 queries .

Powered by Discuz! X3.4 Licensed

© 2012-2025 Discuz! Team.

快速回复 返回顶部 返回列表