浏览此站
联系我们相册切换到窄版 Language

 找回密码
 注册
易陆发现论坛»论坛 › 操作系统区 › 非桌面系统 › Redhat/Centos Linux系统 › hadoop 清理hbase相关数据
返回列表 发新帖
查看: 94|回复: 2

hadoop 清理hbase相关数据

[复制链接]
admin

1

主题

0

回帖

12

积分

管理员

积分
12
QQ
发表于 2025-3-11 17:00:01 | 显示全部楼层 |阅读模式
/vdata/software/hbase/bin/hbase shell                                                                                                                                                                                                                                                                                                                                                                                                                ( w, {) J5 N& R
SLF4J: Class path contains multiple SLF4J bindings.                           
$ R5 i  Z1 _& q& E- z1 O/ @8 Ohbase(main):001:0> list                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                  
- [: y8 P# ]/ g1 Q, VTABLE                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                               
4 B0 A" ~; [' s+ {7 h( @- npinpoint:AgentEvent                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                         9 d! f1 b9 r9 T! t( T- @- J7 T
pinpoint:AgentInfo                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                               ) D7 ~% ~1 p# \4 m
pinpoint:AgentLifeCycle                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                             - i" v6 C4 T$ G; S7 E# L$ Z
pinpoint:AgentStatV2                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                           $ ~3 V1 F. G% Z: [
pinpoint:ApiMetaData                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                       
+ L" z3 ~& U& G, {9 a2 @pinpoint:ApplicationIndex                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                        
5 M* B# f! J; @pinpoint:ApplicationMapStatisticsCallee_Ver2                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                     
- c8 e! ?0 \) e9 D' y& c1 |pinpoint:ApplicationMapStatisticsCaller_Ver2                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                     0 m2 I/ X  S# ?. f/ N; J
pinpoint:ApplicationMapStatisticsSelf_Ver2                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                         * s( w% @; U/ j: r0 `6 k" t
pinpoint:ApplicationStatAggre                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                              
* w% C# q8 U! x5 ~# f3 npinpoint:ApplicationTraceIndex                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                          2 ?& U* I7 m1 X
pinpoint:HostApplicationMap_Ver2                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                       - r  K* \* q$ ~. g  P
pinpoint:SqlMetaData_Ver2                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                 
, f; ?" a+ l* X! M8 Lpinpoint:StringMetaData                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                      ) |' ~+ R) A' N3 E. ~" K
pinpoint:TraceV2                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                     
+ m! u2 R/ N6 ?- o15 row(s)                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                           9 y" I, ?4 m3 Q6 G- d
Took 0.3029 seconds                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                           9 f! f% o0 g! ]( Z
=> ["pinpoint:AgentEvent", "pinpoint:AgentInfo", "pinpoint:AgentLifeCycle", "pinpoint:AgentStatV2", "pinpoint:ApiMetaData", "pinpoint:ApplicationIndex", "pinpoint:ApplicationMapStatisticsCallee_Ver2", "pinpoint:ApplicationMapStatisticsCaller_Ver2", "pinpoint:ApplicationMapStatisticsSelf_Ver2", "pinpoint:ApplicationStatAggre", "pinpoint:ApplicationTraceIndex", "pinpoint:HostApplicationMap_Ver2", "pinpoint:SqlMetaData_Ver2", "pinpoint:StringMetaData", "pinpoint:TraceV2"]                                                                                                                                                                                                           3 e) z4 a/ z5 p- R# j: F) _+ G
hbase(main):002:0>                                                                                                                                                                                                                                                                                                                                                                                                        l8 L% [$ @4 v# D6 ~4 M
hbase(main):003:0> compact 'pinpoint:AgentStatV2'                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                       6 k0 H0 @1 z8 a5 u# g+ p5 F1 X" k
Took 1.0937 seconds                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                  # k9 S6 q" x2 t# Y
hbase(main):004:0>                          
% Q* ?1 F- `( B# n9 p. j/ D$ V% V& ?hbase(main):005:0>  list_snapshots                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                            
$ S; k$ d" e0 j+ ISNAPSHOT                                         TABLE + CREATION TIME                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                         3 w) ?* k7 `# k' c: w6 G
0 row(s)                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                       
/ n+ q6 ?: k* Z" x" z2 C' a& qTook 0.0139 seconds                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                          
- B0 F  e# Z3 Q. q: S9 ^=> []                                                                             6 w3 K/ W7 x6 o  b3 A
0 R" m- M" h9 R; s* R! Y+ t( [

3 S9 o, X' P( N- [; y8 ]
回复

举报

admin

1

主题

0

回帖

12

积分

管理员

积分
12
QQ
 楼主| 发表于 2025-3-11 17:00:02 | 显示全部楼层
[devops@hadoop1 data]$ pwd                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                      9 R  i# C  g; a$ A% E
/vdata/software/hbase/hbase_data/archive/data                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                   
) Y, Y" }3 }6 c! o9 N3 B" {[devops@hadoop1 data]$ cd ..                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                    $ t0 u7 s' g" Y, D" T1 U
[devops@hadoop1 archive]$ cd ..                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                 2 G+ j; E* A; |- ?' O5 f# I
[devops@hadoop1 hbase_data]$ cd ..                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                              
+ z6 e! r9 Y( Q/ \* W  f[devops@hadoop1 hbase]$ cd bin/                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                 2 b. U% k: q0 Q5 D1 @* s
[devops@hadoop1 bin]$ ls                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                        7 q0 u3 U1 F- B8 N6 i* ^, L3 j
considerAsDead.sh     hbase             hbase-config.cmd  hbase-jruby             master-backup.sh  replication               start-hbase.sh            test                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                    
& z" I% @9 b7 D3 N2 K1 wdraining_servers.rb   hbase-cleanup.sh  hbase-config.sh   hirb.rb                 region_mover.rb   rolling-restart.sh        start-hbase-zookeeper.sh  zookeepers.sh                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                           5 \$ [/ K9 J' Z7 e4 T
get-active-master.rb  hbase.cmd         hbase-daemon.sh   local-master-backup.sh  regionservers.sh  shutdown_regionserver.rb  stop-hbase.cmd                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                   
' {" d/ M2 X* mgraceful_stop.sh      hbase-common.sh   hbase-daemons.sh  local-regionservers.sh  region_status.rb  start-hbase.cmd           stop-hbase.sh                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                     
5 R% i, U$ j) v+ e1 k! F[devops@hadoop1 bin]$ more hbase-                                      + \; ~# M$ y, K) _- }! B. N

8 i( {/ f# Q, ]. I! s% Z+ j$ v1 `4 {4 n' A" S! C( t
[devops@hadoop1 bin]$ pwd
. Q% O) K2 c2 [/vdata/software/hbase/bin0 c  {: N3 N2 W; Z9 L
[devops@hadoop1 bin]$ 4 [( I1 s: P+ h/ s3 N! X
$ y8 z1 V$ z  {

4 F2 a* H! w/ q9 H! j! T2 X9 w
回复

举报

admin

1

主题

0

回帖

12

积分

管理员

积分
12
QQ
 楼主| 发表于 2025-3-11 17:00:03 | 显示全部楼层
使用hbase shell
% {' O5 l1 S6 ]" g2 Q- K+ b, S; \0 i& v% ]7 ~( q, W0 k
打开终端，进入hbase shell 环境：
5 s2 Y: s0 H# L; j4 {9 u0 U  R8 shbase shell 5 Z, Z% `" i3 \- a8 [
+ X3 _, ~3 U- N7 S6 `
进入hbase shell 之后，首先禁用表格的自动flush功能，以提高清空效率：
  M! N8 t0 k* N) w6 @+ ]" M# [. h% U2 u/ f
hbase> disable  'table_name'
+ X& A8 U& E: u, K: E. H/ Y- T0 S6 G* T  O
hbase> alter 'table_name',{NAME => 'cf' ,METHOD => 'table_att','MAX_FILESIZE' => '0'}
( `0 f5 a4 G  l% a- t' ?, I5 E" ~& C1 `9 |/ ^
清空表格中的数据：
$ h2 V# M3 s* b3 M; X7 }! m) C    hbase >truncate 'table_name'
- v; }- B6 u$ R
7 z6 h3 i+ N: G7 g启动用表格的自动flush功能：
) \! U5 R) x4 [2 z2 A7 s2 vhbase> enable  'table_name'  
( f1 h- ?$ c& N( q0 a- g- T' z4 I4 G0 j& S& @" y. ]

0 b2 @. }) C& h4 O以上就清空hbase的表格数据了。
3 I5 b( C" R7 Z% r% f: ~! d
3 i# x% H( T7 [. r
回复

举报

返回列表 发新帖
高级模式
B Color Image Link Quote Code Smilies
您需要登录后才可以回帖 登录 | 注册

本版积分规则

返回首页|Archiver|手机版|小黑屋|易陆发现技术论坛 ( 蜀ICP备2026014127号-1 )

GMT+8, 2026-6-12 00:46 , Processed in 0.017645 second(s), 22 queries .

Powered by Discuz! X5.0

© 2001-2026 Discuz! Team.

快速回复 返回顶部 返回列表