易陆发现互联网技术论坛

 找回密码
 开始注册
查看: 86|回复: 2
收起左侧

hadoop 清理hbase相关数据

[复制链接]
发表于 2025-3-11 17:00:01 | 显示全部楼层 |阅读模式

马上注册,结交更多好友,享用更多功能,让你轻松玩转社区。

您需要 登录 才可以下载或查看,没有账号?开始注册

x
/vdata/software/hbase/bin/hbase shell                                                                                                                                                                                                                                                                                                                                                                                                               
* B& s6 A' P& Z9 GSLF4J: Class path contains multiple SLF4J bindings.                           ) N8 b- H. O3 v$ _- ?
hbase(main):001:0> list                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                   6 H. U# G8 G/ ~8 D" B) ~' k/ D
TABLE                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                               
, x: ?& p. t& q6 h5 ^pinpoint:AgentEvent                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                        
; X: }2 T; A9 Tpinpoint:AgentInfo                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                               0 q. Y1 j  ~1 G7 m7 l
pinpoint:AgentLifeCycle                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                             6 a# \0 Q, i% N* Z$ y* C
pinpoint:AgentStatV2                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                           % |- L! P( h  Y' [6 p; v
pinpoint:ApiMetaData                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                        5 V0 k9 x$ J! Z4 v' F
pinpoint:ApplicationIndex                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                        
4 ?5 L) c+ U# A- w$ o( Cpinpoint:ApplicationMapStatisticsCallee_Ver2                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                     $ y, j5 W' ?  [! ~* H4 j
pinpoint:ApplicationMapStatisticsCaller_Ver2                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                     
5 z; `( S' Z0 w0 A) |! cpinpoint:ApplicationMapStatisticsSelf_Ver2                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                         
9 E7 k2 n$ C# Z1 N' Y9 zpinpoint:ApplicationStatAggre                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                              
2 \  S7 v/ k; o2 q7 i9 L; Opinpoint:ApplicationTraceIndex                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                          
- {# H" r; M1 n0 w3 F( D  Tpinpoint:HostApplicationMap_Ver2                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                       6 _" y" y) j1 o. p! R: l* e- O; j$ I* ^
pinpoint:SqlMetaData_Ver2                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                 
- D8 Z* N9 |! R3 Mpinpoint:StringMetaData                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                     
! U9 A# M2 h" _& j. w$ Npinpoint:TraceV2                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                     
! a5 j2 p1 Z3 x9 V15 row(s)                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                           
+ S6 O0 Q  b+ t1 w* wTook 0.3029 seconds                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                           / s4 n' [9 l7 X3 Q) @
=> ["pinpoint:AgentEvent", "pinpoint:AgentInfo", "pinpoint:AgentLifeCycle", "pinpoint:AgentStatV2", "pinpoint:ApiMetaData", "pinpoint:ApplicationIndex", "pinpoint:ApplicationMapStatisticsCallee_Ver2", "pinpoint:ApplicationMapStatisticsCaller_Ver2", "pinpoint:ApplicationMapStatisticsSelf_Ver2", "pinpoint:ApplicationStatAggre", "pinpoint:ApplicationTraceIndex", "pinpoint:HostApplicationMap_Ver2", "pinpoint:SqlMetaData_Ver2", "pinpoint:StringMetaData", "pinpoint:TraceV2"]                                                                                                                                                                                                           
7 x  U; K, ~# A. \hbase(main):002:0>                                                                                                                                                                                                                                                                                                                                                                                                      3 I6 i+ Z- p' r2 F
hbase(main):003:0> compact 'pinpoint:AgentStatV2'                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                       : o% I+ a" F: K3 t/ Z. A
Took 1.0937 seconds                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                  
% A" E5 R7 ?1 \% D  y* B3 Whbase(main):004:0>                          
' L$ c. w- {7 S9 h" y5 r; z3 ]& S1 xhbase(main):005:0>  list_snapshots                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                            * }: q+ x' Q1 _, t9 G
SNAPSHOT                                         TABLE + CREATION TIME                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                         
# c: ~- B3 i" h0 F# p0 row(s)                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                       1 n6 u) D: }8 u7 F9 x* h% p
Took 0.0139 seconds                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                          # @1 L" `& l2 r+ w
=> []                                                                             
2 L. V  A/ @' g$ `9 \' P$ o# V' F3 Q# c4 u
( _1 B7 f2 V6 a: ^/ L& [
 楼主| 发表于 2025-3-11 17:00:02 | 显示全部楼层
[devops@hadoop1 data]$ pwd                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                     
1 M3 X! _, p. Z9 {/vdata/software/hbase/hbase_data/archive/data                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                   
% |" J! z: \2 ?, c+ z4 _& D[devops@hadoop1 data]$ cd ..                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                    
' G. B9 v0 [7 s' I1 ]+ `[devops@hadoop1 archive]$ cd ..                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                 # @& q) Y& F7 ?4 S1 X% u6 t
[devops@hadoop1 hbase_data]$ cd ..                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                              
& j4 R6 u! `8 B% D0 w+ l[devops@hadoop1 hbase]$ cd bin/                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                 
2 M0 S- b6 }& w$ ?% L[devops@hadoop1 bin]$ ls                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                        
" `8 H( U, E. H! X3 h- B' xconsiderAsDead.sh     hbase             hbase-config.cmd  hbase-jruby             master-backup.sh  replication               start-hbase.sh            test                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                    
2 {1 O/ i. j$ B( f3 Udraining_servers.rb   hbase-cleanup.sh  hbase-config.sh   hirb.rb                 region_mover.rb   rolling-restart.sh        start-hbase-zookeeper.sh  zookeepers.sh                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                           - j: y0 ]* B6 I9 ?& J) j* L
get-active-master.rb  hbase.cmd         hbase-daemon.sh   local-master-backup.sh  regionservers.sh  shutdown_regionserver.rb  stop-hbase.cmd                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                   
& j4 y3 p0 r2 h, hgraceful_stop.sh      hbase-common.sh   hbase-daemons.sh  local-regionservers.sh  region_status.rb  start-hbase.cmd           stop-hbase.sh                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                     0 ?+ I' }* U* m) x% Z
[devops@hadoop1 bin]$ more hbase-                                      
: v. \6 O- P6 G' v4 x3 y4 z6 t# G( H3 `( k. m$ A
$ I! m: B% j$ q1 M% L3 l% k
[devops@hadoop1 bin]$ pwd2 p" P% q) c, t3 C
/vdata/software/hbase/bin
! Q) v1 P9 A- C% g  L( u9 c: j[devops@hadoop1 bin]$ ( D8 Z* l0 |' c( C  r; \) q

2 A" _/ P$ H% [! T; y9 V" P& v3 H* q
4 c! J/ @) f+ B. A$ s) z
 楼主| 发表于 2025-3-11 17:00:03 | 显示全部楼层
使用hbase shell : X) z2 m) i5 X0 a- r3 p+ L$ r

+ h% v" G% c# T5 W+ w7 {打开终端,进入hbase shell 环境:
& v" `6 q% D  h9 N* _hbase shell
6 N. ?1 o* `$ h6 T
/ `! @$ d0 e' B进入hbase shell 之后,首先禁用表格的自动flush功能,以提高清空效率:
; {0 P# |$ _5 t# {
2 ~* t9 r! G' Q7 P  y+ |hbase> disable  'table_name'+ w! L, @6 R9 t
% K. E# i" a& t  Z! h, w3 L* |  @
hbase> alter 'table_name',{NAME => 'cf' ,METHOD => 'table_att','MAX_FILESIZE' => '0'}  x+ V2 J# ~" B9 S7 L0 z9 T
, U- S2 b5 Q+ h1 [5 K  [* @2 m! v* c
清空表格中的数据:* D2 X9 y: v- E5 _
    hbase >truncate 'table_name'
5 h. n+ L- x2 X4 Q$ \% |; p$ ^& {7 v. [& {/ G8 F
启动用表格的自动flush功能:
. J" o, r" D' {$ M1 j1 O3 L8 Hhbase> enable  'table_name'  # X& S3 {3 Y9 L/ i+ I& a

6 X. r# W  _, X8 M& d3 N; {
) ?& J$ s. k$ u4 b, \以上就清空hbase的表格数据了。* p0 e6 B; k6 F* Y5 W8 N

) P" U3 K- T+ Y
您需要登录后才可以回帖 登录 | 开始注册

本版积分规则

关闭

站长推荐上一条 /4 下一条

北京云银创陇科技有限公司以云计算运维,代码开发

QQ|返回首页|Archiver|小黑屋|易陆发现技术论坛 ( 蜀ICP备2026014127号-1 )点击这里给我发消息

GMT+8, 2026-4-8 21:28 , Processed in 0.052052 second(s), 22 queries .

Powered by Discuz! X3.4 Licensed

© 2012-2025 Discuz! Team.

快速回复 返回顶部 返回列表