找回密码
 注册
查看: 93|回复: 2

hadoop 清理hbase相关数据

[复制链接]

1

主题

0

回帖

12

积分

管理员

积分
12
QQ
发表于 2025-3-11 17:00:01 | 显示全部楼层 |阅读模式
/vdata/software/hbase/bin/hbase shell                                                                                                                                                                                                                                                                                                                                                                                                                $ ~6 \( g  D, i+ e! N, y4 f
SLF4J: Class path contains multiple SLF4J bindings.                           8 y4 p( s, P4 s- P! }$ ^8 ]
hbase(main):001:0> list                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                     m: U# |% `8 c4 \
TABLE                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                               
" Q% T! `: z% `4 l/ Lpinpoint:AgentEvent                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                         , ^- g, R9 w6 O" Z1 w
pinpoint:AgentInfo                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                               / B5 ?. I, V5 j. l
pinpoint:AgentLifeCycle                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                             
# b7 F8 U8 {$ F6 L2 D2 Apinpoint:AgentStatV2                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                           
; a. z4 V3 l+ W- Npinpoint:ApiMetaData                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                        ( e- D& u0 D& v; c
pinpoint:ApplicationIndex                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                        " L- v# E  u6 h  y! c
pinpoint:ApplicationMapStatisticsCallee_Ver2                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                     - K8 c+ }' A' S, A! w" \% C$ y
pinpoint:ApplicationMapStatisticsCaller_Ver2                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                     
, D  C% N4 ]4 w( s2 c' apinpoint:ApplicationMapStatisticsSelf_Ver2                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                           ?* @2 X. t$ W) V5 F: v
pinpoint:ApplicationStatAggre                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                              
1 [  G  d8 ]& t4 O% k. d, a! rpinpoint:ApplicationTraceIndex                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                          
, \! B1 u3 h7 x$ P, b' A% j" {pinpoint:HostApplicationMap_Ver2                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                       3 ]2 I9 F2 a7 M! E- o3 F
pinpoint:SqlMetaData_Ver2                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                 ' w$ M1 l$ r! Q" W! U* d9 K. H% N
pinpoint:StringMetaData                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                     
8 n9 {6 n$ H" J( q+ {" L2 Gpinpoint:TraceV2                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                     
# L2 Y$ C+ K, ^8 c" K+ ^9 u15 row(s)                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                           
+ s& T6 `; H& y0 |& D; @* NTook 0.3029 seconds                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                           
, {$ ^: r3 W6 V$ f- D4 |9 x7 J=> ["pinpoint:AgentEvent", "pinpoint:AgentInfo", "pinpoint:AgentLifeCycle", "pinpoint:AgentStatV2", "pinpoint:ApiMetaData", "pinpoint:ApplicationIndex", "pinpoint:ApplicationMapStatisticsCallee_Ver2", "pinpoint:ApplicationMapStatisticsCaller_Ver2", "pinpoint:ApplicationMapStatisticsSelf_Ver2", "pinpoint:ApplicationStatAggre", "pinpoint:ApplicationTraceIndex", "pinpoint:HostApplicationMap_Ver2", "pinpoint:SqlMetaData_Ver2", "pinpoint:StringMetaData", "pinpoint:TraceV2"]                                                                                                                                                                                                           
3 i) t- v4 T0 H- l6 v. P: Whbase(main):002:0>                                                                                                                                                                                                                                                                                                                                                                                                      
' R# a4 V, v$ W& T) e" ?4 [hbase(main):003:0> compact 'pinpoint:AgentStatV2'                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                       
3 x& V. H5 |" Z+ w: Y$ ?Took 1.0937 seconds                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                    U/ W  [5 r2 N
hbase(main):004:0>                          4 ~/ M7 N1 P/ P  E7 C' z
hbase(main):005:0>  list_snapshots                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                            
  `8 Q1 G* k( u1 F& C0 I2 K2 vSNAPSHOT                                         TABLE + CREATION TIME                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                         2 H/ G- |  W, R3 X9 v' u. P) }2 E9 z
0 row(s)                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                         c( v; M& ^! G9 T; w' A
Took 0.0139 seconds                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                          
- W8 Y/ B* R  Y  D0 d8 S% ]=> []                                                                             9 |7 A! e0 v0 i3 F
5 j- U& K! J  {' o
* @6 [5 I$ @" c

1

主题

0

回帖

12

积分

管理员

积分
12
QQ
 楼主| 发表于 2025-3-11 17:00:02 | 显示全部楼层
[devops@hadoop1 data]$ pwd                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                        v( b+ I, J! z" g9 R  h
/vdata/software/hbase/hbase_data/archive/data                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                   
4 F; V/ [5 z6 }1 ][devops@hadoop1 data]$ cd ..                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                    3 Z4 @/ ]! b' ]
[devops@hadoop1 archive]$ cd ..                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                 
7 P, @5 ^+ A! y[devops@hadoop1 hbase_data]$ cd ..                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                              2 Q: U0 F3 a, X. ]0 d  I* Q
[devops@hadoop1 hbase]$ cd bin/                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                 ' ~: _3 |9 x# ]$ J: j2 U% L
[devops@hadoop1 bin]$ ls                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                        ! G, \8 h. C5 _/ ~) Z7 z: m! u
considerAsDead.sh     hbase             hbase-config.cmd  hbase-jruby             master-backup.sh  replication               start-hbase.sh            test                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                    - \9 Q5 _( h/ I* J& a
draining_servers.rb   hbase-cleanup.sh  hbase-config.sh   hirb.rb                 region_mover.rb   rolling-restart.sh        start-hbase-zookeeper.sh  zookeepers.sh                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                           
' `4 p/ a) D. `* @9 v9 Hget-active-master.rb  hbase.cmd         hbase-daemon.sh   local-master-backup.sh  regionservers.sh  shutdown_regionserver.rb  stop-hbase.cmd                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                   
7 W6 P1 o. i- o+ f: A3 Xgraceful_stop.sh      hbase-common.sh   hbase-daemons.sh  local-regionservers.sh  region_status.rb  start-hbase.cmd           stop-hbase.sh                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                     4 S& G" t* `* C* \$ `* @
[devops@hadoop1 bin]$ more hbase-                                      
8 d: E4 Y# ?: P9 y7 G5 e( c: K
+ Q" T) U0 ~# M* l; ^( n2 Q; H4 i7 Z: W2 i+ f0 a
[devops@hadoop1 bin]$ pwd
- H7 u' s9 Y2 g: f/vdata/software/hbase/bin
9 U4 o  g# F, J* m[devops@hadoop1 bin]$
  X+ E/ P$ N9 c4 p' Q- t1 p5 P: z" \2 V: R* |' v

) _9 l( j% Y, b, u4 k' o; g

1

主题

0

回帖

12

积分

管理员

积分
12
QQ
 楼主| 发表于 2025-3-11 17:00:03 | 显示全部楼层
使用hbase shell ) T) n0 ?7 _/ @4 A) N$ Z
% q. ?" l5 Y5 u* p
打开终端,进入hbase shell 环境:9 W% @  o, x4 b5 u2 v  B8 T
hbase shell   W1 D5 `# v4 u: o
1 R" Q( \) Y* I) Z
进入hbase shell 之后,首先禁用表格的自动flush功能,以提高清空效率:
, s  H- N8 A. I# i3 R" e
! I* D/ W4 a' H$ E' Zhbase> disable  'table_name'( _. Y. \8 \. Q- N
2 W- p/ ]/ t1 R* y: L* f2 W9 @
hbase> alter 'table_name',{NAME => 'cf' ,METHOD => 'table_att','MAX_FILESIZE' => '0'}
! f) c, _  M0 v& g4 p1 w% K9 r0 y
' [% Q) N( @0 j' B+ a( p% I; P" @清空表格中的数据:
9 ?7 U5 ~  q9 [9 k' _" B7 X    hbase >truncate 'table_name'
2 i2 b1 h0 u5 Q. w/ D/ t+ ?' I& A, o
启动用表格的自动flush功能:; S9 E1 N( z' l2 R# u
hbase> enable  'table_name'  
# |) |, b; @3 [- p0 {$ }9 C9 I. V$ c

" ]6 v. j. K' z: E9 M3 {以上就清空hbase的表格数据了。  E0 m6 k4 w/ U6 G5 g; ]; O
" V0 c" g* a: F9 a- R% ]
您需要登录后才可以回帖 登录 | 注册

本版积分规则

返回首页|Archiver|手机版|小黑屋|易陆发现技术论坛 ( 蜀ICP备2026014127号-1 )

GMT+8, 2026-6-12 00:40 , Processed in 0.018309 second(s), 22 queries .

Powered by Discuz! X5.0

© 2001-2026 Discuz! Team.

快速回复 返回顶部 返回列表