ceph 安装时报错：Error: Package: 2:ceph-base-12.2.13-0.el7.x86_64 (ceph-x86) 解决过程

admin

--> Finished Dependency Resolution
Error: Package: 2:ceph-base-12.2.13-0.el7.x86_64 (ceph-x86)
           Requires: liblttng-ust.so.0()(64bit)
! c+ ?3 k; l& ]. x1 R  P' bError: Package: 2:ceph-base-12.2.13-0.el7.x86_64 (ceph-x86)
/ z  ^. c! W: e: x* d  p& P/ b3 o           Requires: libleveldb.so.1()(64bit)
7 p: U$ K" F+ b6 a$ D2 NError: Package: 2:ceph-mgr-12.2.13-0.el7.x86_64 (ceph-x86)
# N: U' _( ?( V" ?) W# [# D: w) J           Requires: python-werkzeug
Error: Package: 2:ceph-mon-12.2.13-0.el7.x86_64 (ceph-x86)
           Requires: python-flask
Error: Package: 2:ceph-common-12.2.13-0.el7.x86_64 (ceph-x86)
           Requires: libbabeltrace-ctf.so.1()(64bit)
Error: Package: 2:ceph-mon-12.2.13-0.el7.x86_64 (ceph-x86)
3 Q# `1 [' ?  [6 K           Requires: libleveldb.so.1()(64bit)
( c2 A4 x  J' k2 FError: Package: 2:librbd1-12.2.13-0.el7.x86_64 (ceph-x86)
3 V, k. C- i7 p  L! i- P: H           Requires: liblttng-ust.so.0()(64bit)
9 e9 O- r. K* p6 Q' UError: Package: 2:ceph-common-12.2.13-0.el7.x86_64 (ceph-x86)
           Requires: libbabeltrace.so.1()(64bit)
Error: Package: 2:ceph-osd-12.2.13-0.el7.x86_64 (ceph-x86)
           Requires: libleveldb.so.1()(64bit)
Error: Package: 2:ceph-common-12.2.13-0.el7.x86_64 (ceph-x86)
6 M! }2 a9 E8 }% e" S! d1 G           Requires: libleveldb.so.1()(64bit)
' r- J. J* _; S1 R7 qError: Package: 2:ceph-mgr-12.2.13-0.el7.x86_64 (ceph-x86)
           Requires: python-pecan
Error: Package: 2:librados2-12.2.13-0.el7.x86_64 (ceph-x86)
+ p6 ?# u* S; m, V& k. x           Requires: liblttng-ust.so.0()(64bit)
* p5 A! O- {  n You could try using --skip-broken to work around the problem
You could try running: rpm -Va --nofiles --nodigest


安装epel-release 主键：

, Z# P% u) h) ^1 U9 g[root@ceph-1 ~]# rpm -vih http://dl.fedoraproject.org/pub/epel/7/x86_64/Packages/e/epel-release-7-14.noarch.rpm
/ V0 n, Q/ i6 t  t( }  @0 lRetrieving http://dl.fedoraproject.org/pub/epel/7/x86_64/Packages/e/epel-release-7-14.noarch.rpm
warning: /var/tmp/rpm-tmp.mQuVkn: Header V4 RSA/SHA256 Signature, key ID 352c64e5: NOKEY
Preparing...                          ################################# [100%]
3 j- p/ X" J- ^6 W" L7 XUpdating / installing...
   1:epel-release-7-14                ################################# [100%]

  @( H* m; q. ]0 k( b
" j6 V6 B4 U0 Y- M4 \1 P

admin

--> Finished Dependency Resolution
Error: Package: 2:ceph-mon-12.2.13-0.el7.x86_64 (ceph-x86)
- b1 A2 `3 v! `; j4 q/ L           Requires: python-flask
* S+ e* Q9 H3 y' vError: Package: 2:ceph-mgr-12.2.13-0.el7.x86_64 (ceph-x86)
           Requires: python-werkzeug
2 N( X& Y7 n6 K1 {Error: Package: python-pecan-0.4.5-2.el7.noarch (epel)
           Requires: python-webtest >= 1.3.1
7 {1 |; ~( j9 x" H7 ?. l% iError: Package: python-pecan-0.4.5-2.el7.noarch (epel)
           Requires: python-webob >= 1.2
You could try using --skip-broken to work around the problem
  f, b9 f2 }+ h: ^0 U: @6 T You could try running: rpm -Va --nofiles --nodigest
[root@ceph-3 ~]# yum -y install ceph ceph-radosgw --skip-broken

admin

需要的软件包安装有两种方式
每个节点自行使用yum安装，这种方式要求所有节点都能访问外网
* v# |$ I. N. Y' ^6 }使用内部搭建的yum源安装，这种方式只需要有某个节点可以访问外网即可
不管是哪种方式，安装ceph及相关软件包都需要配置ceph源。我们使用阿里云的源

1 R* r  n1 z" E, Q5 M/ x8 `) E[Ceph]
name=Ceph packages for $basearch
, [5 h' u* D. M: f' m3 }baseurl=http://mirrors.aliyun.com/ceph/rpm-luminous/el7/$basearch
% A/ y8 v2 A+ b6 o3 Ienabled=1
gpgcheck=0
6 a) y  \6 b$ J2 ~& N3 Z$ btype=rpm-md
+ h/ Z% n# [# s8 R5 igpgkey=https://mirrors.aliyun.com/ceph/keys/release.asc
3 j1 s- `9 P/ ]. A! v; bpriority=1
+ d( |+ ^( J5 v* H  A) L" ?' J[Ceph-noarch]
name=Ceph noarch packages
6 A! Z; t8 K* o! O! Q) Fbaseurl=http://mirrors.aliyun.com/ceph/rpm-luminous/el7/noarch
enabled=1
gpgcheck=0
$ i% V+ Q; x1 @# ^0 G, Rtype=rpm-md
3 {% p: ~; q- u. w. u3 c* Ygpgkey=https://mirrors.aliyun.com/ceph/keys/release.asc
priority=1
[ceph-source]
& H) R5 i1 h. z& _% Cname=Ceph source packages
6 [2 h0 o  j1 Z) p# `5 mbaseurl=http://mirrors.aliyun.com/ceph/rpm-luminous/el7/SRPMS
enabled=1
% J% F$ ]) M7 g% d5 ggpgcheck=0
type=rpm-md
4 f% q5 P2 o) n1 Vgpgkey=https://mirrors.aliyun.com/ceph/keys/release.asc
priority=1
1 U3 e5 g0 C5 `$ E第一种方式
1 T) G1 \" J8 F$ y2 u简单粗暴，在每个节点上加入ceph源后，先安装epel-release，如果我们不安装，就会缺少部分包，会有下面的错误
; K) |5 Z9 a* k" p! ?( H9 @
...
--> Finished Dependency Resolution
9 G5 w* X' |6 Y* m2 WError: Package: 2:librados2-12.2.11-0.el7.x86_64 (Ceph)
, ^! T, o$ W1 B% k" \" x3 s4 [           Requires: liblttng-ust.so.0()(64bit)
Error: Package: 2:ceph-common-12.2.11-0.el7.x86_64 (Ceph)
           Requires: libbabeltrace-ctf.so.1()(64bit)
Error: Package: 2:ceph-osd-12.2.11-0.el7.x86_64 (Ceph)
: s* G& q4 G9 d2 ~           Requires: libleveldb.so.1()(64bit)
Error: Package: 2:ceph-mgr-12.2.11-0.el7.x86_64 (Ceph)
           Requires: python-pecan
# L; S! p% w& ]& ^, D) \, h( d+ GError: Package: 2:ceph-common-12.2.11-0.el7.x86_64 (Ceph)
9 ^8 u, r: ]) w) ]; _! L7 L5 I           Requires: libbabeltrace.so.1()(64bit)
$ |4 I: ~, Q& _7 X8 F* Q/ OError: Package: 2:librbd1-12.2.11-0.el7.x86_64 (Ceph)
           Requires: liblttng-ust.so.0()(64bit)
& T" t' l0 ]8 V) S8 }4 m1 `Error: Package: 2:ceph-mon-12.2.11-0.el7.x86_64 (Ceph)
9 Q+ u/ t; y" f7 n" r  g" X* I           Requires: libleveldb.so.1()(64bit)
Error: Package: 2:ceph-base-12.2.11-0.el7.x86_64 (Ceph)
           Requires: libleveldb.so.1()(64bit)
' E' e, d; g* v* H2 HError: Package: 2:ceph-base-12.2.11-0.el7.x86_64 (Ceph)
4 v# s% Q5 \/ J9 @% ]$ {           Requires: liblttng-ust.so.0()(64bit)
, k, t( h0 h2 k8 t6 h5 Z  `Error: Package: 2:ceph-common-12.2.11-0.el7.x86_64 (Ceph)
/ |! h" }6 p6 q% e           Requires: libleveldb.so.1()(64bit)
# ]; \- |" g7 D; z, n, r/ t You could try using --skip-broken to work around the problem
- M4 [: w4 @3 l9 Y6 A5 ? You could try running: rpm -Va --nofiles --nodigest
7 L; {1 L, s. A3 E% \1 Z2 }. Y) w4 d所以安装的命令是

[cephfsd@deploy ~]$ sudo yum -y install epel-release
1 _& Q# Z) }, I& R/ B8 j+ t/ e[cephfsd@deploy ~]$ sudo yum -y install ceph ceph-radosgw ceph-deploy
[cephfsd@deploy ~]$ sudo yum -y install htop sysstat iotop iftop ntp ntpdate
$ D+ _7 @  W1 P) }+ }第二种方式
  W* }. W: i' m* R8 g  b- t& j9 N- I第一种安装方式要求节点均能访问阿里云的源，但是很多时候，尤其是生产环境，这些节点是不允许访问外网的，另外，如果是测试环境，有时需要多次重装集群，每次都从外网下载也带来一些麻烦，所以这里推荐使用自建源的方式安装，自建源一劳永逸，我们在deploy节点上自建一个源
0 Q  e! o5 \! d* i( O配置了ceph源并安装epel-release后，我们把ceph及相关软件包全部下载，然后搭建一个内部源，

[cephfsd@deploy ~]$ sudo mkdir -p /yum/ceph/luminous
% N1 K* t4 z8 O" F" V[cephfsd@deploy ~]$ sudo yum -y install --downloadonly --downloaddir=/yum/ceph/luminous/ ceph ceph-radosgw htop sysstat iftop iotop ntp ntpdate
[cephfsd@deploy ~]$ sudo yum install -y createrepo httpd
) d- W4 l  [" o) c* F$ x[cephfsd@deploy ~]$ sudo yum install -y ceph-deploy python-pip ntp ntpdate
( x% K1 T% `/ Z配置内部源
1 ~5 h9 J3 J' i& O; g# J
" ?$ D; V8 P" {% f  x1 O9 o[cephfsd@deploy ~]$ sudo createrepo -pdo /yum/ceph/luminous/ /yum/ceph/luminous/
  T+ l: L9 I' m' f  LSpawning worker 0 with 91 pkgs
Workers Finished
4 O) U* G1 h, G; @) h, }! D3 s2 sSaving Primary metadata
* H$ B+ v4 j0 BSaving file lists metadata
3 u9 R4 K8 Q- Z  `- ASaving other metadata
Generating sqlite DBs
* q7 {! P  `( O- E) jSqlite DBs complete
如果源的包发生变化，例如加入了新的包，或者删掉了一些旧包，需要更新xml
1
[cephfsd@deploy ~]$ sudo createrepo --update /yum/ceph/luminous/
( c! B7 b4 s( K$ @* k7 X修改/etc/httpd/conf/httpd.conf文件，然后启动httpd
* k+ V% M* R) e7 F$ A: f$ r$ c
DocumentRoot "/yum/ceph/"
<Directory "/yum/ceph/">
* O; X3 t+ R, u! W; t: U/ s    AllowOverride None
1 N7 ?3 Q  _: t0 U' n7 Q    # Allow open access:
0 e: ?% y: {5 r  s# ?8 r    Require all granted
) t( R- A# g  c! w</Directory>
/ v8 |) q2 [" z, H5 j  T. p<Directory "/yum/ceph/">
...
' ~( K7 {- }# u- i</Directory>
& H, x0 `9 |3 ~) z( e# k5 c8 [[cephfsd@deploy ~]$ sudo systemctl enable httpd.service
5 o  U4 l4 e+ i8 n8 K) ]Created symlink from /etc/systemd/system/multi-user.target.wants/httpd.service to /usr/lib/systemd/system/httpd.service.
  K" G& h4 U& C; d3 _+ j4 K0 P[cephfsd@deploy ~]$ sudo systemctl start httpd.service
至此，内部源就建好了，接下来到每一个安装ceph的节点，配置源指向这个内部源

% I  T/ M! k8 w/ T+ j[cephfsd@ceph1 ~]$ cd /etc/yum.repos.d/
0 F' ^* `9 R# v, j1 }1 r[cephfsd@ceph1 yum.repos.d]$ sudo mkdir backup
[cephfsd@ceph1 yum.repos.d]$ sudo mv ./*.repo backup/
[cephfsd@ceph1 yum.repos.d]$ cat inter.repo
; d$ C0 E$ Z3 N/ E  Z) R5 j. N[http-repo]
1 C  N8 }, d5 Y+ ]$ K5 Kname=internal-ceph-repo
baseurl=http://deploy/luminous
$ |' m8 ~3 Q" S; m% Y  {# W- _( menabled=1
& }' i# `1 S2 Y. a1 t1 l9 egpgcheck=0
# x. e; H& f' w& a[cephfsd@ceph1 ~]$ sudo yum -y install  ceph ceph-radosgw htop sysstat iftop iotop ntp ntpdate
$ X; ]. q7 b. Y[cephfsd@ceph1 ~]$ ceph --version
: c( g8 Z7 F4 C+ G. D# cceph version 12.2.12 (1436006594665279fe734b4c15d7e08c13ebd777) luminous (stable)

admin

[root@ceph-2 x86_64]#  yum reinstall -y ceph-common
Loaded plugins: product-id, search-disabled-repos, subscription-manager
This system is not registered with an entitlement server. You can use subscription-manager to register.
/ ]) A6 D7 R# N! D. u! ?7 H2 vBase-os                                                                                                | 2.8 kB  00:00:00     
& p* o! W( c% Z& \5 gceph-local                                                                                             | 2.9 kB  00:00:00     
/ K. F3 F+ B# _6 S% mepel/x86_64/metalink                                                                                   | 4.2 kB  00:00:00     
epel                                                                                                   | 4.7 kB  00:00:00     
(1/6): ceph-local/primary_db                                                                           |  55 kB  00:00:00     
# b* X& f. Q1 q; T(2/6): Base-os/group                                                                                   | 628 kB  00:00:00     
% X. z1 f' i/ ]8 w! S: L(3/6): Base-os/primary                                                                                 | 2.1 MB  00:00:00     
2 E! ]' u5 r9 I3 V1 Y5 ~3 o' t% `6 N(4/6): epel/x86_64/group_gz                                                                            |  96 kB  00:00:00     
(5/6): epel/x86_64/updateinfo                                                                          | 1.1 MB  00:00:11     
(6/6): epel/x86_64/primary_db                    54% [====================-                 ] 7.3 kB/s | 5.9 MB  00:11:34 ETA

(6/6): epel/x86_64/primary_db                                                                          | 7.0 MB  00:10:36     
Base-os                                                                                                             5230/5230
Resolving Dependencies
4 l) O# E* A. A7 x' o/ ]" b--> Running transaction check
---> Package ceph-common.x86_64 2:12.2.8-52.el7 will be reinstalled
--> Processing Dependency: python-rgw = 2:12.2.8-52.el7 for package: 2:ceph-common-12.2.8-52.el7.x86_64
--> Processing Dependency: python-rbd = 2:12.2.8-52.el7 for package: 2:ceph-common-12.2.8-52.el7.x86_64
6 C! G1 Y9 R5 a, Q1 @--> Processing Dependency: python-rados = 2:12.2.8-52.el7 for package: 2:ceph-common-12.2.8-52.el7.x86_64
! |7 E0 E; u( H# n0 q. M--> Processing Dependency: python-cephfs = 2:12.2.8-52.el7 for package: 2:ceph-common-12.2.8-52.el7.x86_64
8 i8 _* X1 d9 @--> Processing Dependency: librbd1 = 2:12.2.8-52.el7 for package: 2:ceph-common-12.2.8-52.el7.x86_64
/ R7 e$ K3 g! @7 e--> Processing Dependency: librados2 = 2:12.2.8-52.el7 for package: 2:ceph-common-12.2.8-52.el7.x86_64
$ o& W9 ^7 l( J1 ^+ b+ B--> Processing Dependency: libcephfs2 = 2:12.2.8-52.el7 for package: 2:ceph-common-12.2.8-52.el7.x86_64
--> Processing Dependency: libibverbs.so.1(IBVERBS_1.1)(64bit) for package: 2:ceph-common-12.2.8-52.el7.x86_64
# O2 {1 \) a5 D3 ]3 \( N  j--> Processing Dependency: libibverbs.so.1(IBVERBS_1.0)(64bit) for package: 2:ceph-common-12.2.8-52.el7.x86_64
--> Processing Dependency: librbd.so.1()(64bit) for package: 2:ceph-common-12.2.8-52.el7.x86_64
  |; @$ d+ l! E3 K& K--> Processing Dependency: libradosstriper.so.1()(64bit) for package: 2:ceph-common-12.2.8-52.el7.x86_64
1 X+ [: b9 s' o6 p% A& e8 J  T--> Processing Dependency: librados.so.2()(64bit) for package: 2:ceph-common-12.2.8-52.el7.x86_64
--> Processing Dependency: libibverbs.so.1()(64bit) for package: 2:ceph-common-12.2.8-52.el7.x86_64
$ d( r2 p' S9 @5 s* k2 o--> Processing Dependency: libfuse.so.2()(64bit) for package: 2:ceph-common-12.2.8-52.el7.x86_64
--> Processing Dependency: libcephfs.so.2()(64bit) for package: 2:ceph-common-12.2.8-52.el7.x86_64
  v- k  Y' i, b--> Processing Dependency: libceph-common.so.0()(64bit) for package: 2:ceph-common-12.2.8-52.el7.x86_64
--> Processing Dependency: libbabeltrace.so.1()(64bit) for package: 2:ceph-common-12.2.8-52.el7.x86_64
--> Processing Dependency: libbabeltrace-ctf.so.1()(64bit) for package: 2:ceph-common-12.2.8-52.el7.x86_64
--> Running transaction check
6 t4 v/ @" `) {! m# O---> Package fuse-libs.x86_64 0:2.9.2-11.el7 will be installed
- p0 |2 @7 _% U3 e: k* ?---> Package libbabeltrace.x86_64 0:1.2.4-3.el7 will be installed
---> Package libcephfs2.x86_64 2:12.2.8-52.el7 will be installed
7 `* c% c6 [3 S1 }: M---> Package libibverbs.x86_64 0:22.4-5.el7 will be installed
--> Processing Dependency: rdma-core(x86-64) = 22.4-5.el7 for package: libibverbs-22.4-5.el7.x86_64
, N" P9 _5 p0 H9 @---> Package librados2.x86_64 2:12.2.8-52.el7 will be installed
+ t1 L5 Q+ ~) u; B( N' ]2 ]--> Processing Dependency: liblttng-ust.so.0()(64bit) for package: 2:librados2-12.2.8-52.el7.x86_64
) K+ V% t. Y8 e---> Package libradosstriper1.x86_64 2:12.2.8-52.el7 will be installed
---> Package librbd1.x86_64 2:12.2.8-52.el7 will be installed
---> Package python-cephfs.x86_64 2:12.2.8-52.el7 will be installed
---> Package python-rados.x86_64 2:12.2.8-52.el7 will be installed
---> Package python-rbd.x86_64 2:12.2.8-52.el7 will be installed
$ X3 r. L* M+ o5 a5 q3 W( C3 m---> Package python-rgw.x86_64 2:12.2.8-52.el7 will be installed
--> Processing Dependency: librgw2 = 2:12.2.8-52.el7 for package: 2:python-rgw-12.2.8-52.el7.x86_64
$ k) m  @. `+ Y3 u% k--> Processing Dependency: librgw.so.2()(64bit) for package: 2:python-rgw-12.2.8-52.el7.x86_64
$ O  I) @/ B, o# G" S4 S, L--> Running transaction check
) S2 y  u+ b" y2 d---> Package librgw2.x86_64 2:12.2.8-52.el7 will be installed
---> Package lttng-ust.x86_64 0:2.4.1-5.el7 will be installed
# o1 n7 R+ H' R- i--> Processing Dependency: liburcu-cds.so.1()(64bit) for package: lttng-ust-2.4.1-5.el7.x86_64
--> Processing Dependency: liburcu-bp.so.1()(64bit) for package: lttng-ust-2.4.1-5.el7.x86_64
( I( ^9 W% V9 s1 p. U---> Package rdma-core.x86_64 0:22.4-5.el7 will be installed
--> Processing Dependency: pciutils for package: rdma-core-22.4-5.el7.x86_64
--> Running transaction check
---> Package pciutils.x86_64 0:3.5.1-3.el7 will be installed
---> Package userspace-rcu.x86_64 0:0.7.16-1.el7 will be installed
--> Finished Dependency Resolution
0 v, A/ W) r& j$ J+ C# QDependencies Resolved
  h+ }( T% Z! R! i$ k- s! p5 z, e' v" h==============================================================================================================================
) L$ q. s) B' v: ]% M/ \ Package                           Arch                    Version                          Repository                   Size
- O! x# b& y$ I1 d( R==============================================================================================================================
Reinstalling:
1 w+ F- a4 e0 V2 m5 p& ] ceph-common                       x86_64                  2:12.2.8-52.el7                  ceph-local                   15 M
: _8 E, b: a4 v- ~: X3 f5 OInstalling for dependencies:
& o- _0 P" A, B+ k8 x fuse-libs                         x86_64                  2.9.2-11.el7                     Base-os                      93 k
; i9 K& F( }7 }" b% l libbabeltrace                     x86_64                  1.2.4-3.el7                      ceph-local                  146 k
8 F& u8 K4 W1 o& x libcephfs2                        x86_64                  2:12.2.8-52.el7                  ceph-local                  509 k
: w* N0 ?! ]* @1 z. [: w libibverbs                        x86_64                  22.4-5.el7                       Base-os                     268 k
librados2                         x86_64                  2:12.2.8-52.el7                  ceph-local                  2.9 M
3 z  ~6 q0 ]; l$ @" O libradosstriper1                  x86_64                  2:12.2.8-52.el7                  ceph-local                  406 k
librbd1                           x86_64                  2:12.2.8-52.el7                  ceph-local                  1.1 M
librgw2                           x86_64                  2:12.2.8-52.el7                  ceph-local                  1.9 M
lttng-ust                         x86_64                  2.4.1-5.el7                      ceph-local                  175 k
pciutils                          x86_64                  3.5.1-3.el7                      Base-os                      93 k
5 [# J- q2 V9 o5 U+ i python-cephfs                     x86_64                  2:12.2.8-52.el7                  ceph-local                  158 k
python-rados                      x86_64                  2:12.2.8-52.el7                  ceph-local                  250 k
python-rbd                        x86_64                  2:12.2.8-52.el7                  ceph-local                  181 k
python-rgw                        x86_64                  2:12.2.8-52.el7                  ceph-local                  148 k
rdma-core                         x86_64                  22.4-5.el7                       Base-os                      51 k
userspace-rcu                     x86_64                  0.7.16-1.el7                     epel                         73 k
Transaction Summary
% g& M  Z! s% \( T) N9 H7 V: T, |==============================================================================================================================
Install               ( 16 Dependent packages)
9 V1 r5 S; g0 v+ OReinstall  1 Package
Total download size: 24 M
Installed size: 77 M
8 p2 H! B8 \, s# }. U! EDownloading packages:
(1/17): fuse-libs-2.9.2-11.el7.x86_64.rpm                                                              |  93 kB  00:00:00     
8 _% W6 O0 X( \6 i( }2 ?" _(2/17): libbabeltrace-1.2.4-3.el7.x86_64.rpm                                                           | 146 kB  00:00:00     
9 r4 Y1 h6 Z6 j: L* H(3/17): libcephfs2-12.2.8-52.el7.x86_64.rpm                                                            | 509 kB  00:00:00     
(4/17): libibverbs-22.4-5.el7.x86_64.rpm                                                               | 268 kB  00:00:00     
(5/17): librados2-12.2.8-52.el7.x86_64.rpm                                                             | 2.9 MB  00:00:00     
(6/17): libradosstriper1-12.2.8-52.el7.x86_64.rpm                                                      | 406 kB  00:00:00     
(7/17): librbd1-12.2.8-52.el7.x86_64.rpm                                                               | 1.1 MB  00:00:00     
(8/17): librgw2-12.2.8-52.el7.x86_64.rpm                                                               | 1.9 MB  00:00:00     
. }( ~; x' N; b8 Q5 l4 N(9/17): lttng-ust-2.4.1-5.el7.x86_64.rpm                                                               | 175 kB  00:00:00     
) F3 q! _9 I/ G+ _(10/17): python-cephfs-12.2.8-52.el7.x86_64.rpm                                                        | 158 kB  00:00:00     
3 B  x8 C' Y, n9 ^4 R( s(11/17): python-rados-12.2.8-52.el7.x86_64.rpm                                                         | 250 kB  00:00:00     
  x* h. }( @  R% p(12/17): python-rbd-12.2.8-52.el7.x86_64.rpm                                                           | 181 kB  00:00:00     
(13/17): python-rgw-12.2.8-52.el7.x86_64.rpm                                                           | 148 kB  00:00:00     
(14/17): pciutils-3.5.1-3.el7.x86_64.rpm                                                               |  93 kB  00:00:00     
! t% C2 I: q0 |  e(15/17): rdma-core-22.4-5.el7.x86_64.rpm                                                               |  51 kB  00:00:00     
# a4 |; \) T% |& R8 Q# M(16/17): ceph-common-12.2.8-52.el7.x86_64.rpm                                                          |  15 MB  00:00:02     
(17/17): userspace-rcu-0.7.16-1.el7.x86_64.rpm                                                         |  73 kB  00:00:00     
------------------------------------------------------------------------------------------------------------------------------
/ _$ G+ c+ o0 y; T- B3 C9 pTotal                                                                                          10 MB/s |  24 MB  00:00:02     
, i3 M5 N1 J1 @$ \7 Y3 w  ^$ bRunning transaction check
Running transaction test
Transaction test succeeded
Running transaction
Warning: RPMDB altered outside of yum.
** Found 82 pre-existing rpmdb problem(s), 'yum check' output follows:
5 Q1 I) U- V* j  {5 K* ?2:ceph-base-12.2.8-52.el7.x86_64 has missing requires of cryptsetup
2:ceph-base-12.2.8-52.el7.x86_64 has missing requires of libceph-common.so.0()(64bit)
& I" \, i9 X7 J% B2:ceph-base-12.2.8-52.el7.x86_64 has missing requires of libcephfs2 = ('2', '12.2.8', '52.el7')
+ @5 \; M+ G2 R* y! @2:ceph-base-12.2.8-52.el7.x86_64 has missing requires of libfuse.so.2()(64bit)
2:ceph-base-12.2.8-52.el7.x86_64 has missing requires of libibverbs.so.1()(64bit)
2:ceph-base-12.2.8-52.el7.x86_64 has missing requires of liblttng-ust.so.0()(64bit)
2:ceph-base-12.2.8-52.el7.x86_64 has missing requires of librados2 = ('2', '12.2.8', '52.el7')
. g2 y/ R  B, H+ v$ Y' Y2:ceph-base-12.2.8-52.el7.x86_64 has missing requires of librbd1 = ('2', '12.2.8', '52.el7')
# D/ d2 o( q& z$ G2 ]! V2:ceph-base-12.2.8-52.el7.x86_64 has missing requires of librgw2 = ('2', '12.2.8', '52.el7')
0 n/ D( D) u2 u! W# Y  c% l1 d' e2:ceph-base-12.2.8-52.el7.x86_64 has missing requires of psmisc
2:ceph-common-12.2.8-52.el7.x86_64 has missing requires of libbabeltrace-ctf.so.1()(64bit)
" U- ~5 A6 L1 @5 p( i- S" R# Q- g2:ceph-common-12.2.8-52.el7.x86_64 has missing requires of libbabeltrace.so.1()(64bit)
+ M0 r) _0 S; f2:ceph-common-12.2.8-52.el7.x86_64 has missing requires of libceph-common.so.0()(64bit)
2:ceph-common-12.2.8-52.el7.x86_64 has missing requires of libcephfs.so.2()(64bit)
* [7 O0 i6 @& X/ x2:ceph-common-12.2.8-52.el7.x86_64 has missing requires of libcephfs2 = ('2', '12.2.8', '52.el7')
; W2 P. E5 o9 b, h$ ]( ^2:ceph-common-12.2.8-52.el7.x86_64 has missing requires of libfuse.so.2()(64bit)
5 Q: C# W  @& S' N8 L2:ceph-common-12.2.8-52.el7.x86_64 has missing requires of libibverbs.so.1()(64bit)
0 [! M: Y  w, h2:ceph-common-12.2.8-52.el7.x86_64 has missing requires of libibverbs.so.1(IBVERBS_1.0)(64bit)
2:ceph-common-12.2.8-52.el7.x86_64 has missing requires of libibverbs.so.1(IBVERBS_1.1)(64bit)
* t& `" q: ~; R! \4 p2:ceph-common-12.2.8-52.el7.x86_64 has missing requires of librados.so.2()(64bit)
, A7 Y9 p; V$ \1 L9 n% [2:ceph-common-12.2.8-52.el7.x86_64 has missing requires of librados2 = ('2', '12.2.8', '52.el7')
+ j* }( @% e) K% R( I2:ceph-common-12.2.8-52.el7.x86_64 has missing requires of libradosstriper.so.1()(64bit)
2:ceph-common-12.2.8-52.el7.x86_64 has missing requires of librbd.so.1()(64bit)
7 P7 N5 J. g$ Q) W; \. m! K2:ceph-common-12.2.8-52.el7.x86_64 has missing requires of librbd1 = ('2', '12.2.8', '52.el7')
8 K6 J6 C% G4 A" X! ^, I5 E4 j2:ceph-common-12.2.8-52.el7.x86_64 has missing requires of python-cephfs = ('2', '12.2.8', '52.el7')
7 [" j4 t' q$ ]+ H" [6 m( s, v2:ceph-common-12.2.8-52.el7.x86_64 has missing requires of python-rados = ('2', '12.2.8', '52.el7')
0 Z8 d5 F- U0 A/ p5 i2:ceph-common-12.2.8-52.el7.x86_64 has missing requires of python-rbd = ('2', '12.2.8', '52.el7')
2:ceph-common-12.2.8-52.el7.x86_64 has missing requires of python-rgw = ('2', '12.2.8', '52.el7')
5 n1 P$ U* ]9 \) a- r7 ?2:ceph-fuse-12.2.8-52.el7.x86_64 has missing requires of fuse
3 w% G" L$ B/ Y( L: [5 E2:ceph-fuse-12.2.8-52.el7.x86_64 has missing requires of libfuse.so.2()(64bit)
- N- ~) p* k  S9 A' W5 \2:ceph-fuse-12.2.8-52.el7.x86_64 has missing requires of libfuse.so.2(FUSE_2.4)(64bit)
" K/ i" k0 p, c( ^( ]9 z3 L; Z: R2:ceph-fuse-12.2.8-52.el7.x86_64 has missing requires of libfuse.so.2(FUSE_2.5)(64bit)
$ ?- @. J2 }' H2:ceph-fuse-12.2.8-52.el7.x86_64 has missing requires of libfuse.so.2(FUSE_2.6)(64bit)
2:ceph-fuse-12.2.8-52.el7.x86_64 has missing requires of libfuse.so.2(FUSE_2.8)(64bit)
8 M; T, P6 L+ e: N3 P  O' H( U# E2:ceph-fuse-12.2.8-52.el7.x86_64 has missing requires of libfuse.so.2(FUSE_2.9)(64bit)
% p# y+ T$ K9 Y$ z0 z/ m2:ceph-fuse-12.2.8-52.el7.x86_64 has missing requires of libibverbs.so.1()(64bit)
2:ceph-fuse-12.2.8-52.el7.x86_64 has missing requires of libibverbs.so.1(IBVERBS_1.0)(64bit)
2:ceph-fuse-12.2.8-52.el7.x86_64 has missing requires of libibverbs.so.1(IBVERBS_1.1)(64bit)
# Y& s, \) y# A) h+ w, @% R  y$ E2:ceph-mds-12.2.8-52.el7.x86_64 has missing requires of libibverbs.so.1()(64bit)
* F" ?  ]) J7 H0 Q$ q" d# v2:ceph-mds-12.2.8-52.el7.x86_64 has missing requires of libibverbs.so.1(IBVERBS_1.0)(64bit)
* S, I+ ~+ W+ W, y2:ceph-mds-12.2.8-52.el7.x86_64 has missing requires of libibverbs.so.1(IBVERBS_1.1)(64bit)
: u2 p  |( [* s6 G4 g- ]+ A2:ceph-mgr-12.2.8-52.el7.x86_64 has missing requires of libibverbs.so.1()(64bit)
1 Y2 J  x* v0 E2:ceph-mgr-12.2.8-52.el7.x86_64 has missing requires of libibverbs.so.1(IBVERBS_1.0)(64bit)
2:ceph-mgr-12.2.8-52.el7.x86_64 has missing requires of libibverbs.so.1(IBVERBS_1.1)(64bit)
1 j: ^9 z* y1 k6 y5 e" P! X2 _7 E2:ceph-mgr-12.2.8-52.el7.x86_64 has missing requires of python-cherrypy
  T& C+ B3 o* n' @/ b& T2:ceph-mgr-12.2.8-52.el7.x86_64 has missing requires of python-pecan
% e! K1 M( p. U2:ceph-mgr-12.2.8-52.el7.x86_64 has missing requires of python-werkzeug
2:ceph-mon-12.2.8-52.el7.x86_64 has missing requires of libceph-common.so.0()(64bit)
5 F5 H+ P; f: Y! D/ ^3 O' X. }2:ceph-mon-12.2.8-52.el7.x86_64 has missing requires of libfuse.so.2()(64bit)
( W% Z3 I0 P! F& ?6 n2:ceph-mon-12.2.8-52.el7.x86_64 has missing requires of libibverbs.so.1()(64bit)
0 `( g5 s( y7 ^( P6 f5 g" S% V" t2:ceph-mon-12.2.8-52.el7.x86_64 has missing requires of libibverbs.so.1(IBVERBS_1.0)(64bit)
+ X5 k: d- W1 j3 A: R2:ceph-mon-12.2.8-52.el7.x86_64 has missing requires of libibverbs.so.1(IBVERBS_1.1)(64bit)
2:ceph-mon-12.2.8-52.el7.x86_64 has missing requires of python-flask
" _: D# @& f% D+ s/ L" `5 R) U8 ?2:ceph-osd-12.2.8-52.el7.x86_64 has missing requires of libceph-common.so.0()(64bit)
( m( K+ T7 a1 a8 A5 z% Y; P0 w2:ceph-osd-12.2.8-52.el7.x86_64 has missing requires of libfuse.so.2()(64bit)
* E5 G2 E) K! e1 ?6 d5 s8 Y2:ceph-osd-12.2.8-52.el7.x86_64 has missing requires of libfuse.so.2(FUSE_2.2)(64bit)
2:ceph-osd-12.2.8-52.el7.x86_64 has missing requires of libfuse.so.2(FUSE_2.5)(64bit)
4 R8 a2 {. @" Z/ C+ i. x* `2:ceph-osd-12.2.8-52.el7.x86_64 has missing requires of libfuse.so.2(FUSE_2.6)(64bit)
0 D$ [( J% C# J$ O; U' q3 S2:ceph-osd-12.2.8-52.el7.x86_64 has missing requires of libfuse.so.2(FUSE_2.8)(64bit)
2:ceph-osd-12.2.8-52.el7.x86_64 has missing requires of libibverbs.so.1()(64bit)
2:ceph-osd-12.2.8-52.el7.x86_64 has missing requires of libibverbs.so.1(IBVERBS_1.0)(64bit)
2:ceph-osd-12.2.8-52.el7.x86_64 has missing requires of libibverbs.so.1(IBVERBS_1.1)(64bit)
2:ceph-radosgw-12.2.8-52.el7.x86_64 has missing requires of libceph-common.so.0()(64bit)
2:ceph-radosgw-12.2.8-52.el7.x86_64 has missing requires of libibverbs.so.1()(64bit)
3 f' w: M5 f7 Y1 \4 ?2:ceph-radosgw-12.2.8-52.el7.x86_64 has missing requires of librados.so.2()(64bit)
" E! k1 z# W; x" _- Z- y" @( F( B: d2:ceph-radosgw-12.2.8-52.el7.x86_64 has missing requires of librados2 = ('2', '12.2.8', '52.el7')
; D& b, p* O3 [2 f, J+ e8 ^2:ceph-radosgw-12.2.8-52.el7.x86_64 has missing requires of librgw2 = ('2', '12.2.8', '52.el7')
4 k/ x- R* ~/ u2:ceph-radosgw-12.2.8-52.el7.x86_64 has missing requires of mailcap
2:ceph-resource-agents-12.2.8-52.el7.x86_64 has missing requires of resource-agents
2:ceph-test-12.2.8-52.el7.x86_64 has missing requires of jq
9 K& {" w& n1 M& C$ y+ q  S) c1 s( Z2:ceph-test-12.2.8-52.el7.x86_64 has missing requires of libceph-common.so.0()(64bit)
2:ceph-test-12.2.8-52.el7.x86_64 has missing requires of libcephfs.so.2()(64bit)
3 f# p. D/ T; V/ [# Q5 B% L0 H2:ceph-test-12.2.8-52.el7.x86_64 has missing requires of libfuse.so.2()(64bit)
2:ceph-test-12.2.8-52.el7.x86_64 has missing requires of libibverbs.so.1()(64bit)
# F" J3 R# t4 j' k8 P4 q+ e2:ceph-test-12.2.8-52.el7.x86_64 has missing requires of librados.so.2()(64bit)
4 C! z, ^! U# e( d! M2:ceph-test-12.2.8-52.el7.x86_64 has missing requires of libradosstriper.so.1()(64bit)
6 z$ a/ M8 Q* j- G6 g1 M& p2 z2:ceph-test-12.2.8-52.el7.x86_64 has missing requires of librbd.so.1()(64bit)
2:ceph-test-12.2.8-52.el7.x86_64 has missing requires of socat
+ v& p8 V5 }9 ~/ T, F' Q% r2:ceph-test-12.2.8-52.el7.x86_64 has missing requires of xmlstarlet
2:cephfs-java-12.2.8-52.el7.x86_64 has missing requires of java
/ `8 P- y4 r2 n0 i" i7 |) ~2:cephfs-java-12.2.8-52.el7.x86_64 has missing requires of junit
2:cephfs-java-12.2.8-52.el7.x86_64 has missing requires of libcephfs_jni1 = ('2', '12.2.8', '52.el7')
  Installing : pciutils-3.5.1-3.el7.x86_64                                                                               1/17
+ n. y" T& E: C/ ^  Installing : rdma-core-22.4-5.el7.x86_64                                                                               2/17
2 M( u* q# N' E( e$ N; _: U+ a  Installing : libibverbs-22.4-5.el7.x86_64                                                                              3/17
  Installing : userspace-rcu-0.7.16-1.el7.x86_64                                                                         4/17
& z' f( U; Z  t  Installing : lttng-ust-2.4.1-5.el7.x86_64                                                                              5/17
  Installing : 2:librados2-12.2.8-52.el7.x86_64                                                                          6/17
7 k" m8 i9 ]+ U  Installing : 2:python-rados-12.2.8-52.el7.x86_64                                                                       7/17
/ r2 V( v9 c2 X  Installing : 2:librbd1-12.2.8-52.el7.x86_64                                                                            8/17
( {8 [" g; r8 a( u- Q' X% z' t  Installing : 2:libcephfs2-12.2.8-52.el7.x86_64                                                                         9/17
  Installing : 2:python-cephfs-12.2.8-52.el7.x86_64                                                                     10/17
  I( `, g, ~. t9 g% k) A  Installing : 2:python-rbd-12.2.8-52.el7.x86_64                                                                        11/17
- v: T8 L* M! X% {0 U. l8 d+ J  Installing : 2:librgw2-12.2.8-52.el7.x86_64                                                                           12/17
  Installing : 2:python-rgw-12.2.8-52.el7.x86_64                                                                        13/17
  Installing : 2:libradosstriper1-12.2.8-52.el7.x86_64                                                                  14/17
5 n  G' P4 z# ^4 D  Installing : libbabeltrace-1.2.4-3.el7.x86_64                                                                         15/17
' l6 N9 N8 Z- {+ i! o! A  Installing : fuse-libs-2.9.2-11.el7.x86_64                                                                            16/17
$ P0 u; Q9 {( p  Installing : 2:ceph-common-12.2.8-52.el7.x86_64                                                                       17/17
  Verifying  : 2:librbd1-12.2.8-52.el7.x86_64                                                                            1/17
& p- c/ f: R% x3 T1 ~+ C  Verifying  : fuse-libs-2.9.2-11.el7.x86_64                                                                             2/17
  Verifying  : 2:python-rgw-12.2.8-52.el7.x86_64                                                                         3/17
* {& n! {4 {" E/ E2 I. ~; _  Verifying  : 2:python-rbd-12.2.8-52.el7.x86_64                                                                         4/17
  Verifying  : 2:libcephfs2-12.2.8-52.el7.x86_64                                                                         5/17
  Verifying  : 2:librgw2-12.2.8-52.el7.x86_64                                                                            6/17
  Verifying  : libbabeltrace-1.2.4-3.el7.x86_64                                                                          7/17
  Verifying  : 2:python-cephfs-12.2.8-52.el7.x86_64                                                                      8/17
- R4 ?0 l% j; |" w& f7 v# G1 d' B% i  Verifying  : userspace-rcu-0.7.16-1.el7.x86_64                                                                         9/17
  Verifying  : rdma-core-22.4-5.el7.x86_64                                                                              10/17
  Verifying  : 2:librados2-12.2.8-52.el7.x86_64                                                                         11/17
( `; o5 Y0 F" N  Verifying  : libibverbs-22.4-5.el7.x86_64                                                                             12/17
  Verifying  : lttng-ust-2.4.1-5.el7.x86_64                                                                             13/17
  Verifying  : pciutils-3.5.1-3.el7.x86_64                                                                              14/17
4 l0 O  O3 h8 U  Verifying  : 2:ceph-common-12.2.8-52.el7.x86_64                                                                       15/17
  Verifying  : 2:libradosstriper1-12.2.8-52.el7.x86_64                                                                  16/17
  Verifying  : 2:python-rados-12.2.8-52.el7.x86_64                                                                      17/17
& @; ?: }. X1 @7 m4 U  D9 e7 eInstalled:
  ceph-common.x86_64 2:12.2.8-52.el7                                                                                          
Dependency Installed:
  fuse-libs.x86_64 0:2.9.2-11.el7         libbabeltrace.x86_64 0:1.2.4-3.el7       libcephfs2.x86_64 2:12.2.8-52.el7         
2 U) s, G" X& ]) j  libibverbs.x86_64 0:22.4-5.el7          librados2.x86_64 2:12.2.8-52.el7         libradosstriper1.x86_64 2:12.2.8-52.el7   
& C1 C# {5 T) h6 _) H  librbd1.x86_64 2:12.2.8-52.el7          librgw2.x86_64 2:12.2.8-52.el7           lttng-ust.x86_64 0:2.4.1-5.el7            
' p1 q2 i! A$ m8 L  pciutils.x86_64 0:3.5.1-3.el7           python-cephfs.x86_64 2:12.2.8-52.el7     python-rados.x86_64 2:12.2.8-52.el7        
0 Q+ R$ p' x+ M. j  python-rbd.x86_64 2:12.2.8-52.el7       python-rgw.x86_64 2:12.2.8-52.el7        rdma-core.x86_64 0:22.4-5.el7              
  userspace-rcu.x86_64 0:0.7.16-1.el7   
Complete!
& X5 A+ [- q  h  H[root@ceph-2 x86_64]#
9 m+ U* ^* b( Z% Z1 S& {0 X% s. C[root@ceph-2 x86_64]#
[root@ceph-2 x86_64]#
5 s5 x2 N( k( Y" {5 O" Z[root@ceph-2 x86_64]#
3 |! i  Y& `/ q1 d5 ][root@ceph-2 x86_64]# cd
! x5 n% W/ }$ F+ k6 K[root@ceph-2 ~]# ceph -v
+ l* u) z: X) g3 O5 D1 eceph version 12.2.8-52.el7 (3af3ca15b68572a357593c261f95038d02f46201) luminous (stable)
; Y% m- x  l# g2 S0 T2 |' P[root@ceph-2 ~]# rpm -qa |grep ceph
) G6 d9 @7 O/ e0 ]ceph-mgr-12.2.8-52.el7.x86_64
ceph-radosgw-12.2.8-52.el7.x86_64
& o% m8 t* S2 h  S9 ncephfs-java-12.2.8-52.el7.x86_64
ceph-base-12.2.8-52.el7.x86_64
! e! q; g: @  i( G$ D2 a* dceph-mds-12.2.8-52.el7.x86_64
+ B  X0 f9 _, z1 X  H6 j% Vceph-mon-12.2.8-52.el7.x86_64
- A+ x; J# |& R) Z: Yceph-12.2.8-52.el7.x86_64
8 C0 J# m1 M0 X$ a7 m5 uceph-resource-agents-12.2.8-52.el7.x86_64
ceph-fuse-12.2.8-52.el7.x86_64
ceph-debuginfo-12.2.8-52.el7.x86_64
python-cephfs-12.2.8-52.el7.x86_64
ceph-selinux-12.2.8-52.el7.x86_64
# y3 q$ @5 x9 {0 k# T: _& K, Eceph-osd-12.2.8-52.el7.x86_64
ceph-test-12.2.8-52.el7.x86_64
% G8 |' i  L! X$ d7 Xlibcephfs2-12.2.8-52.el7.x86_64
6 t# W2 N- d+ M' K# W; t6 b& aceph-common-12.2.8-52.el7.x86_64
3 b& X7 {% L4 a[root@ceph-2 ~]# ceph -v
ceph version 12.2.8-52.el7 (3af3ca15b68572a357593c261f95038d02f46201) luminous (stable)
; C# f9 |0 o6 X: W2 k[root@ceph-2 ~]# ceph-volume
ceph-volume: Deploy Ceph OSDs using different device technologies like lvm or
physical disks.
Version: 1.0.0
1 p2 C2 d+ @8 {+ @1 hLog Path: /var/log/ceph
( t' i. |; n/ M' Z1 S* A5 [2 b! HCeph Conf: Unable to load expected Ceph config at: /etc/ceph/ceph.conf
Available subcommands:
2 Z; e2 q& ~! a" \. glvm                      Use LVM and LVM-based technologies like dmcache to deploy OSDs
simple                   Manage already deployed OSDs with ceph-volume

  H  k. E0 e- Y# HSee "ceph-volume --help" for full list of options.
   
1 t( G4 d" q/ a