Ironic

rui

Ironic对接原生的Neutron

---

部署、配置相关：
0 [' K4 U4 w- z' D3 Q+ H# j

• Ironic自己有一个dhcp-server，在inspect过程使用
• neutron-dhcp，在provision过程使用
• inspect和provision过程使用的tftp server可能不同
  $ W! T; d* z9 u1 [

8 f0 i/ t0 _! C3 j( c6 iRegister过程

用户录入ironic node，包含ipmi等信息
8 ^* ?9 ~* L) Z6 u3 i7 E

4 S- a9 E- t" B; }8 y: M( AInspect过程
# C, ^/ N# E" |4 @1 N0 B6 z2 d

这个过程中使用Inspect Network，要求：
# D. t# c! e) s; ]

• Ironic dhcp-server能收到BM节点的DHCP请求。
• BM节点拿到IP后，能和tftp-server-1互通（三层可达）
  1 u. x6 F7 O9 m3 ]) ~& p

用户获取BM节点信息

• Ironic通过IPMI设置BM节点PXE启动
• Ironic通过IPMI启动BM节点，做PXE启动
• BM节点从Ironic dhcp-server获取IP。此时BM节点的请求报文不带vlan tag，使用上联接入交换机的native vlan（默认tag=1）
• 拿到IP之后，BM节点从tftp-server-1下载小镜像（ramdisk，内含Ironic Python Agent）
• 执行某些操作，获取BM节点的详细信息
• 将BM节点关机。ramdisk运行在内存中，关机后丢失。
  * Q9 {+ l  s( }( Y

: W8 M+ r  Y  |$ iProvision过程
2 p, X* N" s' M- `3 m0 q' c

这个过程中使用Provisioning Network（由neutron创建），要求：
3 V& V8 _2 }+ {7 c3 y+ C

• BM, glance-api, ironic-api, ironic-conductor, neutron-dhcp-agent需要保证PROVISION NETWORK连通性
  

用户申请物理机，安装操作系统，配置业务网卡等
1 ~' [3 ~5 }7 L1 S1 x. B$ n

• 从nova入口
• Ironic IPMI启动BM节点，做PXE启动
• 此时，要求BM节点从neutron-dhcp-server获取IP（通过native vlan）。但由于Ironic-dhcp-server也允许native vlan过来的请求，所以必须保证DHCP请求被Neutron-dhcp-server处理。
• 拿到IP之后，BM节点从tftp-server-2（可以和Inspect过程中的tftp server不同）下载小镜像（ramdisk，内含Ironic Python Agent）
• （这一步怎么控制的？）从glance下载用户要求的镜像，做安装（要求拿到的IP和glance-api能互通）
• 安装完成之后，通过cloud-init在BM操作系统内部打上对应的vlan tag（必须保证该vlan tag在接入交换机上预先做了配置）
  " x! a9 N& v6 i. F# D

7 F6 u+ I% l& j: }; e: z8 p$ ]

关键问题：

• Ironic-dhcp-server和Neutron-dhcp-server都允许native vlan过来的DHCP请求，如果有两个BM节点同时做Inspect和Provision操作，可能引起冲突。
  9 {+ @9 g. I. s9 ?' a

• 两个DHCP server合并。但是Neutron-dhcp-server是白名单方式，而在Inspect节点，dhcp-server还不知道BM节点的信息，没法配置白名单。
• 严格将Inspect和Provision过程分开。在机房初始化过程中，开启Ironic-dhcp-server，做完Inspect之后将其关闭；或者在EPC上强制Inspect过程中，disable Provision操作。
  
  * 一级私有云中兴方案，将两个DHCP合并了，运行在ToR交换机上。
  / D1 u* ]" F4 q) L8 L. L

• BM节点的租户vlan一定要在接入交换机上预先配置，如果做不到，则需要动态地配置交换机
• Neutron-dhcp-agent需要在业务网上
  

; L5 n# }; C2 O3 }3 b

---

苏州Ironic环境
9 o# p7 R* k/ R  I$ j- v6 N

10.142.24.12 root/@IDC_host4321

0 h3 d! h& O# G# I2 F: Q) A

---

浙江Ironic测试环境
5 J2 I% P& \. P, m- ^7 o
Ironic DHCP
* h4 R+ y$ M" P

[root@csv-yglcs17 ~]# cat /etc/dhcp/dhc
dhclient.d/  dhcpd6.conf  dhcpd.conf
& t2 D: M! e& m# Z/ P[root@csv-yglcs17 ~]# cat /etc/dhcp/dhcpd.conf
option domain-name "test.com";
option domain-name-servers 8.8.8.8, 61.88.88.88;
default-lease-time 60000;
max-lease-time 720000;
subnet 20.26.34.0 netmask 255.255.255.0 {
4 x$ F# k: b- ~$ W    range 20.26.34.10 20.26.34.100;       <== DHCP段
1 @% b; B) D  e4 B- L    option routers 20.26.34.1;
) n: F( p! d: G/ e+ x, m. B    next-server 20.26.33.26;          <== tftp server
    filename "pxelinux.0";
! L# M" _  F# p) I% y7 @& _- d) S- H}
subnet 20.26.33.0 netmask 255.255.255.0 {      <== conductor节点只有33.0网段IP，如果不配置这个subnet，则dhcp启动时会报下面这个错误
3 v4 c, |* Y) E- E6 |}

( p' ^- D3 t. `+ M问题：
6 G2 R2 ?2 D* G' JApr 19 14:30:21 csv-yglcs17 systemd: Starting DHCPv4 Server Daemon...
! l. T9 o$ G7 \- l! ?Apr 19 14:30:21 csv-yglcs17 dhcpd: Internet Systems Consortium DHCP Server 4.2.5
Apr 19 14:30:21 csv-yglcs17 dhcpd: Copyright 2004-2013 Internet Systems Consortium.
Apr 19 14:30:21 csv-yglcs17 dhcpd: All rights reserved.
7 K' O# a5 I- K1 AApr 19 14:30:21 csv-yglcs17 dhcpd: For info, please visit https://www.isc.org/software/dhcp/
* f  i4 }2 V, }8 O) Y2 b9 kApr 19 14:30:21 csv-yglcs17 dhcpd: Not searching LDAP since ldap-server, ldap-port and ldap-base-dn were not specified in the config file
Apr 19 14:30:21 csv-yglcs17 dhcpd: Wrote 15 leases to leases file.
Apr 19 14:30:21 csv-yglcs17 dhcpd:
Apr 19 14:30:21 csv-yglcs17 dhcpd: No subnet declaration for eno33557248 (no IPv4 addresses).
Apr 19 14:30:21 csv-yglcs17 dhcpd: ** Ignoring requests on eno33557248.  If this is not what
Apr 19 14:30:21 csv-yglcs17 dhcpd:   you want, please write a subnet declaration
Apr 19 14:30:21 csv-yglcs17 dhcpd:   in your dhcpd.conf file for the network segment
: ]* r9 u  B" z, @* s' dApr 19 14:30:21 csv-yglcs17 dhcpd:   to which interface eno33557248 is attached. **
; @4 z$ C- ~3 G% t6 m  oApr 19 14:30:21 csv-yglcs17 dhcpd:
8 v/ y/ N. u$ p4 G! g9 zApr 19 14:30:21 csv-yglcs17 dhcpd:
Apr 19 14:30:21 csv-yglcs17 dhcpd: No subnet declaration for virbr0 (192.168.122.1).
' e9 ~) k& s, ?# `0 j" vApr 19 14:30:21 csv-yglcs17 dhcpd: ** Ignoring requests on virbr0.  If this is not what
Apr 19 14:30:21 csv-yglcs17 dhcpd:   you want, please write a subnet declaration
3 `. _) o! P/ N! Z- W+ rApr 19 14:30:21 csv-yglcs17 dhcpd:   in your dhcpd.conf file for the network segment
Apr 19 14:30:21 csv-yglcs17 dhcpd:   to which interface virbr0 is attached. **
- Q4 Z, p0 Y4 j1 b7 dApr 19 14:30:21 csv-yglcs17 dhcpd:
8 Q# ?& X( Z) c. t# Q& O. J: cApr 19 14:30:21 csv-yglcs17 dhcpd:
* w: O# x7 T0 H- j* e$ LApr 19 14:30:21 csv-yglcs17 dhcpd: No subnet declaration for eno16777984 (20.26.33.26).
: K  M& N( S- ?' CApr 19 14:30:21 csv-yglcs17 dhcpd: ** Ignoring requests on eno16777984.  If this is not what
Apr 19 14:30:21 csv-yglcs17 dhcpd:   you want, please write a subnet declaration
9 R1 Y& l4 z" W) b. k3 X6 `2 PApr 19 14:30:21 csv-yglcs17 dhcpd:   in your dhcpd.conf file for the network segment
$ @7 s9 s5 L+ c3 g4 x; T6 `Apr 19 14:30:21 csv-yglcs17 dhcpd:   to which interface eno16777984 is attached. **
Apr 19 14:30:21 csv-yglcs17 dhcpd:
Apr 19 14:30:21 csv-yglcs17 dhcpd:
- N% M5 A/ B. jApr 19 14:30:21 csv-yglcs17 dhcpd: Not configured to listen on any interfaces!
. n4 x: W3 S# [* w. A0 p1 N& E+ s) eApr 19 14:30:21 csv-yglcs17 dhcpd:
" N( J6 \. z9 w/ \7 BApr 19 14:30:21 csv-yglcs17 dhcpd: This version of ISC DHCP is based on the release available
, N8 {- s/ W1 Y9 J, o6 nApr 19 14:30:21 csv-yglcs17 dhcpd: on ftp.isc.org.  Features have been added and other changes
Apr 19 14:30:21 csv-yglcs17 dhcpd: have been made to the base software release in order to make
' ^9 ?5 m. i; w' wApr 19 14:30:21 csv-yglcs17 dhcpd: it work better with this distribution.
Apr 19 14:30:21 csv-yglcs17 dhcpd:
Apr 19 14:30:21 csv-yglcs17 dhcpd: Please report for this software via the CentOS Bugs Database:
Apr 19 14:30:21 csv-yglcs17 dhcpd:    http://bugs.centos.org/
; X/ w2 [( k  h! i' }Apr 19 14:30:21 csv-yglcs17 dhcpd:
Apr 19 14:30:21 csv-yglcs17 dhcpd: exiting.
Apr 19 14:30:21 csv-yglcs17 systemd: dhcpd.service: main process exited, code=exited, status=1/FAILURE
$ e. u% G! M3 {/ S+ s* {  p1 H: fApr 19 14:30:21 csv-yglcs17 systemd: Failed to start DHCPv4 Server Daemon.
% @$ i8 D; O8 a3 j, pApr 19 14:30:21 csv-yglcs17 systemd: Unit dhcpd.service entered failed state.
Apr 19 14:30:21 csv-yglcs17 systemd: dhcpd.service failed.
3 p" C: A1 B: @- `
& D8 A9 j* q: a3 _8 _0 M

Ironic Inspector

[root@csv-yglcs17 pxelinux.cfg]# pwd
! g% @, I$ ]$ Y7 c! K1 x% u/tftpboot/pxelinux.cfg
[root@csv-yglcs17 pxelinux.cfg]# cat default
default introspect
4 H2 `! d( M$ h6 Dlabel introspect
2 K6 X) m& N) R% F% [' o: Skernel /tftpboot/ironic-inspector/inspector-kernel
append initrd=/tftpboot/ironic-inspector/inspector-ramdisk  ipa-inspection-callback-url=http://20.26.33.26:5050/v1/continue systemd.journald.forward_to_console=yes ipa-collect-lldp=True
( M2 S* m; u' V: O$ L  s+ qipappend 3
, A. `0 W% O) L

inspector在20.26.33.26上

8 R, X3 b! v) W' ~9 E$ q8 M0 G0 ^Ironic Provisioning
4 {) H( I1 q/ t1 `% N9 I3 c0 m. Q

ironic.conf中的provisioning_network还没配置。还有cleaning_network。
+ h& d/ G! R8 O4 P' P. G

0 f& s, H/ O( J& [检查IPMI
8 B' F: i. j# S% v& s

[root@csv-yglcs17 ~]# ipmitool -P Huawei12#$ -H 50.1.65.245 -U root -p 623 -I lanplus power status
Chassis Power is on

( }; s$ w$ M$ b: h* l, E* `

== 操作 ==
" M, u+ J' N: W/ F

# y) L* S, m7 A6 C; l

1 D% X- q  A4 k6 D* q





$ d' a& Y0 S- p7 V3 Dironic node-create --chassis_uuid dbb588b3-75e8-4028-b851-110671e05e58 \
4 G* t  Q/ \; l& G                   --driver agent_ipmitool \
                   --name pc-zjnacthd01 \
# `: _1 i6 r" ?7 u4 S- K                   -i ipmi_address=50.1.65.245 \
) c1 w4 o, {; b) ?2 j5 P6 m. D                   -i ipmi_username=root \
                   -i ipmi_password=Huawei12#$ \
                   -i ipmi_port=623 \
                   -i driver_info/deploy_kernel=4c1855e5-9b6b-47e2-89e5-3bc351c2ae2e \
( p1 K& O+ z: U; }7 ~) p9 D                   -i driver_info/deploy_ramdisk=2f603c85-de92-44ea-b4d0-1396b91102cc
$ J# B7 u. G, c
. [! ^, _+ Z% c9 G+ b; ^$ ^8 [$ gUpdate 5/25: 正在开发Ironic AZ功能，通过node-update将AZ属性加入node，同步给nova数据库。nova boot时只需要指定AZ创建机器即可。

! s# U- [  P) Z, `; u' h

7 @+ E$ P4 r& Z6 }3 y- _


update 5/12:

7 ?6 R# B" i8 x4 m. I/ Q
; Q# i3 x. r6 i+ t; V4 h1 m% d+ o
% Y- K9 Y0 C3 H! X* ~% F
" p) ^6 o3 U9 K* [, B
) T' l- v/ @  W4 u* q, g* h
, Q) _1 K0 j3 n3 K  einspect成功之后：

, I0 @" H* t5 l) q

- r% E" k9 m$ c3 F( b0 `" ~
5 O( L; B; \) w6 d

# g( h. s+ Y$ J7 b

inspect失败，原因见“问题2”

, |6 G0 @* e+ h, }( z

. L! O. v) u- E


$ W6 M! k: q! |4 V配置provisioning_network:

* s7 _: y3 w3 W$ `* x

" C# e5 c. S* i. B3 K
  p) T! E0 ]$ a' Y( c





Inspect成功之后：
  a6 c* @# _1 N  m  N! R
3 B: F; {' B, U0 Y. d
, j3 Z1 ?! W% k( q+ F+ v

6 }5 J, K2 s1 ^5 n+ W& F
% m& k; e* B  d) R/ X% j


/ ?8 u" s/ g6 _5 V' |. ~) i
' L* B% b3 U6 U8 m* x# X
8 N" m5 v4 v. T/ P上传Ironic使用的镜像：

glance image-create --name CentOS-7-64bit-ironic.qcow2 --disk-format qcow2 --container-format bare --file CentOS-7-64bit-ironic.qcow2 --is-public True --human-readable —progress
glance image-update 40928b81-9be1-402a-8684-4e2d2fcf330f --property hypervisor_type=baremetal
/ R7 K% g& P* p; }6 ]1 Z) B4 o6 G

nova boot --flavor 2 --image 40928b81-9be1-402a-8684-4e2d2fcf330f --nic net-id=3a151049-ff3f-4bc5-88a1-b9084ec24bc9 pc-zjnacthd01

3 C& i, y4 v  _: y% Q$ _

4 b. O9 I2 }+ e# G

4 R) r4 l- ]; |7 n0 U; o* c== 问题 ==

• node name有限制？
  % w; a- c5 ]2 t/ Y

5 g, ?( E6 o. t

4 c" g* h2 {; z5 r/ l5 x; a3 e4 S

$ c0 E! `9 v6 }8 y6 L2 F! T

• 第一次Inspect失败
  

2017-04-20 15:29:16.409 28596 ERROR ironic_inspector.main   File "/usr/lib/python2.7/site-packages/keystoneauth1/access/service_catalog.py", line 228, in url_for
2017-04-20 15:29:16.409 28596 ERROR ironic_inspector.main     raise exceptions.EndpointNotFound(msg)
/ A! t8 f3 ^6 \5 F2 d" y7 T2017-04-20 15:29:16.409 28596 ERROR ironic_inspector.main EndpointNotFound: public endpoint for baremetal service in RegionFour region not found
* s  n, P( X/ D, h- n( K7 }
9 R9 d- f0 I0 s( L* L重启ironic服务后解决

• 第二次inspect失败，BM拿不到IP
  

DHCP请求已经发送到dhcp server：


; o0 T+ y' Q: m- h


3 B" q7 H# P# G3 u8 t( p0 i1 b

• inspect时找不到cleaning_network
  1 y( D& ?6 e3 d! a/ M$ V+ H6 r( N& i

配置cleaning_network(=provide_network)

• nova boot失败, conductor.log:
  

* R! B9 g5 h2 C! G9 m# U2 ~

+ T8 ^4 G7 Y; t- m) J: u! {
# F# t: M; [( k/ A9 W- p* M更新控制节点的nova代码、ironic节点的ironic代码、计算节点ironicclient代码之后，问题解决
- t. D" e( f* G" G! ^

• nova boot失败，compute.log
  8 P* t4 j3 }% j$ q3 R) q0 D; D

2 L9 i; d, e6 }- U9 V


原因是这个ironic node driver_info还没更新：
# C' [6 J8 ?' y7 v# S
+ ]1 H% N* B3 b* R
" i9 U! g; w, M6 {% |! \0 k) [. p
) P. d3 m' w2 T1 \. a
更新一下：
ironic node-update baa519fc-7c06-40f8-8e5a-5fd3b6e97e01  add driver_info/deploy_kernel=f8205536-070b-4286-8d0c-35e3b8647741
, ~- I/ d+ l0 k* v# a+ b8 a/ q2 s2 {8 bironic node-update baa519fc-7c06-40f8-8e5a-5fd3b6e97e01 add driver_info/deploy_ramdisk=302e6438-4d31-429b-8bae-47e225d4ed67
update 05/12:

ironic node-update baa519fc-7c06-40f8-8e5a-5fd3b6e97e01  add driver_info/deploy_kernel=4c1855e5-9b6b-47e2-89e5-3bc351c2ae2e
ironic node-update baa519fc-7c06-40f8-8e5a-5fd3b6e97e01 add driver_info/deploy_ramdisk=2f603c85-de92-44ea-b4d0-1396b91102cc
9 m6 {- P8 J- I/ N

4 Q2 @7 Q0 b( Z. o- `

- C$ ^! V9 E' a9 {: P; N
5 M" D) A3 K  F# z: M
  z  V$ q* U" J8 I0 A7 K4 ]

• nova boot失败，镜像找不到，compute.log
  + t. N/ a* ^: U9 y  e

# J+ x9 }# b& c4 J. c
计算节点nova.conf的glance-api配错了：
, V* c4 k* m! n- k: J
9 _6 ^( {8 v, i: Y# Y0 K
, @# d5 s/ u4 L& B5 h7 V
+ [9 o: O! \  K# r) y- }' I" I: [
* C  c/ g4 t2 Y) F% V' t3 ?* m% S/ Yironic-conductor节点ironic.conf中添加glance api version=1

! U$ v- @; h; `" Z' U/ j
6 v/ M' \9 X2 C: K

/ Y1 A5 a7 y' M/ E, r% p" O
: W% x5 W5 e2 {9 @
+ ?9 d+ j6 K& w$ c/ q3 sglance_api_version=1

• nova boot失败，ironic-conductor.log:
  6 _1 x/ M0 c4 K8 \

( M; y: N5 i, C
+ L5 |& z! f0 |8 k
- l5 D5 ]4 [, j* c6 H# Z2 p
命令行验证，可以在provisioning network d5a284c3-41d3-4eb3-a11f-58a99d3e2eb1上创建port
0 k; M0 [6 m5 O
4 G9 E! N9 ~; _6 _' a原因是没有enable LLDP。enable之后：

ironic port-list | awk '{print $2}' | egrep '[0-9]+' | xargs -I 'X' ironic port-delete 'X'
ironic portgroup-list | awk '{print $2}' | egrep '[0-9]+' | xargs -I 'X' ironic portgroup-delete ‘X'
6 `# i$ E8 f$ K& i: p. {$ S' y. k重新Inspect：
ironic node-set-provision-state baa519fc-7c06-40f8-8e5a-5fd3b6e97e01 manage
4 H% t8 D1 D& g$ R$ e; \$ M3 Sironic node-set-provision-state baa519fc-7c06-40f8-8e5a-5fd3b6e97e01 inspect

6 h& r. |* u' W) M3 t/ `' j4 }) K
1 j" y/ P* g& r: F9 y* `
# P7 C+ {* `' a

* V: b" i" m5 @7 x$ C/ J: r$ q



0 g2 ~  h: \0 j7 w% r1 d' b* V" k4 G

• nova boot失败，找不到用户镜像
  ) A! P& Q8 V! t

原因是glance-registry.conf中的数据库写错了。
5 j( O& z  u: g/ N  \/ K
% T* M0 x; M- l% `

• nova boot失败，找不到ramdisk
  

  S! z( C- w) C' A2 V2 p. T# V
4 N, a5 U+ z; Z, t! K
: T: p4 y: A7 j3 ?  ^7 u
: x& m( l# k/ Z7 r3 k5 {
这个image UUID是配置在ironic node的driver_info里面的，image需要上传到glance
* V9 _3 ?; ~' z) D$ Q- o) v8 T
上传镜像：
% ^9 ?0 o9 u# b2 q, z8 p


) L  V- f) p  Y& l. W









1 y- d+ ~2 Y3 }' \* u% A更新Ironic node信息：
4 P* _' u4 Z. C, I2 d# F/ j' T2 R
0 n! s$ `; ]( i, A, y
: V6 [, ]; o; {( q! b( a
7 P: \$ V, n1 `, {. ?( C* W
" H/ }  d/ ~; q! [% Z. V# O0 v3 \

• nova boot失败，访问tftp权限不够
  

1 S* {7 {1 ?8 d! O1 t& T/ w) G3 I9 G
# ^7 k6 o! Z/ Y' [; z. I
$ h) Z  T6 i) t- @
6 X3 K* N5 I: z4 t
chown -R ironic:ironic /tftpboot/
$ k2 \3 ?- L, I- ^9 E: g
4 j- S* I9 K; t9 A& S+ w# E
1 X  Y; B3 c+ h& P

• nova boot失败，物理机DHCP请求被ironic-dhcp捕获了
  

关闭ironic-dhcp

) ]: {6 P) X* K% v3 N3 l

• nova boot失败，物理机DHCP时不能从neutron DHCP拿到IP
  - C" K1 C! \' C$ D, b1 T" E8 P

在控制节点上，neutron dhcp在dnsmasq启动的namespace中。relay的目的地址是控制节点管理网IP（eno16777984），dnsmasq的监听设备为namespace的tap口，IP为20.26.34.91，他拿不到dhcp请求。
现在的方法是：在控制节点上手动启动一个dnsmasq，使用neutron dhcp一样的配置
0 ]8 o: w! r' D% \

• 拿到IP之后，进入ramdisk系统，但是重启之后不能进入用户镜像的操作系统
  

查看BIOS的启动设备顺序，发现是- Boot Device Selector : No override
查看ironic-conductor.log，发现连不上20.26.34.70:9999。这是IPA的地址和监听端口，需要保证ironic-conductor节点能连上，但是的确不通。
4 T3 |7 {( \( B! o& }2 h7 m) `0 g+ U

' N) O  O0 ~1 J2 X9 t
# N! {) [3 B( F* s" ]$ w

姚军说可能是ramdisk启动之后，有两个网口获取到了IP地址，引起路由错乱，建议我们ramdisk启动之后，删除第二个地址。

5 o; X! C7 Q1 |  y05/04 update: 在provisioning network上加上静态路由：destination=控制节点网段，nexthop为provisioning network GW
; v2 j7 `* j1 P( ~2 Z5 u2 m" M05/11 update：neutron subnet-update aca03dd8-3d2a-4c54-99de-7a8a7bac4f53 --host-route destination=20.26.33.0/24,nexthop=20.26.34.1
& o( J: a* |6 R3 t. V) ~  l: JUpdated subnet: aca03dd8-3d2a-4c54-99de-7a8a7bac4f53
8 k% N" z! I* K$ G% ~- Q: s



; b8 r) ?0 t6 O! g
! H0 o* T1 J# m. t1 Q9 |验证可行，能连接这个端口并下载用户镜像： ==> 为啥会有多个网卡获取到IP，如何从代码层面解决？
1 s  a5 {; ^5 q' P$ h  D
; F+ C, j& V0 Y




( ~4 [4 f; z" u$ a( J- zIPMI查询启动顺序：ipmitool -P Huawei12#$ -H 50.1.65.245 -U root -p 623 -I lanplus chassis bootparam get 5
  Y# U" f2 U6 b2 Z( h; G设置硬盘启动：ipmitool -P Huawei12#$ -H 50.1.65.245 -U root -p 623 -I lanplus chassis bootdev disk
8 Q/ Y8 h) y9 Q' ^5 A4 M
7 O6 S( H6 B# S9 s# X

• 用户镜像下载到了/dev/sdl，没有下载到第一个硬盘，并且整个boot过程超时了
    F" U" ~9 k$ ]- U( L' d  i

+ c, a  H* m/ C% h


a. 姚军修改了ramdisk，固定使用/dev/sda作为写入的硬盘
& W8 ]" \9 d% m9 R) | b. 修改ironic.conf的deploy_callback_timeout=900
% N2 g% v: E8 m' Y! b6 \, x  l: j
3 g# m  X/ c' r! w6 q5 b% E# cUpdat 05/04:
2 R' L- M- J- l李灏：ironic node-update 4fae2ae3-0935-4585-8be2-00298015f8f3 replace properties/root_device='{"name": "/dev/sda"}'

• 写入了/dev/sda，但是ironic-conductor没有重启机器，导致boot hang死
    P' I9 V/ \8 d4 b$ a* u1 e

journalctl -fu python-ironic-agent查看IPA内的日志
journalctl --no-pager

! {3 F0 D- z7 `; I8 i1 k

• 镜像写入/dev/sda后，IPA执行partprobe /dev/sda失败
  # N1 G# p$ V+ ?$ C

! s7 F+ E5 t4 d

ramdisk中的ironic-lib需要打patch：https://review.openstack.org/#/c/444061/
: r* B/ }. C% [6 l# P7 f. B0 e4 d

•