Ironic

rui

Ironic对接原生的Neutron
* u5 N: W, J/ j; p* Y1 y' @+ ^

---

部署、配置相关：

• Ironic自己有一个dhcp-server，在inspect过程使用
• neutron-dhcp，在provision过程使用
• inspect和provision过程使用的tftp server可能不同
  

/ M* I+ R  }6 @5 D, h0 x9 DRegister过程
& s" Z# `: L# S

用户录入ironic node，包含ipmi等信息
( M7 [: O2 G- ^4 T& e# _+ ~$ i

& ]' S/ K' X4 CInspect过程
( g7 ]  C0 g) I6 \

这个过程中使用Inspect Network，要求：
- f. U- q6 v0 n

• Ironic dhcp-server能收到BM节点的DHCP请求。
• BM节点拿到IP后，能和tftp-server-1互通（三层可达）
  

用户获取BM节点信息
8 J; J) f# u1 u1 b

• Ironic通过IPMI设置BM节点PXE启动
• Ironic通过IPMI启动BM节点，做PXE启动
• BM节点从Ironic dhcp-server获取IP。此时BM节点的请求报文不带vlan tag，使用上联接入交换机的native vlan（默认tag=1）
• 拿到IP之后，BM节点从tftp-server-1下载小镜像（ramdisk，内含Ironic Python Agent）
• 执行某些操作，获取BM节点的详细信息
• 将BM节点关机。ramdisk运行在内存中，关机后丢失。
  

Provision过程
* O0 d6 N7 B7 x

这个过程中使用Provisioning Network（由neutron创建），要求：

• BM, glance-api, ironic-api, ironic-conductor, neutron-dhcp-agent需要保证PROVISION NETWORK连通性
  

用户申请物理机，安装操作系统，配置业务网卡等

• 从nova入口
• Ironic IPMI启动BM节点，做PXE启动
• 此时，要求BM节点从neutron-dhcp-server获取IP（通过native vlan）。但由于Ironic-dhcp-server也允许native vlan过来的请求，所以必须保证DHCP请求被Neutron-dhcp-server处理。
• 拿到IP之后，BM节点从tftp-server-2（可以和Inspect过程中的tftp server不同）下载小镜像（ramdisk，内含Ironic Python Agent）
• （这一步怎么控制的？）从glance下载用户要求的镜像，做安装（要求拿到的IP和glance-api能互通）
• 安装完成之后，通过cloud-init在BM操作系统内部打上对应的vlan tag（必须保证该vlan tag在接入交换机上预先做了配置）
  

关键问题：

• Ironic-dhcp-server和Neutron-dhcp-server都允许native vlan过来的DHCP请求，如果有两个BM节点同时做Inspect和Provision操作，可能引起冲突。
  . S/ N9 [  p/ W* Q7 s8 C

• 两个DHCP server合并。但是Neutron-dhcp-server是白名单方式，而在Inspect节点，dhcp-server还不知道BM节点的信息，没法配置白名单。
• 严格将Inspect和Provision过程分开。在机房初始化过程中，开启Ironic-dhcp-server，做完Inspect之后将其关闭；或者在EPC上强制Inspect过程中，disable Provision操作。
  . V# K0 c, W7 M  `- a0 ]1 w
  # {& V; _2 T3 w( h2 \- s/ R( ~3 E* 一级私有云中兴方案，将两个DHCP合并了，运行在ToR交换机上。
  

• BM节点的租户vlan一定要在接入交换机上预先配置，如果做不到，则需要动态地配置交换机
• Neutron-dhcp-agent需要在业务网上
  

---

苏州Ironic环境
! V  |% _3 o6 h4 e" `$ d

10.142.24.12 root/@IDC_host4321

3 p* w! H6 t5 E2 ?# l: Z

---

浙江Ironic测试环境
9 M) ^  P1 h+ V
Ironic DHCP
& Z  C$ M! l+ M- A7 [% Z) L+ y% I

[root@csv-yglcs17 ~]# cat /etc/dhcp/dhc
dhclient.d/  dhcpd6.conf  dhcpd.conf
5 |- \+ I% M: L6 K8 R[root@csv-yglcs17 ~]# cat /etc/dhcp/dhcpd.conf
/ t' l# M& p6 |2 ~+ L9 O  J0 f7 Y2 Voption domain-name "test.com";
! H6 ~5 l; L' r0 Soption domain-name-servers 8.8.8.8, 61.88.88.88;
default-lease-time 60000;
max-lease-time 720000;
subnet 20.26.34.0 netmask 255.255.255.0 {
; L" b5 L+ L8 q: B    range 20.26.34.10 20.26.34.100;       <== DHCP段
% S$ o$ b7 x: F8 G  T! ]    option routers 20.26.34.1;
    next-server 20.26.33.26;          <== tftp server
8 ^: ^. x' s7 n# P# n7 B    filename "pxelinux.0";
}
9 o: a! V" @" y0 |) o1 ssubnet 20.26.33.0 netmask 255.255.255.0 {      <== conductor节点只有33.0网段IP，如果不配置这个subnet，则dhcp启动时会报下面这个错误
}
, q" ^8 e: A) k
问题：
2 Q( c/ ~, a; g, l% e! mApr 19 14:30:21 csv-yglcs17 systemd: Starting DHCPv4 Server Daemon...
Apr 19 14:30:21 csv-yglcs17 dhcpd: Internet Systems Consortium DHCP Server 4.2.5
+ t9 x- p' P) x1 SApr 19 14:30:21 csv-yglcs17 dhcpd: Copyright 2004-2013 Internet Systems Consortium.
Apr 19 14:30:21 csv-yglcs17 dhcpd: All rights reserved.
/ V( f6 O  F. W( J' B. ~Apr 19 14:30:21 csv-yglcs17 dhcpd: For info, please visit https://www.isc.org/software/dhcp/
Apr 19 14:30:21 csv-yglcs17 dhcpd: Not searching LDAP since ldap-server, ldap-port and ldap-base-dn were not specified in the config file
Apr 19 14:30:21 csv-yglcs17 dhcpd: Wrote 15 leases to leases file.
0 C  a+ h8 |6 A" QApr 19 14:30:21 csv-yglcs17 dhcpd:
Apr 19 14:30:21 csv-yglcs17 dhcpd: No subnet declaration for eno33557248 (no IPv4 addresses).
Apr 19 14:30:21 csv-yglcs17 dhcpd: ** Ignoring requests on eno33557248.  If this is not what
& O# m1 _0 H; ZApr 19 14:30:21 csv-yglcs17 dhcpd:   you want, please write a subnet declaration
Apr 19 14:30:21 csv-yglcs17 dhcpd:   in your dhcpd.conf file for the network segment
Apr 19 14:30:21 csv-yglcs17 dhcpd:   to which interface eno33557248 is attached. **
Apr 19 14:30:21 csv-yglcs17 dhcpd:
, O' V9 n9 Q0 i+ x5 ~8 aApr 19 14:30:21 csv-yglcs17 dhcpd:
Apr 19 14:30:21 csv-yglcs17 dhcpd: No subnet declaration for virbr0 (192.168.122.1).
Apr 19 14:30:21 csv-yglcs17 dhcpd: ** Ignoring requests on virbr0.  If this is not what
Apr 19 14:30:21 csv-yglcs17 dhcpd:   you want, please write a subnet declaration
Apr 19 14:30:21 csv-yglcs17 dhcpd:   in your dhcpd.conf file for the network segment
Apr 19 14:30:21 csv-yglcs17 dhcpd:   to which interface virbr0 is attached. **
. @# ]4 V+ r! IApr 19 14:30:21 csv-yglcs17 dhcpd:
Apr 19 14:30:21 csv-yglcs17 dhcpd:
Apr 19 14:30:21 csv-yglcs17 dhcpd: No subnet declaration for eno16777984 (20.26.33.26).
0 ^) O% ~" B3 ?! q% yApr 19 14:30:21 csv-yglcs17 dhcpd: ** Ignoring requests on eno16777984.  If this is not what
Apr 19 14:30:21 csv-yglcs17 dhcpd:   you want, please write a subnet declaration
Apr 19 14:30:21 csv-yglcs17 dhcpd:   in your dhcpd.conf file for the network segment
/ m" r$ I! ]" Q4 y0 ~1 CApr 19 14:30:21 csv-yglcs17 dhcpd:   to which interface eno16777984 is attached. **
: Y3 B% Y0 J4 }$ \* fApr 19 14:30:21 csv-yglcs17 dhcpd:
; W9 X1 F: `0 B2 dApr 19 14:30:21 csv-yglcs17 dhcpd:
. e- z* a) f9 [) P7 [+ ?Apr 19 14:30:21 csv-yglcs17 dhcpd: Not configured to listen on any interfaces!
0 H% V0 {5 ~/ Y+ w  Q: ~0 }2 OApr 19 14:30:21 csv-yglcs17 dhcpd:
Apr 19 14:30:21 csv-yglcs17 dhcpd: This version of ISC DHCP is based on the release available
  f9 ]! a! J& n' t& w8 p3 {Apr 19 14:30:21 csv-yglcs17 dhcpd: on ftp.isc.org.  Features have been added and other changes
Apr 19 14:30:21 csv-yglcs17 dhcpd: have been made to the base software release in order to make
+ [; X5 l9 O: eApr 19 14:30:21 csv-yglcs17 dhcpd: it work better with this distribution.
1 {6 j! `- J$ \/ O2 |$ N, ?" H9 IApr 19 14:30:21 csv-yglcs17 dhcpd:
Apr 19 14:30:21 csv-yglcs17 dhcpd: Please report for this software via the CentOS Bugs Database:
Apr 19 14:30:21 csv-yglcs17 dhcpd:    http://bugs.centos.org/
! l5 n: `( z- H& K4 m' v4 G3 EApr 19 14:30:21 csv-yglcs17 dhcpd:
Apr 19 14:30:21 csv-yglcs17 dhcpd: exiting.
2 g! _( s5 A- B0 a) kApr 19 14:30:21 csv-yglcs17 systemd: dhcpd.service: main process exited, code=exited, status=1/FAILURE
+ |: S- y/ a4 T: e2 ~Apr 19 14:30:21 csv-yglcs17 systemd: Failed to start DHCPv4 Server Daemon.
Apr 19 14:30:21 csv-yglcs17 systemd: Unit dhcpd.service entered failed state.
( }! `4 Z! h# t) h% Q% h; f9 HApr 19 14:30:21 csv-yglcs17 systemd: dhcpd.service failed.
& |: g) ^0 m( e0 e/ D

5 l2 p  c2 `1 q) U; B5 [% _$ t& LIronic Inspector
9 h; h) O2 S  }" S7 f  i

[root@csv-yglcs17 pxelinux.cfg]# pwd
$ a% T1 Y! L2 K) `/ j5 U/tftpboot/pxelinux.cfg
[root@csv-yglcs17 pxelinux.cfg]# cat default
4 R5 R8 c1 J. B+ Sdefault introspect
0 w* L7 C/ X- m$ a; I6 mlabel introspect
: K. n2 k3 u( H' {! A3 t8 X# akernel /tftpboot/ironic-inspector/inspector-kernel
" D/ F2 s7 o7 ~+ a  `6 Xappend initrd=/tftpboot/ironic-inspector/inspector-ramdisk  ipa-inspection-callback-url=http://20.26.33.26:5050/v1/continue systemd.journald.forward_to_console=yes ipa-collect-lldp=True
6 {% p' O- m( @0 \1 `/ w5 zipappend 3

  Z* q/ D6 |6 V7 J, ]

inspector在20.26.33.26上

Ironic Provisioning
, Z0 Y- Y7 `3 n

ironic.conf中的provisioning_network还没配置。还有cleaning_network。
8 r5 n' h6 ]1 Q& m

0 F- v) ^/ C! q0 q# p+ i检查IPMI
; s. g0 n  k4 b8 J( u: c; f- P

[root@csv-yglcs17 ~]# ipmitool -P Huawei12#$ -H 50.1.65.245 -U root -p 623 -I lanplus power status
+ t8 U* |! @, I9 SChassis Power is on
" p* d6 L& G6 Z! T

; W3 u' _% _2 d0 b# _4 z

== 操作 ==


& i$ ?* Y( k- `8 t

+ j1 N' W7 s4 b! a6 e. l

5 B1 d- h8 i# Q! y+ b

9 _' F6 c7 T! N8 c( l' X3 ]2 u

- a7 C* x. g% x4 A7 I' S% ?ironic node-create --chassis_uuid dbb588b3-75e8-4028-b851-110671e05e58 \
                   --driver agent_ipmitool \
$ W7 h( K+ c& \4 S/ g& R                   --name pc-zjnacthd01 \
6 S, i- r2 I; |, z                   -i ipmi_address=50.1.65.245 \
                   -i ipmi_username=root \
% S2 g! j) y9 b: T3 f- e                   -i ipmi_password=Huawei12#$ \
) I5 `3 L. i, B$ j! h) y) }; c                   -i ipmi_port=623 \
                   -i driver_info/deploy_kernel=4c1855e5-9b6b-47e2-89e5-3bc351c2ae2e \
                   -i driver_info/deploy_ramdisk=2f603c85-de92-44ea-b4d0-1396b91102cc

Update 5/25: 正在开发Ironic AZ功能，通过node-update将AZ属性加入node，同步给nova数据库。nova boot时只需要指定AZ创建机器即可。
6 M. _# `) O& r3 `
( z% i. D/ l3 m* K3 L
. M$ P  Z, ~- }7 X

& t3 ?" z& t$ K8 N: q8 D
7 M9 q8 V2 ?$ c: D# G
; O0 R! R! ^$ t& Supdate 5/12:

) _5 D3 C4 O4 A( V7 S' G5 H


) ^( u+ t0 I3 q5 Q
, l" ^0 N" g% c  z3 p
$ u) r7 h( N) D2 M2 {# k  [) L' Uinspect成功之后：


6 h0 Q# Y. ?3 e* Z" {( Z8 J# B/ p
& v6 Y/ e- L$ v5 W7 E5 r1 t9 P
& S8 ]: B  c4 X4 [  h# T9 j# P

; b- _+ x) ?. ^0 s5 q
inspect失败，原因见“问题2”


: N5 V: I0 [4 K1 c
, P* s" I! O: T' ^. n, |
# t7 w* e0 n/ `3 v8 f6 M" k/ C, k. S
' `3 B8 B, q* M7 R1 T4 ~
+ e' n1 l2 U2 ~4 v0 N! |# S配置provisioning_network:


6 T# d+ w9 I$ Z1 F& S3 }; N

  Y9 }3 S. z8 q2 }



" ]6 [# p8 E# N8 r9 H
  v# C. s! p  E* S  Q
) u+ |4 J8 x/ z4 y; fInspect成功之后：

" v1 _  d2 w0 z$ \



& M0 G, x  E2 K8 `% d  C1 Z; V' _& s

: C7 s, ^( p* d# M9 }
% s& P5 p" _( ?' S7 f1 r& y8 O5 Q

: x2 b! k* t: ~: e8 y; i, n上传Ironic使用的镜像：

glance image-create --name CentOS-7-64bit-ironic.qcow2 --disk-format qcow2 --container-format bare --file CentOS-7-64bit-ironic.qcow2 --is-public True --human-readable —progress
glance image-update 40928b81-9be1-402a-8684-4e2d2fcf330f --property hypervisor_type=baremetal
" J/ z/ j9 ~/ D1 U$ X8 i- V

nova boot --flavor 2 --image 40928b81-9be1-402a-8684-4e2d2fcf330f --nic net-id=3a151049-ff3f-4bc5-88a1-b9084ec24bc9 pc-zjnacthd01
4 ]5 q9 ?$ o7 P) v% u; p, D
4 o7 r7 o, |$ t8 p& Z- b2 V' i
7 b6 R+ V) q% K  @

; G) t! B+ }$ P8 n5 q4 d
== 问题 ==

• node name有限制？
  1 R+ b! I1 t3 H6 @2 y9 w

5 ?5 b) g# p; Y2 v2 c" R
$ C2 ~. A0 J: z1 O$ P$ \
  T6 ~& H  @$ J% @0 r4 \5 Q2 D
: b8 q, T0 s* C+ J) O# c, i
4 b; P6 c7 J. N2 v5 e9 L

• 第一次Inspect失败
  

2017-04-20 15:29:16.409 28596 ERROR ironic_inspector.main   File "/usr/lib/python2.7/site-packages/keystoneauth1/access/service_catalog.py", line 228, in url_for
2017-04-20 15:29:16.409 28596 ERROR ironic_inspector.main     raise exceptions.EndpointNotFound(msg)
2017-04-20 15:29:16.409 28596 ERROR ironic_inspector.main EndpointNotFound: public endpoint for baremetal service in RegionFour region not found

重启ironic服务后解决

8 C8 K7 G$ g. N8 e! _- v: l& Q. J

• 第二次inspect失败，BM拿不到IP
  

DHCP请求已经发送到dhcp server：
3 I7 K1 p7 s5 }/ o1 x
" n5 w9 N5 i" B6 h3 I3 l
% c* q6 @6 o4 D3 p: _; v# @

! `6 s8 N# ~8 R( z5 E7 k
: C# }. a4 I0 I8 H" f

• inspect时找不到cleaning_network
  

配置cleaning_network(=provide_network)
9 i% i! w( \2 G

• nova boot失败, conductor.log:
  $ N4 ^$ b; p2 M5 O  i

0 B4 N: E5 O/ e3 F3 L0 Q
5 Z. a6 \9 A; o3 o  \

; C' m# d! h0 Y更新控制节点的nova代码、ironic节点的ironic代码、计算节点ironicclient代码之后，问题解决

• nova boot失败，compute.log
  9 @6 H- h; C/ w! \7 I

+ b+ [1 X: t$ N: G% r2 ~$ C9 V原因是这个ironic node driver_info还没更新：

  J: c! ?. n- S* B0 p
7 N* e( `2 M- |1 y' n& e$ Z  L' k
! z  b" `2 }) c9 P
更新一下：
$ b7 Q7 m9 Y  j/ R3 `2 f1 Nironic node-update baa519fc-7c06-40f8-8e5a-5fd3b6e97e01  add driver_info/deploy_kernel=f8205536-070b-4286-8d0c-35e3b8647741
ironic node-update baa519fc-7c06-40f8-8e5a-5fd3b6e97e01 add driver_info/deploy_ramdisk=302e6438-4d31-429b-8bae-47e225d4ed67
update 05/12:
/ A/ `" d# m; j

ironic node-update baa519fc-7c06-40f8-8e5a-5fd3b6e97e01  add driver_info/deploy_kernel=4c1855e5-9b6b-47e2-89e5-3bc351c2ae2e
ironic node-update baa519fc-7c06-40f8-8e5a-5fd3b6e97e01 add driver_info/deploy_ramdisk=2f603c85-de92-44ea-b4d0-1396b91102cc

* \, N- s- f7 C) u/ R
9 O7 v6 r* W& N  B' b8 O

; {6 ?4 a6 x- R. h. _! q

• nova boot失败，镜像找不到，compute.log
  

9 x; T! z  V% J
7 k9 y& K% S, a" T计算节点nova.conf的glance-api配错了：
: T* l  S6 d2 \6 D+ F8 A

6 l4 b5 Y( P6 u% T0 ?
1 _, r3 W. y4 }* T8 P- A9 f
- s1 j. a; P' ?6 ^& o/ j# s) Dironic-conductor节点ironic.conf中添加glance api version=1
6 c$ }1 B/ T6 d% X/ [. Q& g


0 f7 f0 r2 o4 O3 l

1 a" @: ]3 k- T$ p
$ k; K; U; w% Q( G1 i+ Aglance_api_version=1
: J$ O3 V& Z, l- [! {

• nova boot失败，ironic-conductor.log:
  

& R. @* u4 q& w& b4 [( J
, Z" o) ^* L4 @4 x
命令行验证，可以在provisioning network d5a284c3-41d3-4eb3-a11f-58a99d3e2eb1上创建port
, S* v; u' L2 A* H5 k& T
原因是没有enable LLDP。enable之后：

; e' |6 O; {. d4 K" yironic port-list | awk '{print $2}' | egrep '[0-9]+' | xargs -I 'X' ironic port-delete 'X'
ironic portgroup-list | awk '{print $2}' | egrep '[0-9]+' | xargs -I 'X' ironic portgroup-delete ‘X'
重新Inspect：
' r- Q- p% X# Y  Qironic node-set-provision-state baa519fc-7c06-40f8-8e5a-5fd3b6e97e01 manage
ironic node-set-provision-state baa519fc-7c06-40f8-8e5a-5fd3b6e97e01 inspect
: R4 f* G+ O. e# }/ d- B
4 W% J' y! t  o7 F
  @4 t6 G# Z' |; t* k
* V" Z* V" d# v- ^# x
; Q5 f4 Y8 b+ N& ^9 q0 X& n




6 L% e: G8 d* X  K7 V# F- T
$ L% t; g7 g9 w1 \$ _  z' Y& M

• nova boot失败，找不到用户镜像
  

原因是glance-registry.conf中的数据库写错了。
7 O& Y. R  F+ }0 @* j* F

• nova boot失败，找不到ramdisk
  4 C2 L- @6 z' p' ?$ ~9 r% w% ?* [

; h8 ]. S8 A& ^) N& y5 S; h

3 h% `. {  `: g- @0 z; @
这个image UUID是配置在ironic node的driver_info里面的，image需要上传到glance

+ C" [3 a8 x: s4 d3 c上传镜像：

9 u# J- W5 ]! H, @% f; V
5 F! m7 p' Y+ x2 _% ?
3 k. e! u. ^* v) x0 F* V


! e, G/ d, x- b: Y* S7 K
7 q* Z' z6 m6 N' w+ `
! |6 T6 u) @4 k
# d4 D& l4 N: Z- h! ~' A
. x& Z) B+ [. ?3 x: [
7 }6 ~& o7 l6 K' k: t! _+ r* I
/ x7 E6 V$ Z: U* K) E0 \
更新Ironic node信息：
9 M, E$ {1 m/ a* i( T
7 `6 V4 v/ m' ^2 `( q
; |7 I8 d$ g0 j, T
( O7 p4 Z7 _# N4 s6 P& B

• nova boot失败，访问tftp权限不够
  ' s3 ]% }3 r* h

& @. ?! z, m1 g( Y0 Y7 ^' f

& q. V6 X  g- C( C1 h! @
% U2 x( `/ k  a" V; N
# G7 r+ `6 t. s7 d" e$ {chown -R ironic:ironic /tftpboot/

9 r, u* Q1 J5 @/ r+ E2 v7 y# f3 x+ }9 D
* M" S4 _5 w; d
) J) u& M0 V  h$ g& P
& Q) z. _. I2 \9 H$ \

* e6 w* X& t2 W, G, U! [) K

• nova boot失败，物理机DHCP请求被ironic-dhcp捕获了
  

关闭ironic-dhcp

0 Z' L; T4 j! d0 ?

• nova boot失败，物理机DHCP时不能从neutron DHCP拿到IP
  

在控制节点上，neutron dhcp在dnsmasq启动的namespace中。relay的目的地址是控制节点管理网IP（eno16777984），dnsmasq的监听设备为namespace的tap口，IP为20.26.34.91，他拿不到dhcp请求。
现在的方法是：在控制节点上手动启动一个dnsmasq，使用neutron dhcp一样的配置
5 p! t  }# h( P' O8 l7 r; D4 s, t
' K, m  }9 O) ]) V& `( G' W

• 拿到IP之后，进入ramdisk系统，但是重启之后不能进入用户镜像的操作系统
  

查看BIOS的启动设备顺序，发现是- Boot Device Selector : No override
查看ironic-conductor.log，发现连不上20.26.34.70:9999。这是IPA的地址和监听端口，需要保证ironic-conductor节点能连上，但是的确不通。

: F  l) p/ G" @' K1 t


: Q& J' [* b5 P3 d% {; `7 _, ~9 d
姚军说可能是ramdisk启动之后，有两个网口获取到了IP地址，引起路由错乱，建议我们ramdisk启动之后，删除第二个地址。
  ], g4 ?2 j" R8 p% I; A9 N/ ^) m9 E
8 L& j. @" |9 a: }" t3 T  d8 _  A05/04 update: 在provisioning network上加上静态路由：destination=控制节点网段，nexthop为provisioning network GW
05/11 update：neutron subnet-update aca03dd8-3d2a-4c54-99de-7a8a7bac4f53 --host-route destination=20.26.33.0/24,nexthop=20.26.34.1
Updated subnet: aca03dd8-3d2a-4c54-99de-7a8a7bac4f53

# t5 B$ O6 U+ T& v- s. t



; O/ ]8 D5 l; m8 `7 d# o/ O验证可行，能连接这个端口并下载用户镜像： ==> 为啥会有多个网卡获取到IP，如何从代码层面解决？
6 l, l3 X5 L3 w4 _

( D0 R0 r5 _! e7 J! B


; s2 E: j5 P0 g% N% h+ \0 d6 i
0 i: L& q0 ?) ?5 JIPMI查询启动顺序：ipmitool -P Huawei12#$ -H 50.1.65.245 -U root -p 623 -I lanplus chassis bootparam get 5
/ M" l" Y, K! Q3 j- s* G+ {& e设置硬盘启动：ipmitool -P Huawei12#$ -H 50.1.65.245 -U root -p 623 -I lanplus chassis bootdev disk
) U4 y3 ?- M% ~% O. C  `

2 {5 L2 N+ y1 B# S

/ j; B5 \, s3 \/ a
. t  c5 R; H: b/ t% B0 s; V

• 用户镜像下载到了/dev/sdl，没有下载到第一个硬盘，并且整个boot过程超时了
  

0 m- n8 k8 v5 m! ^5 P. v: y; |
4 i) R' @) t; H) Z- V# B" m" Y; W4 e
3 d, B- l( O, F
5 J) {+ n/ q4 _2 @2 y* z1 H! D a. 姚军修改了ramdisk，固定使用/dev/sda作为写入的硬盘
b. 修改ironic.conf的deploy_callback_timeout=900
/ V2 p$ B# Q( z) e' j" T- A
Updat 05/04:
李灏：ironic node-update 4fae2ae3-0935-4585-8be2-00298015f8f3 replace properties/root_device='{"name": "/dev/sda"}'
5 L9 e3 N! s8 @
5 s1 k% |! I& K9 z& j

• 写入了/dev/sda，但是ironic-conductor没有重启机器，导致boot hang死
  ; m3 T( `3 \* N

journalctl -fu python-ironic-agent查看IPA内的日志
journalctl --no-pager
9 `5 @# q6 [" l
. a$ G; h0 Y. s' s1 r2 Q

• 镜像写入/dev/sda后，IPA执行partprobe /dev/sda失败
  

# }9 I) X; m+ m7 E; n6 U
+ k! J7 X9 Q4 \5 C+ T4 Z7 q" [  q; z

ramdisk中的ironic-lib需要打patch：https://review.openstack.org/#/c/444061/


$ O. [7 p3 f  \" F

•