+ wait_for_file /etc/pki/CA/cacert.pem
+ local file=/etc/pki/CA/cacert.pem
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ sleep 1
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ sleep 1
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ sleep 1
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ sleep 1
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ sleep 1
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ wait_for_file /etc/pki/qemu/ca-cert.pem
+ local file=/etc/pki/qemu/ca-cert.pem
+ '[' '!' -f /etc/pki/qemu/ca-cert.pem ']'
+ wait_for_file /etc/pki/libvirt/servercert.pem
+ local file=/etc/pki/libvirt/servercert.pem
+ '[' '!' -f /etc/pki/libvirt/servercert.pem ']'
+ wait_for_file /etc/pki/libvirt/clientcert.pem
+ local file=/etc/pki/libvirt/clientcert.pem
+ '[' '!' -f /etc/pki/libvirt/clientcert.pem ']'
+ wait_for_file /etc/pki/qemu/server-cert.pem
+ local file=/etc/pki/qemu/server-cert.pem
+ '[' '!' -f /etc/pki/qemu/server-cert.pem ']'
+ wait_for_file /etc/pki/qemu/client-cert.pem
+ local file=/etc/pki/qemu/client-cert.pem
+ '[' '!' -f /etc/pki/qemu/client-cert.pem ']'
+ wait_for_file /etc/pki/libvirt/private/serverkey.pem
+ local file=/etc/pki/libvirt/private/serverkey.pem
+ '[' '!' -f /etc/pki/libvirt/private/serverkey.pem ']'
+ wait_for_file /etc/pki/libvirt/private/clientkey.pem
+ local file=/etc/pki/libvirt/private/clientkey.pem
+ '[' '!' -f /etc/pki/libvirt/private/clientkey.pem ']'
+ wait_for_file /etc/pki/qemu/server-key.pem
+ local file=/etc/pki/qemu/server-key.pem
+ '[' '!' -f /etc/pki/qemu/server-key.pem ']'
+ wait_for_file /etc/pki/qemu/client-key.pem
+ local file=/etc/pki/qemu/client-key.pem
+ '[' '!' -f /etc/pki/qemu/client-key.pem ']'
+ wait_for_file /etc/pki/libvirt-vnc/ca-cert.pem
+ local file=/etc/pki/libvirt-vnc/ca-cert.pem
+ '[' '!' -f /etc/pki/libvirt-vnc/ca-cert.pem ']'
+ wait_for_file /etc/pki/libvirt-vnc/server-cert.pem
+ local file=/etc/pki/libvirt-vnc/server-cert.pem
+ '[' '!' -f /etc/pki/libvirt-vnc/server-cert.pem ']'
+ wait_for_file /etc/pki/libvirt-vnc/server-key.pem
+ local file=/etc/pki/libvirt-vnc/server-key.pem
+ '[' '!' -f /etc/pki/libvirt-vnc/server-key.pem ']'
++ grep -w libvirtd
++ cat /proc/1/comm /proc/10/comm /proc/100/comm /proc/102/comm /proc/103/comm /proc/10320/comm /proc/103250/comm /proc/103603/comm /proc/103934/comm /proc/104/comm /proc/105/comm /proc/106/comm /proc/108/comm /proc/10832/comm /proc/10833/comm /proc/109/comm /proc/1095/comm /proc/109952/comm /proc/109975/comm /proc/11/comm /proc/110/comm /proc/110258/comm /proc/110296/comm /proc/110308/comm /proc/110309/comm /proc/111/comm /proc/111482/comm /proc/111506/comm /proc/111519/comm /proc/111544/comm /proc/111924/comm /proc/112/comm /proc/112200/comm /proc/112205/comm /proc/112210/comm /proc/112624/comm /proc/113/comm /proc/113200/comm /proc/113372/comm /proc/113605/comm /proc/113630/comm /proc/113724/comm /proc/113741/comm /proc/113747/comm /proc/113795/comm /proc/113796/comm /proc/113806/comm /proc/113980/comm /proc/114/comm /proc/115/comm /proc/115269/comm /proc/115297/comm /proc/115484/comm /proc/115513/comm /proc/116/comm /proc/117/comm /proc/118316/comm /proc/119240/comm /proc/12/comm /proc/120413/comm /proc/120707/comm /proc/121784/comm /proc/12225/comm /proc/12255/comm /proc/122910/comm /proc/122911/comm /proc/12311/comm /proc/12335/comm /proc/12353/comm /proc/124615/comm /proc/124810/comm /proc/125335/comm /proc/125348/comm /proc/125349/comm /proc/12586/comm /proc/12617/comm /proc/12671/comm /proc/126838/comm /proc/12703/comm /proc/12717/comm /proc/128425/comm /proc/128449/comm /proc/128471/comm /proc/128512/comm /proc/129221/comm /proc/129244/comm /proc/129611/comm /proc/129850/comm /proc/13/comm /proc/130531/comm /proc/130590/comm /proc/131081/comm /proc/131105/comm /proc/131734/comm /proc/14/comm /proc/1426/comm /proc/143787/comm /proc/143788/comm /proc/145208/comm /proc/146608/comm /proc/147799/comm /proc/147803/comm /proc/147899/comm /proc/148328/comm /proc/148576/comm /proc/148592/comm /proc/148594/comm /proc/149665/comm /proc/149666/comm /proc/15/comm /proc/1531/comm /proc/1532/comm /proc/1533/comm /proc/1534/comm /proc/1538/comm /proc/156881/comm /proc/156882/comm /proc/156884/comm /proc/156885/comm /proc/157000/comm /proc/157749/comm /proc/157773/comm /proc/158198/comm /proc/158266/comm /proc/158279/comm /proc/158311/comm /proc/158312/comm /proc/158314/comm /proc/158315/comm /proc/158952/comm /proc/158983/comm /proc/159026/comm /proc/159379/comm /proc/16/comm /proc/160191/comm /proc/160212/comm /proc/160406/comm /proc/160408/comm /proc/160449/comm /proc/160455/comm /proc/1605/comm /proc/160624/comm /proc/160801/comm /proc/160826/comm /proc/160853/comm /proc/160875/comm /proc/1609/comm /proc/160918/comm /proc/160932/comm /proc/160971/comm /proc/160987/comm /proc/161104/comm /proc/161127/comm /proc/161329/comm /proc/161507/comm /proc/161514/comm /proc/1618/comm /proc/161826/comm /proc/162026/comm /proc/162049/comm /proc/162147/comm /proc/162170/comm /proc/162189/comm /proc/162248/comm /proc/162249/comm /proc/162259/comm /proc/162532/comm /proc/164527/comm /proc/164535/comm /proc/164558/comm /proc/164592/comm /proc/164621/comm /proc/164624/comm /proc/164683/comm /proc/164801/comm /proc/164833/comm /proc/164846/comm /proc/164872/comm /proc/164912/comm /proc/164954/comm /proc/164965/comm /proc/165266/comm /proc/165290/comm /proc/165934/comm /proc/166/comm /proc/167/comm /proc/168/comm /proc/169/comm /proc/169341/comm /proc/170/comm /proc/171/comm /proc/171305/comm /proc/171380/comm /proc/171393/comm /proc/171947/comm /proc/172/comm /proc/172115/comm /proc/172143/comm /proc/172198/comm /proc/172199/comm /proc/172213/comm /proc/173/comm /proc/173571/comm /proc/173648/comm /proc/173651/comm /proc/173652/comm /proc/174/comm /proc/174587/comm /proc/174715/comm /proc/174812/comm /proc/175002/comm /proc/176/comm /proc/176324/comm /proc/176913/comm /proc/176995/comm /proc/177/comm /proc/177014/comm /proc/177032/comm /proc/177033/comm /proc/177034/comm /proc/177035/comm /proc/178043/comm /proc/178044/comm /proc/178242/comm /proc/178361/comm /proc/178362/comm /proc/178373/comm /proc/178374/comm /proc/178738/comm /proc/179/comm /proc/179061/comm /proc/179085/comm /proc/179290/comm /proc/179307/comm /proc/179313/comm /proc/179363/comm /proc/179364/comm /proc/179374/comm /proc/179503/comm /proc/18/comm /proc/180/comm /proc/181031/comm /proc/181064/comm /proc/181105/comm /proc/181109/comm /proc/181139/comm /proc/181163/comm /proc/181282/comm /proc/181317/comm /proc/181408/comm /proc/181420/comm /proc/181444/comm /proc/181459/comm /proc/181488/comm /proc/182058/comm /proc/182092/comm /proc/182121/comm /proc/183/comm /proc/184941/comm /proc/18498/comm /proc/185/comm /proc/18518/comm /proc/18536/comm /proc/185507/comm /proc/185531/comm /proc/18563/comm /proc/18583/comm /proc/185874/comm /proc/186/comm /proc/186302/comm /proc/186345/comm /proc/186421/comm /proc/186452/comm /proc/186522/comm /proc/186533/comm /proc/187/comm /proc/187428/comm /proc/188/comm /proc/188466/comm /proc/188467/comm /proc/188468/comm /proc/188469/comm /proc/188470/comm /proc/188471/comm /proc/188472/comm /proc/188473/comm /proc/188474/comm /proc/188475/comm /proc/188476/comm /proc/188477/comm /proc/188478/comm /proc/188479/comm /proc/188480/comm /proc/188481/comm /proc/188482/comm /proc/188483/comm /proc/188769/comm /proc/188781/comm /proc/189/comm /proc/19/comm /proc/190/comm /proc/190481/comm /proc/190503/comm /proc/190541/comm /proc/190638/comm /proc/190860/comm /proc/190960/comm /proc/190961/comm /proc/190962/comm /proc/191/comm /proc/191094/comm /proc/191124/comm /proc/191296/comm /proc/191307/comm /proc/191349/comm /proc/191356/comm /proc/191357/comm /proc/191393/comm /proc/191428/comm /proc/191429/comm /proc/191442/comm /proc/191477/comm /proc/191669/comm /proc/191672/comm /proc/191673/comm /proc/191674/comm /proc/191675/comm /proc/191676/comm /proc/191677/comm /proc/191678/comm /proc/191695/comm /proc/191696/comm /proc/191697/comm /proc/192/comm /proc/193/comm /proc/194/comm /proc/195/comm /proc/196/comm /proc/2/comm /proc/20/comm /proc/21/comm /proc/212/comm /proc/21542/comm /proc/21593/comm /proc/21594/comm /proc/216/comm /proc/21607/comm /proc/219/comm /proc/22/comm /proc/220/comm /proc/225/comm /proc/24/comm /proc/247/comm /proc/24840/comm /proc/25/comm /proc/25103/comm /proc/25120/comm /proc/25145/comm /proc/25157/comm /proc/26/comm /proc/265/comm /proc/27/comm /proc/28/comm /proc/283/comm /proc/285/comm /proc/286/comm /proc/288/comm /proc/289/comm /proc/29522/comm /proc/29793/comm /proc/29811/comm /proc/29836/comm /proc/29848/comm /proc/3/comm /proc/30/comm /proc/309/comm /proc/31/comm /proc/310/comm /proc/32/comm /proc/33/comm /proc/34/comm /proc/340/comm /proc/34309/comm /proc/34581/comm /proc/34598/comm /proc/34621/comm /proc/34634/comm /proc/347/comm /proc/349/comm /proc/356/comm /proc/36/comm /proc/364/comm /proc/368/comm /proc/37/comm /proc/372/comm /proc/377/comm /proc/379/comm /proc/37902/comm /proc/37904/comm /proc/38/comm /proc/39/comm /proc/393/comm /proc/397/comm /proc/4/comm /proc/40/comm /proc/40269/comm /proc/40294/comm /proc/40310/comm /proc/40326/comm /proc/40351/comm /proc/40369/comm /proc/40383/comm /proc/40411/comm /proc/40422/comm /proc/40456/comm /proc/40535/comm /proc/40546/comm /proc/40549/comm /proc/40571/comm /proc/40676/comm /proc/40745/comm /proc/40839/comm /proc/40863/comm /proc/40892/comm /proc/41640/comm /proc/41666/comm /proc/41688/comm /proc/41707/comm /proc/41937/comm /proc/42/comm /proc/42144/comm /proc/42228/comm /proc/42519/comm /proc/43/comm /proc/43001/comm /proc/43024/comm /proc/43071/comm /proc/43376/comm /proc/43404/comm /proc/43415/comm /proc/43439/comm /proc/43469/comm /proc/43494/comm /proc/43870/comm /proc/43894/comm /proc/44/comm /proc/44379/comm /proc/44430/comm /proc/44454/comm /proc/44468/comm /proc/44492/comm /proc/44513/comm /proc/44537/comm /proc/44613/comm /proc/44659/comm /proc/44702/comm /proc/45/comm /proc/453/comm /proc/46/comm /proc/46932/comm /proc/46956/comm /proc/46980/comm /proc/47003/comm /proc/47270/comm /proc/47288/comm /proc/47376/comm /proc/47397/comm /proc/47752/comm /proc/47778/comm /proc/47851/comm /proc/47874/comm /proc/47983/comm /proc/48/comm /proc/48152/comm /proc/48174/comm /proc/48227/comm /proc/48339/comm /proc/48476/comm /proc/48500/comm /proc/48878/comm /proc/48901/comm /proc/48932/comm /proc/49/comm /proc/49016/comm /proc/49239/comm /proc/49365/comm /proc/49459/comm /proc/49480/comm /proc/5/comm /proc/50/comm /proc/50999/comm /proc/51/comm /proc/51000/comm /proc/51270/comm /proc/51295/comm /proc/51470/comm /proc/51493/comm /proc/51522/comm /proc/51682/comm /proc/51848/comm /proc/519/comm /proc/51951/comm /proc/51995/comm /proc/52/comm /proc/54/comm /proc/55/comm /proc/55821/comm /proc/55844/comm /proc/56/comm /proc/56515/comm /proc/56542/comm /proc/56558/comm /proc/56587/comm /proc/56598/comm /proc/56632/comm /proc/56760/comm /proc/56783/comm /proc/56834/comm /proc/56867/comm /proc/56909/comm /proc/57/comm /proc/57020/comm /proc/57866/comm /proc/58/comm /proc/6/comm /proc/60/comm /proc/60862/comm /proc/61/comm /proc/61085/comm /proc/611/comm /proc/61112/comm /proc/61175/comm /proc/61199/comm /proc/61213/comm /proc/61238/comm /proc/61255/comm /proc/61283/comm /proc/614/comm /proc/61508/comm /proc/617/comm /proc/61715/comm /proc/62/comm /proc/620/comm /proc/62068/comm /proc/62094/comm /proc/623/comm /proc/62335/comm /proc/62336/comm /proc/62345/comm /proc/62346/comm /proc/62472/comm /proc/62663/comm /proc/62686/comm /proc/62782/comm /proc/62805/comm /proc/62962/comm /proc/62997/comm /proc/63/comm /proc/63025/comm /proc/63058/comm /proc/63069/comm /proc/63094/comm /proc/63636/comm /proc/63664/comm /proc/63692/comm /proc/63779/comm /proc/63811/comm /proc/64/comm /proc/640/comm /proc/64310/comm /proc/64325/comm /proc/64326/comm /proc/64327/comm /proc/64328/comm /proc/64329/comm /proc/645/comm /proc/64502/comm /proc/64525/comm /proc/64637/comm /proc/64661/comm /proc/64704/comm /proc/64943/comm /proc/65093/comm /proc/65216/comm /proc/65256/comm /proc/65402/comm /proc/65440/comm /proc/65527/comm /proc/65713/comm /proc/65751/comm /proc/65964/comm /proc/66/comm /proc/66002/comm /proc/66054/comm /proc/66135/comm /proc/66183/comm /proc/66393/comm /proc/66594/comm /proc/66671/comm /proc/66749/comm /proc/66772/comm /proc/66779/comm /proc/66810/comm /proc/66940/comm /proc/66955/comm /proc/66978/comm /proc/66997/comm /proc/67/comm /proc/67751/comm /proc/67768/comm /proc/67774/comm /proc/67821/comm /proc/67822/comm /proc/67832/comm /proc/67898/comm /proc/68/comm /proc/69/comm /proc/69488/comm /proc/69511/comm /proc/70/comm /proc/702/comm /proc/705/comm /proc/706/comm /proc/719/comm /proc/72/comm /proc/72794/comm /proc/72811/comm /proc/72812/comm /proc/72813/comm /proc/72814/comm /proc/72816/comm /proc/72817/comm /proc/72821/comm /proc/72822/comm /proc/72824/comm /proc/72825/comm /proc/72826/comm /proc/72827/comm /proc/72828/comm /proc/72829/comm /proc/73/comm /proc/74/comm /proc/75/comm /proc/76/comm /proc/78/comm /proc/78570/comm /proc/78803/comm /proc/78828/comm /proc/78924/comm /proc/78940/comm /proc/78946/comm /proc/79/comm /proc/79004/comm /proc/79005/comm /proc/79015/comm /proc/79159/comm /proc/8/comm /proc/80/comm /proc/80221/comm /proc/80245/comm /proc/81/comm /proc/81689/comm /proc/82/comm /proc/84/comm /proc/85/comm /proc/85640/comm /proc/85652/comm /proc/86/comm /proc/86313/comm /proc/86334/comm /proc/864/comm /proc/87/comm /proc/87302/comm /proc/88/comm /proc/89950/comm /proc/89951/comm /proc/89952/comm /proc/90/comm /proc/91/comm /proc/91450/comm /proc/92/comm /proc/9216/comm /proc/9233/comm /proc/9249/comm /proc/92728/comm /proc/92753/comm /proc/92873/comm /proc/92903/comm /proc/92911/comm /proc/93/comm /proc/93002/comm /proc/93003/comm /proc/93013/comm /proc/93228/comm /proc/9332/comm /proc/94/comm /proc/96/comm /proc/96771/comm /proc/96794/comm /proc/96838/comm /proc/96864/comm /proc/97/comm /proc/97143/comm /proc/97214/comm /proc/97934/comm /proc/98/comm /proc/98997/comm /proc/99/comm /proc/9950/comm /proc/self/comm /proc/thread-self/comm
+ '[' -n '' ']'
+ rm -f /var/run/libvirtd.pid
+ [[ -c /dev/kvm ]]
+ chmod 660 /dev/kvm
+ chown root:kvm /dev/kvm
+ CGROUPS=
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/blkio ']'
+ grep -w blkio /sys/fs/cgroup/cgroup.controllers
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/cpu ']'
+ grep -w cpu /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=cpu,
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/devices ']'
+ grep -w devices /sys/fs/cgroup/cgroup.controllers
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/freezer ']'
+ grep -w freezer /sys/fs/cgroup/cgroup.controllers
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/hugetlb ']'
+ grep -w hugetlb /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=hugetlb,
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/memory ']'
+ grep -w memory /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=memory,
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/net_cls ']'
+ grep -w net_cls /sys/fs/cgroup/cgroup.controllers
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/perf_event ']'
+ grep -w perf_event /sys/fs/cgroup/cgroup.controllers
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/rdma ']'
+ grep -w rdma /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=rdma,
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/misc ']'
+ grep -w misc /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=misc,
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/pids ']'
+ grep -w pids /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=pids,
+ cgcreate -g cpu,hugetlb,memory,rdma,misc,pids:/osh-libvirt
++ cat /proc/meminfo
++ grep HugePages_Total
++ tr -cd '[:digit:]'
+ hp_count=0
+ '[' 00 -gt 0 ']'
+ '[' -n 457eb676-33da-42ec-9a8c-9293d545c337 ']'
+ cgexec -g cpu,hugetlb,memory,rdma,misc,pids:/osh-libvirt systemd-run --scope --slice=system libvirtd --listen
++ mktemp --suffix .xml
+ tmpsecret=/tmp/tmp.8C1DgfN0Ef.xml
+ '[' -n '' ']'
+ trap cleanup EXIT
+ TIMEOUT=60
+ [[ ! -f /var/run/libvirtd.pid ]]
+ [[ 60 -gt 0 ]]
+ let TIMEOUT-=1
+ sleep 1
Running as unit: run-r6c2c00b3d9604485851a4cedb8ca092d.scope; invocation ID: 925f2cec1c9b4f30990b4fd3dde8632f
+ [[ ! -f /var/run/libvirtd.pid ]]
+ TIMEOUT=10
+ [[ ! -e /var/run/libvirt/libvirt-sock ]]
+ '[' -z '' ']'
+ '[' -n cinder ']'
++ awk '/key/{print $3}' /etc/ceph/ceph.client.cinder.keyring
+ CEPH_CINDER_KEYRING=AQDZLA9qr3/VCxAAgG6ggfYVNu+eUe0aKLiTIA==
+ '[' -n cinder ']'
+ create_virsh_libvirt_secret cinder 457eb676-33da-42ec-9a8c-9293d545c337 AQDZLA9qr3/VCxAAgG6ggfYVNu+eUe0aKLiTIA==
+ sec_user=cinder
+ sec_uuid=457eb676-33da-42ec-9a8c-9293d545c337
+ sec_ceph_keyring=AQDZLA9qr3/VCxAAgG6ggfYVNu+eUe0aKLiTIA==
+ cat
+ virsh secret-define --file /tmp/tmp.8C1DgfN0Ef.xml
Secret 457eb676-33da-42ec-9a8c-9293d545c337 created

+ virsh secret-set-value --secret 457eb676-33da-42ec-9a8c-9293d545c337 --base64 AQDZLA9qr3/VCxAAgG6ggfYVNu+eUe0aKLiTIA==
error: Passing secret value as command-line argument is insecure!
Secret value set

+ '[' -n '' ']'
+ '[' -n '' ']'
+ cleanup
+ rm -f /tmp/tmp.8C1DgfN0Ef.xml
+ '[' -n '' ']'
++ cat /var/run/libvirtd.pid
+ LIBVIRTD_PID=191717
+ kill 191717
+ tail --pid=191717 -f /dev/null
+ cgexec -g cpu,hugetlb,memory,rdma,misc,pids:/osh-libvirt systemd-run --scope --slice=system libvirtd --listen
Running as unit: run-r7cdbf196cc2740fd8ba966a321c10b86.scope; invocation ID: 7ab3ea3a48594f069c2ecb4bac750d2c