+ wait_for_file /etc/pki/CA/cacert.pem
+ local file=/etc/pki/CA/cacert.pem
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ sleep 1
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ sleep 1
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ sleep 1
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ sleep 1
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ sleep 1
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ wait_for_file /etc/pki/qemu/ca-cert.pem
+ local file=/etc/pki/qemu/ca-cert.pem
+ '[' '!' -f /etc/pki/qemu/ca-cert.pem ']'
+ wait_for_file /etc/pki/libvirt/servercert.pem
+ local file=/etc/pki/libvirt/servercert.pem
+ '[' '!' -f /etc/pki/libvirt/servercert.pem ']'
+ wait_for_file /etc/pki/libvirt/clientcert.pem
+ local file=/etc/pki/libvirt/clientcert.pem
+ '[' '!' -f /etc/pki/libvirt/clientcert.pem ']'
+ wait_for_file /etc/pki/qemu/server-cert.pem
+ local file=/etc/pki/qemu/server-cert.pem
+ '[' '!' -f /etc/pki/qemu/server-cert.pem ']'
+ wait_for_file /etc/pki/qemu/client-cert.pem
+ local file=/etc/pki/qemu/client-cert.pem
+ '[' '!' -f /etc/pki/qemu/client-cert.pem ']'
+ wait_for_file /etc/pki/libvirt/private/serverkey.pem
+ local file=/etc/pki/libvirt/private/serverkey.pem
+ '[' '!' -f /etc/pki/libvirt/private/serverkey.pem ']'
+ wait_for_file /etc/pki/libvirt/private/clientkey.pem
+ local file=/etc/pki/libvirt/private/clientkey.pem
+ '[' '!' -f /etc/pki/libvirt/private/clientkey.pem ']'
+ wait_for_file /etc/pki/qemu/server-key.pem
+ local file=/etc/pki/qemu/server-key.pem
+ '[' '!' -f /etc/pki/qemu/server-key.pem ']'
+ wait_for_file /etc/pki/qemu/client-key.pem
+ local file=/etc/pki/qemu/client-key.pem
+ '[' '!' -f /etc/pki/qemu/client-key.pem ']'
+ wait_for_file /etc/pki/libvirt-vnc/ca-cert.pem
+ local file=/etc/pki/libvirt-vnc/ca-cert.pem
+ '[' '!' -f /etc/pki/libvirt-vnc/ca-cert.pem ']'
+ wait_for_file /etc/pki/libvirt-vnc/server-cert.pem
+ local file=/etc/pki/libvirt-vnc/server-cert.pem
+ '[' '!' -f /etc/pki/libvirt-vnc/server-cert.pem ']'
+ wait_for_file /etc/pki/libvirt-vnc/server-key.pem
+ local file=/etc/pki/libvirt-vnc/server-key.pem
+ '[' '!' -f /etc/pki/libvirt-vnc/server-key.pem ']'
++ grep -w libvirtd
++ cat /proc/1/comm /proc/10/comm /proc/100/comm /proc/10183/comm /proc/102/comm /proc/10207/comm /proc/102434/comm /proc/102457/comm /proc/102924/comm /proc/102937/comm /proc/102938/comm /proc/103/comm /proc/104/comm /proc/104214/comm /proc/104241/comm /proc/104375/comm /proc/104399/comm /proc/104465/comm /proc/104539/comm /proc/104619/comm /proc/104810/comm /proc/104812/comm /proc/104818/comm /proc/105/comm /proc/105932/comm /proc/106/comm /proc/106296/comm /proc/106320/comm /proc/106459/comm /proc/106476/comm /proc/106482/comm /proc/106594/comm /proc/106595/comm /proc/106605/comm /proc/106781/comm /proc/10690/comm /proc/10691/comm /proc/108/comm /proc/108036/comm /proc/108076/comm /proc/108178/comm /proc/108216/comm /proc/108693/comm /proc/109/comm /proc/11/comm /proc/110/comm /proc/111/comm /proc/112/comm /proc/112129/comm /proc/112980/comm /proc/113/comm /proc/113122/comm /proc/114/comm /proc/115/comm /proc/115687/comm /proc/115823/comm /proc/116/comm /proc/117/comm /proc/117839/comm /proc/117841/comm /proc/118231/comm /proc/118244/comm /proc/118245/comm /proc/119726/comm /proc/1198/comm /proc/12/comm /proc/121180/comm /proc/121203/comm /proc/121255/comm /proc/121287/comm /proc/12129/comm /proc/12160/comm /proc/121866/comm /proc/12195/comm /proc/122353/comm /proc/12240/comm /proc/12252/comm /proc/122559/comm /proc/123942/comm /proc/123964/comm /proc/124187/comm /proc/124440/comm /proc/12491/comm /proc/12520/comm /proc/12578/comm /proc/12601/comm /proc/12621/comm /proc/127622/comm /proc/127784/comm /proc/127786/comm /proc/128897/comm /proc/13/comm /proc/1303/comm /proc/1304/comm /proc/1305/comm /proc/1306/comm /proc/130730/comm /proc/130731/comm /proc/137917/comm /proc/137918/comm /proc/137920/comm /proc/137921/comm /proc/138039/comm /proc/138714/comm /proc/138738/comm /proc/139152/comm /proc/139186/comm /proc/139205/comm /proc/139254/comm /proc/139255/comm /proc/139256/comm /proc/139257/comm /proc/139750/comm /proc/139773/comm /proc/1398/comm /proc/14/comm /proc/1402/comm /proc/140516/comm /proc/140597/comm /proc/140601/comm /proc/140864/comm /proc/140893/comm /proc/140939/comm /proc/140972/comm /proc/141184/comm /proc/141195/comm /proc/141226/comm /proc/141255/comm /proc/141305/comm /proc/141322/comm /proc/141450/comm /proc/141483/comm /proc/141574/comm /proc/141602/comm /proc/141734/comm /proc/141782/comm /proc/142014/comm /proc/142073/comm /proc/142644/comm /proc/142667/comm /proc/142933/comm /proc/142952/comm /proc/142958/comm /proc/143025/comm /proc/143026/comm /proc/143036/comm /proc/143157/comm /proc/144858/comm /proc/144915/comm /proc/145024/comm /proc/145096/comm /proc/145120/comm /proc/145165/comm /proc/145213/comm /proc/145248/comm /proc/145279/comm /proc/145301/comm /proc/145386/comm /proc/145423/comm /proc/145524/comm /proc/145561/comm /proc/145834/comm /proc/145856/comm /proc/145909/comm /proc/146166/comm /proc/146401/comm /proc/1469/comm /proc/1473/comm /proc/1482/comm /proc/15/comm /proc/16/comm /proc/164484/comm /proc/165136/comm /proc/165278/comm /proc/165279/comm /proc/165333/comm /proc/166/comm /proc/167/comm /proc/167679/comm /proc/168/comm /proc/169/comm /proc/169448/comm /proc/169459/comm /proc/169937/comm /proc/169974/comm /proc/169975/comm /proc/170/comm /proc/170050/comm /proc/170062/comm /proc/170063/comm /proc/170709/comm /proc/170866/comm /proc/170875/comm /proc/170973/comm /proc/171/comm /proc/171127/comm /proc/171143/comm /proc/171777/comm /proc/171795/comm /proc/171896/comm /proc/171918/comm /proc/172/comm /proc/172102/comm /proc/172134/comm /proc/172151/comm /proc/172157/comm /proc/172207/comm /proc/172225/comm /proc/172226/comm /proc/172236/comm /proc/172387/comm /proc/173/comm /proc/173680/comm /proc/173704/comm /proc/173720/comm /proc/173771/comm /proc/173773/comm /proc/173808/comm /proc/173833/comm /proc/173947/comm /proc/174/comm /proc/174044/comm /proc/174089/comm /proc/174346/comm /proc/174347/comm /proc/174569/comm /proc/174581/comm /proc/176/comm /proc/177611/comm /proc/177617/comm /proc/177624/comm /proc/177636/comm /proc/178/comm /proc/178232/comm /proc/179751/comm /proc/179765/comm /proc/18/comm /proc/180/comm /proc/180356/comm /proc/180442/comm /proc/180994/comm /proc/181/comm /proc/181035/comm /proc/181109/comm /proc/181134/comm /proc/181220/comm /proc/181231/comm /proc/181437/comm /proc/181440/comm /proc/181445/comm /proc/183/comm /proc/183171/comm /proc/183206/comm /proc/183391/comm /proc/183392/comm /proc/183393/comm /proc/183581/comm /proc/183667/comm /proc/183697/comm /proc/183698/comm /proc/183712/comm /proc/183727/comm /proc/183728/comm /proc/184/comm /proc/185/comm /proc/185013/comm /proc/185035/comm /proc/185036/comm /proc/185263/comm /proc/185356/comm /proc/185622/comm /proc/185638/comm /proc/185688/comm /proc/185721/comm /proc/185988/comm /proc/185991/comm /proc/185996/comm /proc/185997/comm /proc/185998/comm /proc/186/comm /proc/187/comm /proc/188/comm /proc/189/comm /proc/19/comm /proc/190/comm /proc/191/comm /proc/192/comm /proc/193/comm /proc/19388/comm /proc/194/comm /proc/19410/comm /proc/19432/comm /proc/19458/comm /proc/19476/comm /proc/195/comm /proc/197/comm /proc/2/comm /proc/20/comm /proc/201/comm /proc/21/comm /proc/21520/comm /proc/21526/comm /proc/21527/comm /proc/21547/comm /proc/217/comm /proc/22/comm /proc/220/comm /proc/221/comm /proc/22565/comm /proc/226/comm /proc/24/comm /proc/24315/comm /proc/24581/comm /proc/24600/comm /proc/24622/comm /proc/24636/comm /proc/248/comm /proc/25/comm /proc/26/comm /proc/27/comm /proc/28/comm /proc/286/comm /proc/29004/comm /proc/29284/comm /proc/29302/comm /proc/29327/comm /proc/29340/comm /proc/297/comm /proc/3/comm /proc/30/comm /proc/30144/comm /proc/302/comm /proc/303/comm /proc/304/comm /proc/31/comm /proc/32/comm /proc/323/comm /proc/324/comm /proc/328/comm /proc/33/comm /proc/33504/comm /proc/337/comm /proc/33785/comm /proc/33802/comm /proc/33826/comm /proc/33839/comm /proc/34/comm /proc/35411/comm /proc/35413/comm /proc/36/comm /proc/365/comm /proc/37/comm /proc/370/comm /proc/38/comm /proc/388/comm /proc/39/comm /proc/39438/comm /proc/39469/comm /proc/39485/comm /proc/39492/comm /proc/39521/comm /proc/39530/comm /proc/39584/comm /proc/39593/comm /proc/39596/comm /proc/39601/comm /proc/39684/comm /proc/39715/comm /proc/39719/comm /proc/39741/comm /proc/398/comm /proc/39852/comm /proc/399/comm /proc/39911/comm /proc/4/comm /proc/40/comm /proc/400/comm /proc/40077/comm /proc/40103/comm /proc/40129/comm /proc/406/comm /proc/40779/comm /proc/40796/comm /proc/40828/comm /proc/40842/comm /proc/410/comm /proc/413/comm /proc/41532/comm /proc/41744/comm /proc/42/comm /proc/42277/comm /proc/42417/comm /proc/42439/comm /proc/42456/comm /proc/42479/comm /proc/42505/comm /proc/42529/comm /proc/42544/comm /proc/42568/comm /proc/42588/comm /proc/42616/comm /proc/42659/comm /proc/42732/comm /proc/42856/comm /proc/42879/comm /proc/43/comm /proc/43079/comm /proc/43126/comm /proc/43172/comm /proc/43256/comm /proc/43303/comm /proc/44/comm /proc/45/comm /proc/45256/comm /proc/45287/comm /proc/45320/comm /proc/45344/comm /proc/45575/comm /proc/45587/comm /proc/45625/comm /proc/45734/comm /proc/46/comm /proc/46078/comm /proc/46101/comm /proc/46181/comm /proc/46204/comm /proc/46251/comm /proc/46377/comm /proc/464/comm /proc/46543/comm /proc/46566/comm /proc/46813/comm /proc/46976/comm /proc/46999/comm /proc/47365/comm /proc/47391/comm /proc/47503/comm /proc/47565/comm /proc/47661/comm /proc/47690/comm /proc/47714/comm /proc/47805/comm /proc/48/comm /proc/48724/comm /proc/49/comm /proc/49568/comm /proc/49592/comm /proc/49750/comm /proc/49772/comm /proc/49857/comm /proc/49949/comm /proc/5/comm /proc/50/comm /proc/50195/comm /proc/50771/comm /proc/51/comm /proc/52/comm /proc/533/comm /proc/53945/comm /proc/53969/comm /proc/54/comm /proc/54582/comm /proc/54615/comm /proc/54623/comm /proc/54647/comm /proc/54722/comm /proc/54746/comm /proc/54850/comm /proc/54873/comm /proc/54926/comm /proc/54966/comm /proc/55/comm /proc/55001/comm /proc/55099/comm /proc/56/comm /proc/57/comm /proc/58/comm /proc/59015/comm /proc/59073/comm /proc/59133/comm /proc/59156/comm /proc/59194/comm /proc/59224/comm /proc/59237/comm /proc/59268/comm /proc/59523/comm /proc/6/comm /proc/60/comm /proc/60000/comm /proc/60028/comm /proc/60048/comm /proc/60060/comm /proc/60073/comm /proc/60281/comm /proc/60290/comm /proc/60291/comm /proc/60294/comm /proc/60303/comm /proc/60304/comm /proc/60333/comm /proc/60557/comm /proc/60584/comm /proc/60678/comm /proc/60718/comm /proc/60910/comm /proc/60938/comm /proc/60972/comm /proc/60996/comm /proc/61/comm /proc/61031/comm /proc/61061/comm /proc/61481/comm /proc/61504/comm /proc/61556/comm /proc/61758/comm /proc/61953/comm /proc/61976/comm /proc/62/comm /proc/62091/comm /proc/62111/comm /proc/62112/comm /proc/62113/comm /proc/62116/comm /proc/62118/comm /proc/62351/comm /proc/62374/comm /proc/62395/comm /proc/62420/comm /proc/626/comm /proc/62696/comm /proc/62741/comm /proc/629/comm /proc/63/comm /proc/63140/comm /proc/63164/comm /proc/632/comm /proc/63223/comm /proc/63249/comm /proc/63298/comm /proc/63313/comm /proc/63362/comm /proc/63428/comm /proc/63467/comm /proc/635/comm /proc/63513/comm /proc/63640/comm /proc/63678/comm /proc/63833/comm /proc/639/comm /proc/63955/comm /proc/64/comm /proc/64142/comm /proc/64238/comm /proc/64332/comm /proc/64419/comm /proc/64458/comm /proc/64673/comm /proc/64697/comm /proc/64737/comm /proc/64755/comm /proc/655/comm /proc/65565/comm /proc/65582/comm /proc/65588/comm /proc/65646/comm /proc/65647/comm /proc/65657/comm /proc/65808/comm /proc/66/comm /proc/662/comm /proc/67/comm /proc/67287/comm /proc/67311/comm /proc/67970/comm /proc/67972/comm /proc/68/comm /proc/69/comm /proc/70/comm /proc/70681/comm /proc/70700/comm /proc/70703/comm /proc/70704/comm /proc/70705/comm /proc/70706/comm /proc/70707/comm /proc/70709/comm /proc/70711/comm /proc/70714/comm /proc/70717/comm /proc/70718/comm /proc/70719/comm /proc/70720/comm /proc/70721/comm /proc/70722/comm /proc/712/comm /proc/715/comm /proc/716/comm /proc/72/comm /proc/729/comm /proc/73/comm /proc/74/comm /proc/75/comm /proc/76/comm /proc/76383/comm /proc/76408/comm /proc/76522/comm /proc/76538/comm /proc/76544/comm /proc/76624/comm /proc/76625/comm /proc/76635/comm /proc/76767/comm /proc/77906/comm /proc/77931/comm /proc/78/comm /proc/79/comm /proc/79610/comm /proc/79703/comm /proc/8/comm /proc/80/comm /proc/81/comm /proc/82/comm /proc/83062/comm /proc/83082/comm /proc/83886/comm /proc/83910/comm /proc/84/comm /proc/84753/comm /proc/85/comm /proc/86/comm /proc/87/comm /proc/874/comm /proc/87615/comm /proc/88/comm /proc/88512/comm /proc/88744/comm /proc/89942/comm /proc/89966/comm /proc/90/comm /proc/90134/comm /proc/90151/comm /proc/90212/comm /proc/90340/comm /proc/90341/comm /proc/90351/comm /proc/90532/comm /proc/9077/comm /proc/9094/comm /proc/91/comm /proc/9110/comm /proc/9193/comm /proc/92/comm /proc/93/comm /proc/94/comm /proc/94230/comm /proc/94254/comm /proc/94271/comm /proc/94300/comm /proc/94608/comm /proc/94702/comm /proc/95418/comm /proc/96/comm /proc/96371/comm /proc/96374/comm /proc/97/comm /proc/98/comm /proc/9810/comm /proc/98919/comm /proc/99/comm /proc/99131/comm /proc/self/comm /proc/thread-self/comm
+ '[' -n '' ']'
+ rm -f /var/run/libvirtd.pid
+ [[ -c /dev/kvm ]]
+ chmod 660 /dev/kvm
+ chown root:kvm /dev/kvm
+ CGROUPS=
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/blkio ']'
+ grep -w blkio /sys/fs/cgroup/cgroup.controllers
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/cpu ']'
+ grep -w cpu /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=cpu,
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/devices ']'
+ grep -w devices /sys/fs/cgroup/cgroup.controllers
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/freezer ']'
+ grep -w freezer /sys/fs/cgroup/cgroup.controllers
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/hugetlb ']'
+ grep -w hugetlb /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=hugetlb,
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/memory ']'
+ grep -w memory /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=memory,
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/net_cls ']'
+ grep -w net_cls /sys/fs/cgroup/cgroup.controllers
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/perf_event ']'
+ grep -w perf_event /sys/fs/cgroup/cgroup.controllers
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/rdma ']'
+ grep -w rdma /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=rdma,
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/misc ']'
+ grep -w misc /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=misc,
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/pids ']'
+ grep -w pids /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=pids,
+ cgcreate -g cpu,hugetlb,memory,rdma,misc,pids:/osh-libvirt
++ cat /proc/meminfo
++ tr -cd '[:digit:]'
++ grep HugePages_Total
+ hp_count=0
+ '[' 00 -gt 0 ']'
+ '[' -n 457eb676-33da-42ec-9a8c-9293d545c337 ']'
+ cgexec -g cpu,hugetlb,memory,rdma,misc,pids:/osh-libvirt systemd-run --scope --slice=system libvirtd --listen
++ mktemp --suffix .xml
+ tmpsecret=/tmp/tmp.8APSLav7G8.xml
+ '[' -n '' ']'
+ trap cleanup EXIT
+ TIMEOUT=60
+ [[ ! -f /var/run/libvirtd.pid ]]
+ [[ 60 -gt 0 ]]
+ let TIMEOUT-=1
+ sleep 1
Running as unit: run-r9826aa4a8a714603883a159191a340bd.scope; invocation ID: 19825e21f486424e942289fcabb99a29
+ [[ ! -f /var/run/libvirtd.pid ]]
+ TIMEOUT=10
+ [[ ! -e /var/run/libvirt/libvirt-sock ]]
+ '[' -z '' ']'
+ '[' -n cinder ']'
++ awk '/key/{print $3}' /etc/ceph/ceph.client.cinder.keyring
+ CEPH_CINDER_KEYRING=AQBNU6ZpBqVtFRAAMVNaPZbY/OQUv4EPm4HZBw==
+ '[' -n cinder ']'
+ create_virsh_libvirt_secret cinder 457eb676-33da-42ec-9a8c-9293d545c337 AQBNU6ZpBqVtFRAAMVNaPZbY/OQUv4EPm4HZBw==
+ sec_user=cinder
+ sec_uuid=457eb676-33da-42ec-9a8c-9293d545c337
+ sec_ceph_keyring=AQBNU6ZpBqVtFRAAMVNaPZbY/OQUv4EPm4HZBw==
+ cat
+ virsh secret-define --file /tmp/tmp.8APSLav7G8.xml
Secret 457eb676-33da-42ec-9a8c-9293d545c337 created

+ virsh secret-set-value --secret 457eb676-33da-42ec-9a8c-9293d545c337 --base64 AQBNU6ZpBqVtFRAAMVNaPZbY/OQUv4EPm4HZBw==
error: Passing secret value as command-line argument is insecure!
Secret value set

+ '[' -n '' ']'
+ '[' -n '' ']'
+ cleanup
+ rm -f /tmp/tmp.8APSLav7G8.xml
+ '[' -n '' ']'
++ cat /var/run/libvirtd.pid
+ LIBVIRTD_PID=186023
+ kill 186023
+ tail --pid=186023 -f /dev/null
+ cgexec -g cpu,hugetlb,memory,rdma,misc,pids:/osh-libvirt systemd-run --scope --slice=system libvirtd --listen
Running as unit: run-rf17b722873994bd58675eecdd245d414.scope; invocation ID: 24936e74d711429ea7557705ec372628