+ wait_for_file /etc/pki/CA/cacert.pem
+ local file=/etc/pki/CA/cacert.pem
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ sleep 1
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ sleep 1
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ sleep 1
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ sleep 1
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ sleep 1
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ wait_for_file /etc/pki/qemu/ca-cert.pem
+ local file=/etc/pki/qemu/ca-cert.pem
+ '[' '!' -f /etc/pki/qemu/ca-cert.pem ']'
+ wait_for_file /etc/pki/libvirt/servercert.pem
+ local file=/etc/pki/libvirt/servercert.pem
+ '[' '!' -f /etc/pki/libvirt/servercert.pem ']'
+ wait_for_file /etc/pki/libvirt/clientcert.pem
+ local file=/etc/pki/libvirt/clientcert.pem
+ '[' '!' -f /etc/pki/libvirt/clientcert.pem ']'
+ wait_for_file /etc/pki/qemu/server-cert.pem
+ local file=/etc/pki/qemu/server-cert.pem
+ '[' '!' -f /etc/pki/qemu/server-cert.pem ']'
+ wait_for_file /etc/pki/qemu/client-cert.pem
+ local file=/etc/pki/qemu/client-cert.pem
+ '[' '!' -f /etc/pki/qemu/client-cert.pem ']'
+ wait_for_file /etc/pki/libvirt/private/serverkey.pem
+ local file=/etc/pki/libvirt/private/serverkey.pem
+ '[' '!' -f /etc/pki/libvirt/private/serverkey.pem ']'
+ wait_for_file /etc/pki/libvirt/private/clientkey.pem
+ local file=/etc/pki/libvirt/private/clientkey.pem
+ '[' '!' -f /etc/pki/libvirt/private/clientkey.pem ']'
+ wait_for_file /etc/pki/qemu/server-key.pem
+ local file=/etc/pki/qemu/server-key.pem
+ '[' '!' -f /etc/pki/qemu/server-key.pem ']'
+ wait_for_file /etc/pki/qemu/client-key.pem
+ local file=/etc/pki/qemu/client-key.pem
+ '[' '!' -f /etc/pki/qemu/client-key.pem ']'
+ wait_for_file /etc/pki/libvirt-vnc/ca-cert.pem
+ local file=/etc/pki/libvirt-vnc/ca-cert.pem
+ '[' '!' -f /etc/pki/libvirt-vnc/ca-cert.pem ']'
+ wait_for_file /etc/pki/libvirt-vnc/server-cert.pem
+ local file=/etc/pki/libvirt-vnc/server-cert.pem
+ '[' '!' -f /etc/pki/libvirt-vnc/server-cert.pem ']'
+ wait_for_file /etc/pki/libvirt-vnc/server-key.pem
+ local file=/etc/pki/libvirt-vnc/server-key.pem
+ '[' '!' -f /etc/pki/libvirt-vnc/server-key.pem ']'
++ grep -w libvirtd
++ cat /proc/1/comm /proc/10/comm /proc/100/comm /proc/100213/comm /proc/100434/comm /proc/100465/comm /proc/100569/comm /proc/100585/comm /proc/100591/comm /proc/100650/comm /proc/100710/comm /proc/100711/comm /proc/100911/comm /proc/101749/comm /proc/101774/comm /proc/101788/comm /proc/101810/comm /proc/102/comm /proc/102195/comm /proc/102207/comm /proc/103/comm /proc/103343/comm /proc/10337/comm /proc/104/comm /proc/104625/comm /proc/105/comm /proc/105519/comm /proc/106/comm /proc/106378/comm /proc/106506/comm /proc/107392/comm /proc/108/comm /proc/10842/comm /proc/10843/comm /proc/109/comm /proc/109015/comm /proc/109016/comm /proc/109025/comm /proc/109426/comm /proc/109463/comm /proc/109464/comm /proc/109920/comm /proc/11/comm /proc/110/comm /proc/1102/comm /proc/111/comm /proc/111867/comm /proc/111890/comm /proc/111905/comm /proc/111931/comm /proc/112/comm /proc/112272/comm /proc/112455/comm /proc/112765/comm /proc/112896/comm /proc/113/comm /proc/113468/comm /proc/113470/comm /proc/113865/comm /proc/114/comm /proc/114016/comm /proc/114040/comm /proc/114389/comm /proc/115/comm /proc/115889/comm /proc/116/comm /proc/116137/comm /proc/117/comm /proc/117034/comm /proc/118067/comm /proc/118115/comm /proc/118116/comm /proc/12/comm /proc/12223/comm /proc/12254/comm /proc/12298/comm /proc/12337/comm /proc/12351/comm /proc/12588/comm /proc/12619/comm /proc/12674/comm /proc/12698/comm /proc/12717/comm /proc/13/comm /proc/131442/comm /proc/131443/comm /proc/138206/comm /proc/138207/comm /proc/138210/comm /proc/138214/comm /proc/138379/comm /proc/138388/comm /proc/138951/comm /proc/138974/comm /proc/139118/comm /proc/139259/comm /proc/139284/comm /proc/139301/comm /proc/139336/comm /proc/139349/comm /proc/139379/comm /proc/139380/comm /proc/139381/comm /proc/139382/comm /proc/14/comm /proc/140424/comm /proc/140448/comm /proc/140831/comm /proc/140857/comm /proc/140951/comm /proc/141445/comm /proc/141510/comm /proc/141603/comm /proc/141626/comm /proc/141685/comm /proc/141686/comm /proc/141708/comm /proc/141725/comm /proc/141734/comm /proc/141799/comm /proc/141850/comm /proc/141851/comm /proc/141983/comm /proc/143077/comm /proc/143140/comm /proc/143263/comm /proc/1433/comm /proc/143362/comm /proc/143386/comm /proc/143480/comm /proc/143509/comm /proc/143546/comm /proc/143580/comm /proc/143614/comm /proc/143616/comm /proc/143648/comm /proc/143664/comm /proc/143697/comm /proc/144033/comm /proc/144088/comm /proc/144111/comm /proc/144567/comm /proc/147771/comm /proc/147833/comm /proc/148427/comm /proc/148485/comm /proc/148487/comm /proc/149347/comm /proc/149357/comm /proc/149362/comm /proc/15/comm /proc/151334/comm /proc/151386/comm /proc/151396/comm /proc/151816/comm /proc/151860/comm /proc/151861/comm /proc/151937/comm /proc/151950/comm /proc/151951/comm /proc/152435/comm /proc/152491/comm /proc/152504/comm /proc/152632/comm /proc/152643/comm /proc/152664/comm /proc/152675/comm /proc/152768/comm /proc/152769/comm /proc/152774/comm /proc/152775/comm /proc/153117/comm /proc/153333/comm /proc/153484/comm /proc/153509/comm /proc/153637/comm /proc/153654/comm /proc/153660/comm /proc/153727/comm /proc/153778/comm /proc/153779/comm /proc/153902/comm /proc/154912/comm /proc/154941/comm /proc/154967/comm /proc/155010/comm /proc/155031/comm /proc/155048/comm /proc/155081/comm /proc/155097/comm /proc/1551/comm /proc/155114/comm /proc/1552/comm /proc/155206/comm /proc/1553/comm /proc/1554/comm /proc/155497/comm /proc/155519/comm /proc/155555/comm /proc/155585/comm /proc/1558/comm /proc/155891/comm /proc/155904/comm /proc/156066/comm /proc/158213/comm /proc/158794/comm /proc/158795/comm /proc/158805/comm /proc/159657/comm /proc/16/comm /proc/162029/comm /proc/162030/comm /proc/162031/comm /proc/162168/comm /proc/162233/comm /proc/162252/comm /proc/162279/comm /proc/162280/comm /proc/162294/comm /proc/162306/comm /proc/162307/comm /proc/1625/comm /proc/162533/comm /proc/162534/comm /proc/162535/comm /proc/162894/comm /proc/1629/comm /proc/163206/comm /proc/163291/comm /proc/163617/comm /proc/1638/comm /proc/164039/comm /proc/164059/comm /proc/164236/comm /proc/164497/comm /proc/164498/comm /proc/164641/comm /proc/164743/comm /proc/164944/comm /proc/164972/comm /proc/164973/comm /proc/164974/comm /proc/164975/comm /proc/164976/comm /proc/164977/comm /proc/165008/comm /proc/165039/comm /proc/165041/comm /proc/165048/comm /proc/165049/comm /proc/165050/comm /proc/165051/comm /proc/165052/comm /proc/165053/comm /proc/165054/comm /proc/165055/comm /proc/165056/comm /proc/165057/comm /proc/165058/comm /proc/165059/comm /proc/165060/comm /proc/165061/comm /proc/165062/comm /proc/165063/comm /proc/165064/comm /proc/165065/comm /proc/165066/comm /proc/165067/comm /proc/165068/comm /proc/165069/comm /proc/165070/comm /proc/165071/comm /proc/165072/comm /proc/165073/comm /proc/165074/comm /proc/165075/comm /proc/165076/comm /proc/165077/comm /proc/165078/comm /proc/165410/comm /proc/165411/comm /proc/165427/comm /proc/165474/comm /proc/165500/comm /proc/165615/comm /proc/165639/comm /proc/165751/comm /proc/165769/comm /proc/165778/comm /proc/165834/comm /proc/165837/comm /proc/165840/comm /proc/165881/comm /proc/165882/comm /proc/165883/comm /proc/166/comm /proc/167/comm /proc/168/comm /proc/169/comm /proc/170/comm /proc/171/comm /proc/172/comm /proc/173/comm /proc/174/comm /proc/175/comm /proc/177/comm /proc/179/comm /proc/18/comm /proc/180/comm /proc/183/comm /proc/185/comm /proc/186/comm /proc/187/comm /proc/18767/comm /proc/18789/comm /proc/188/comm /proc/18808/comm /proc/18834/comm /proc/18854/comm /proc/189/comm /proc/19/comm /proc/190/comm /proc/191/comm /proc/192/comm /proc/19247/comm /proc/193/comm /proc/194/comm /proc/195/comm /proc/19720/comm /proc/2/comm /proc/20/comm /proc/201/comm /proc/21/comm /proc/217/comm /proc/21828/comm /proc/21873/comm /proc/21874/comm /proc/21889/comm /proc/22/comm /proc/220/comm /proc/221/comm /proc/226/comm /proc/24/comm /proc/248/comm /proc/25/comm /proc/25117/comm /proc/25387/comm /proc/25405/comm /proc/25429/comm /proc/25441/comm /proc/26/comm /proc/266/comm /proc/27/comm /proc/28/comm /proc/292/comm /proc/294/comm /proc/295/comm /proc/29611/comm /proc/297/comm /proc/29875/comm /proc/29893/comm /proc/29918/comm /proc/29931/comm /proc/3/comm /proc/30/comm /proc/31/comm /proc/316/comm /proc/317/comm /proc/32/comm /proc/321/comm /proc/322/comm /proc/323/comm /proc/324/comm /proc/325/comm /proc/326/comm /proc/327/comm /proc/328/comm /proc/33/comm /proc/34/comm /proc/34402/comm /proc/34679/comm /proc/34697/comm /proc/34721/comm /proc/34733/comm /proc/36/comm /proc/368/comm /proc/37/comm /proc/38/comm /proc/39/comm /proc/39277/comm /proc/39279/comm /proc/39387/comm /proc/39408/comm /proc/39453/comm /proc/39481/comm /proc/39497/comm /proc/399/comm /proc/4/comm /proc/40/comm /proc/404/comm /proc/41962/comm /proc/41984/comm /proc/42/comm /proc/42018/comm /proc/42026/comm /proc/42040/comm /proc/42042/comm /proc/42080/comm /proc/42124/comm /proc/42129/comm /proc/42132/comm /proc/42208/comm /proc/42222/comm /proc/42241/comm /proc/42259/comm /proc/42370/comm /proc/42429/comm /proc/42576/comm /proc/42600/comm /proc/42627/comm /proc/43/comm /proc/43313/comm /proc/43341/comm /proc/43360/comm /proc/43381/comm /proc/43612/comm /proc/43827/comm /proc/44/comm /proc/44269/comm /proc/44573/comm /proc/44708/comm /proc/44736/comm /proc/44775/comm /proc/45/comm /proc/45101/comm /proc/45124/comm /proc/45140/comm /proc/45170/comm /proc/45210/comm /proc/45223/comm /proc/45584/comm /proc/45607/comm /proc/45748/comm /proc/46/comm /proc/46049/comm /proc/46080/comm /proc/46082/comm /proc/461/comm /proc/46110/comm /proc/46124/comm /proc/46155/comm /proc/46268/comm /proc/46313/comm /proc/46363/comm /proc/47940/comm /proc/47974/comm /proc/48/comm /proc/48037/comm /proc/48060/comm /proc/48453/comm /proc/48466/comm /proc/48493/comm /proc/48606/comm /proc/48939/comm /proc/48962/comm /proc/49/comm /proc/49038/comm /proc/49064/comm /proc/49114/comm /proc/49232/comm /proc/49398/comm /proc/49423/comm /proc/49552/comm /proc/49764/comm /proc/49788/comm /proc/5/comm /proc/50/comm /proc/50050/comm /proc/50073/comm /proc/50232/comm /proc/50289/comm /proc/50385/comm /proc/50414/comm /proc/50499/comm /proc/50521/comm /proc/51/comm /proc/51511/comm /proc/52/comm /proc/52043/comm /proc/52087/comm /proc/52188/comm /proc/526/comm /proc/54/comm /proc/55/comm /proc/55645/comm /proc/55670/comm /proc/56/comm /proc/56208/comm /proc/56233/comm /proc/56278/comm /proc/56304/comm /proc/56321/comm /proc/56344/comm /proc/56464/comm /proc/56487/comm /proc/56527/comm /proc/56615/comm /proc/56653/comm /proc/56784/comm /proc/57/comm /proc/579/comm /proc/58/comm /proc/59120/comm /proc/59122/comm /proc/59143/comm /proc/59264/comm /proc/59336/comm /proc/59442/comm /proc/59467/comm /proc/59484/comm /proc/59508/comm /proc/59522/comm /proc/59554/comm /proc/59760/comm /proc/6/comm /proc/60/comm /proc/60231/comm /proc/60257/comm /proc/60343/comm /proc/60457/comm /proc/60517/comm /proc/60518/comm /proc/60522/comm /proc/60523/comm /proc/60656/comm /proc/60680/comm /proc/60753/comm /proc/60878/comm /proc/60902/comm /proc/61/comm /proc/61083/comm /proc/61115/comm /proc/61182/comm /proc/61206/comm /proc/61226/comm /proc/61258/comm /proc/61556/comm /proc/61604/comm /proc/61789/comm /proc/619/comm /proc/61952/comm /proc/61976/comm /proc/62/comm /proc/62180/comm /proc/62203/comm /proc/623/comm /proc/62344/comm /proc/62366/comm /proc/62367/comm /proc/62368/comm /proc/62369/comm /proc/62370/comm /proc/62418/comm /proc/625/comm /proc/62660/comm /proc/62741/comm /proc/62766/comm /proc/62788/comm /proc/63/comm /proc/631/comm /proc/632/comm /proc/63729/comm /proc/63753/comm /proc/63824/comm /proc/63826/comm /proc/63827/comm /proc/63884/comm /proc/63919/comm /proc/63953/comm /proc/63990/comm /proc/64/comm /proc/64101/comm /proc/64195/comm /proc/64505/comm /proc/64550/comm /proc/64605/comm /proc/64714/comm /proc/64761/comm /proc/64867/comm /proc/64890/comm /proc/649/comm /proc/64937/comm /proc/64969/comm /proc/65013/comm /proc/65076/comm /proc/65095/comm /proc/65390/comm /proc/654/comm /proc/65407/comm /proc/65413/comm /proc/65481/comm /proc/65556/comm /proc/65557/comm /proc/65589/comm /proc/66/comm /proc/66302/comm /proc/66325/comm /proc/67/comm /proc/68/comm /proc/68765/comm /proc/68780/comm /proc/68781/comm /proc/68782/comm /proc/68783/comm /proc/68784/comm /proc/68787/comm /proc/68788/comm /proc/68789/comm /proc/68790/comm /proc/68793/comm /proc/68794/comm /proc/68795/comm /proc/68796/comm /proc/68799/comm /proc/69/comm /proc/70/comm /proc/710/comm /proc/713/comm /proc/714/comm /proc/72/comm /proc/727/comm /proc/72752/comm /proc/72776/comm /proc/72931/comm /proc/72948/comm /proc/72954/comm /proc/73/comm /proc/73063/comm /proc/73114/comm /proc/73115/comm /proc/73175/comm /proc/73896/comm /proc/73920/comm /proc/74/comm /proc/74760/comm /proc/75/comm /proc/75278/comm /proc/75281/comm /proc/76/comm /proc/77612/comm /proc/77625/comm /proc/78/comm /proc/78191/comm /proc/78228/comm /proc/78786/comm /proc/79/comm /proc/8/comm /proc/80/comm /proc/81/comm /proc/82/comm /proc/82957/comm /proc/82983/comm /proc/83121/comm /proc/83138/comm /proc/83144/comm /proc/83244/comm /proc/83355/comm /proc/83356/comm /proc/83617/comm /proc/84/comm /proc/85/comm /proc/85489/comm /proc/86/comm /proc/86888/comm /proc/87/comm /proc/872/comm /proc/88/comm /proc/88528/comm /proc/88560/comm /proc/88583/comm /proc/88607/comm /proc/88794/comm /proc/88923/comm /proc/89734/comm /proc/90/comm /proc/91/comm /proc/91461/comm /proc/92/comm /proc/9236/comm /proc/9253/comm /proc/9269/comm /proc/93/comm /proc/93327/comm /proc/9351/comm /proc/93732/comm /proc/94/comm /proc/96/comm /proc/96322/comm /proc/96346/comm /proc/96623/comm /proc/96637/comm /proc/96638/comm /proc/97/comm /proc/98/comm /proc/98729/comm /proc/98753/comm /proc/98798/comm /proc/98822/comm /proc/99/comm /proc/99194/comm /proc/99291/comm /proc/99293/comm /proc/9967/comm /proc/self/comm /proc/thread-self/comm
+ '[' -n '' ']'
+ rm -f /var/run/libvirtd.pid
+ [[ -c /dev/kvm ]]
+ chmod 660 /dev/kvm
+ chown root:kvm /dev/kvm
+ CGROUPS=
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/blkio ']'
+ grep -w blkio /sys/fs/cgroup/cgroup.controllers
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/cpu ']'
+ grep -w cpu /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=cpu,
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/devices ']'
+ grep -w devices /sys/fs/cgroup/cgroup.controllers
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/freezer ']'
+ grep -w freezer /sys/fs/cgroup/cgroup.controllers
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/hugetlb ']'
+ grep -w hugetlb /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=hugetlb,
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/memory ']'
+ grep -w memory /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=memory,
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/net_cls ']'
+ grep -w net_cls /sys/fs/cgroup/cgroup.controllers
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/perf_event ']'
+ grep -w perf_event /sys/fs/cgroup/cgroup.controllers
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/rdma ']'
+ grep -w rdma /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=rdma,
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/misc ']'
+ grep -w misc /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=misc,
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/pids ']'
+ grep -w pids /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=pids,
+ cgcreate -g cpu,hugetlb,memory,rdma,misc,pids:/osh-libvirt
++ cat /proc/meminfo
++ grep HugePages_Total
++ tr -cd '[:digit:]'
+ hp_count=0
+ '[' 00 -gt 0 ']'
+ '[' -n 457eb676-33da-42ec-9a8c-9293d545c337 ']'
+ cgexec -g cpu,hugetlb,memory,rdma,misc,pids:/osh-libvirt systemd-run --scope --slice=system libvirtd --listen
++ mktemp --suffix .xml
+ tmpsecret=/tmp/tmp.b8UTC4VR4M.xml
+ '[' -n '' ']'
+ trap cleanup EXIT
+ TIMEOUT=60
+ [[ ! -f /var/run/libvirtd.pid ]]
+ [[ 60 -gt 0 ]]
+ let TIMEOUT-=1
+ sleep 1
Running scope as unit: run-r68c76956eb644576beda8b530475439c.scope
+ [[ ! -f /var/run/libvirtd.pid ]]
+ TIMEOUT=10
+ [[ ! -e /var/run/libvirt/libvirt-sock ]]
+ '[' -z '' ']'
+ '[' -n cinder ']'
++ awk '/key/{print $3}' /etc/ceph/ceph.client.cinder.keyring
+ CEPH_CINDER_KEYRING=AQAWVWlqzl2/DxAAy19HMtxjLijIiU50kRqPGQ==
+ '[' -n cinder ']'
+ create_virsh_libvirt_secret cinder 457eb676-33da-42ec-9a8c-9293d545c337 AQAWVWlqzl2/DxAAy19HMtxjLijIiU50kRqPGQ==
+ sec_user=cinder
+ sec_uuid=457eb676-33da-42ec-9a8c-9293d545c337
+ sec_ceph_keyring=AQAWVWlqzl2/DxAAy19HMtxjLijIiU50kRqPGQ==
+ cat
+ virsh secret-define --file /tmp/tmp.b8UTC4VR4M.xml
Secret 457eb676-33da-42ec-9a8c-9293d545c337 created

+ virsh secret-set-value --secret 457eb676-33da-42ec-9a8c-9293d545c337 --base64 AQAWVWlqzl2/DxAAy19HMtxjLijIiU50kRqPGQ==
error: Passing secret value as command-line argument is insecure!
Secret value set

+ '[' -n '' ']'
+ cleanup
+ rm -f /tmp/tmp.b8UTC4VR4M.xml
+ '[' -n '' ']'
++ cat /var/run/libvirtd.pid
+ LIBVIRTD_PID=165904
+ kill 165904
+ tail --pid=165904 -f /dev/null
+ cgexec -g cpu,hugetlb,memory,rdma,misc,pids:/osh-libvirt systemd-run --scope --slice=system libvirtd --listen
Running scope as unit: run-rec0cc7f2f7cb4599992358bbd77e2ce2.scope