+ wait_for_file /etc/pki/CA/cacert.pem
+ local file=/etc/pki/CA/cacert.pem
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ sleep 1
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ sleep 1
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ sleep 1
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ sleep 1
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ sleep 1
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ wait_for_file /etc/pki/qemu/ca-cert.pem
+ local file=/etc/pki/qemu/ca-cert.pem
+ '[' '!' -f /etc/pki/qemu/ca-cert.pem ']'
+ wait_for_file /etc/pki/libvirt/servercert.pem
+ local file=/etc/pki/libvirt/servercert.pem
+ '[' '!' -f /etc/pki/libvirt/servercert.pem ']'
+ wait_for_file /etc/pki/libvirt/clientcert.pem
+ local file=/etc/pki/libvirt/clientcert.pem
+ '[' '!' -f /etc/pki/libvirt/clientcert.pem ']'
+ wait_for_file /etc/pki/qemu/server-cert.pem
+ local file=/etc/pki/qemu/server-cert.pem
+ '[' '!' -f /etc/pki/qemu/server-cert.pem ']'
+ wait_for_file /etc/pki/qemu/client-cert.pem
+ local file=/etc/pki/qemu/client-cert.pem
+ '[' '!' -f /etc/pki/qemu/client-cert.pem ']'
+ wait_for_file /etc/pki/libvirt/private/serverkey.pem
+ local file=/etc/pki/libvirt/private/serverkey.pem
+ '[' '!' -f /etc/pki/libvirt/private/serverkey.pem ']'
+ wait_for_file /etc/pki/libvirt/private/clientkey.pem
+ local file=/etc/pki/libvirt/private/clientkey.pem
+ '[' '!' -f /etc/pki/libvirt/private/clientkey.pem ']'
+ wait_for_file /etc/pki/qemu/server-key.pem
+ local file=/etc/pki/qemu/server-key.pem
+ '[' '!' -f /etc/pki/qemu/server-key.pem ']'
+ wait_for_file /etc/pki/qemu/client-key.pem
+ local file=/etc/pki/qemu/client-key.pem
+ '[' '!' -f /etc/pki/qemu/client-key.pem ']'
+ wait_for_file /etc/pki/libvirt-vnc/ca-cert.pem
+ local file=/etc/pki/libvirt-vnc/ca-cert.pem
+ '[' '!' -f /etc/pki/libvirt-vnc/ca-cert.pem ']'
+ wait_for_file /etc/pki/libvirt-vnc/server-cert.pem
+ local file=/etc/pki/libvirt-vnc/server-cert.pem
+ '[' '!' -f /etc/pki/libvirt-vnc/server-cert.pem ']'
+ wait_for_file /etc/pki/libvirt-vnc/server-key.pem
+ local file=/etc/pki/libvirt-vnc/server-key.pem
+ '[' '!' -f /etc/pki/libvirt-vnc/server-key.pem ']'
++ grep -w libvirtd
++ cat /proc/1/comm /proc/10/comm /proc/100/comm /proc/10162/comm /proc/102/comm /proc/102509/comm /proc/102510/comm /proc/102549/comm /proc/102949/comm /proc/102962/comm /proc/102963/comm /proc/103/comm /proc/103444/comm /proc/104/comm /proc/105/comm /proc/105835/comm /proc/105858/comm /proc/105873/comm /proc/105897/comm /proc/106/comm /proc/106224/comm /proc/106395/comm /proc/106547/comm /proc/10666/comm /proc/10667/comm /proc/106791/comm /proc/106845/comm /proc/107255/comm /proc/107524/comm /proc/108/comm /proc/108111/comm /proc/108134/comm /proc/109/comm /proc/109137/comm /proc/109980/comm /proc/11/comm /proc/110/comm /proc/11068/comm /proc/110999/comm /proc/111/comm /proc/111587/comm /proc/111721/comm /proc/111727/comm /proc/112/comm /proc/112302/comm /proc/112316/comm /proc/112317/comm /proc/113/comm /proc/113512/comm /proc/113513/comm /proc/114/comm /proc/115/comm /proc/116/comm /proc/117/comm /proc/1185/comm /proc/12/comm /proc/120382/comm /proc/120383/comm /proc/120385/comm /proc/120386/comm /proc/120388/comm /proc/120407/comm /proc/120787/comm /proc/120812/comm /proc/12112/comm /proc/121152/comm /proc/12143/comm /proc/121533/comm /proc/121561/comm /proc/12185/comm /proc/121949/comm /proc/122000/comm /proc/122024/comm /proc/122070/comm /proc/122071/comm /proc/122072/comm /proc/122073/comm /proc/12223/comm /proc/122296/comm /proc/122297/comm /proc/122341/comm /proc/122348/comm /proc/12235/comm /proc/122362/comm /proc/122655/comm /proc/122679/comm /proc/122703/comm /proc/122716/comm /proc/122923/comm /proc/122943/comm /proc/122992/comm /proc/123009/comm /proc/123070/comm /proc/123088/comm /proc/123190/comm /proc/123212/comm /proc/123348/comm /proc/123455/comm /proc/123479/comm /proc/123525/comm /proc/123725/comm /proc/123730/comm /proc/124581/comm /proc/124610/comm /proc/124697/comm /proc/124714/comm /proc/124721/comm /proc/12474/comm /proc/124779/comm /proc/124832/comm /proc/124833/comm /proc/12504/comm /proc/12562/comm /proc/12585/comm /proc/12604/comm /proc/126388/comm /proc/126432/comm /proc/126573/comm /proc/126712/comm /proc/126737/comm /proc/126857/comm /proc/126902/comm /proc/126919/comm /proc/126941/comm /proc/127010/comm /proc/127050/comm /proc/127057/comm /proc/127153/comm /proc/127193/comm /proc/127424/comm /proc/127447/comm /proc/127696/comm /proc/1290/comm /proc/1291/comm /proc/1292/comm /proc/1293/comm /proc/13/comm /proc/131896/comm /proc/131959/comm /proc/133016/comm /proc/133021/comm /proc/133026/comm /proc/133855/comm /proc/134242/comm /proc/135244/comm /proc/135247/comm /proc/135261/comm /proc/135704/comm /proc/135724/comm /proc/135725/comm /proc/135817/comm /proc/135830/comm /proc/135831/comm /proc/136345/comm /proc/136357/comm /proc/136474/comm /proc/136607/comm /proc/136620/comm /proc/136690/comm /proc/136691/comm /proc/136726/comm /proc/136727/comm /proc/137193/comm /proc/137300/comm /proc/137338/comm /proc/137426/comm /proc/137443/comm /proc/137450/comm /proc/137515/comm /proc/137568/comm /proc/137569/comm /proc/1378/comm /proc/1382/comm /proc/14/comm /proc/1448/comm /proc/1452/comm /proc/1461/comm /proc/15/comm /proc/151937/comm /proc/151971/comm /proc/151999/comm /proc/152020/comm /proc/152210/comm /proc/152234/comm /proc/152693/comm /proc/152706/comm /proc/154834/comm /proc/154850/comm /proc/154862/comm /proc/155509/comm /proc/155567/comm /proc/155568/comm /proc/156754/comm /proc/157472/comm /proc/158966/comm /proc/158991/comm /proc/159105/comm /proc/159535/comm /proc/159536/comm /proc/159537/comm /proc/159615/comm /proc/159679/comm /proc/159742/comm /proc/159774/comm /proc/159852/comm /proc/159863/comm /proc/16/comm /proc/160031/comm /proc/160065/comm /proc/160077/comm /proc/160078/comm /proc/160325/comm /proc/160326/comm /proc/160328/comm /proc/160329/comm /proc/160330/comm /proc/160331/comm /proc/160332/comm /proc/161103/comm /proc/161118/comm /proc/161319/comm /proc/161343/comm /proc/161456/comm /proc/161473/comm /proc/161480/comm /proc/161618/comm /proc/161669/comm /proc/161670/comm /proc/162880/comm /proc/162895/comm /proc/162896/comm /proc/162897/comm /proc/162898/comm /proc/162899/comm /proc/162900/comm /proc/162936/comm /proc/163432/comm /proc/163455/comm /proc/163477/comm /proc/163506/comm /proc/163566/comm /proc/163592/comm /proc/163606/comm /proc/163630/comm /proc/163656/comm /proc/163683/comm /proc/163711/comm /proc/163761/comm /proc/163779/comm /proc/163803/comm /proc/163832/comm /proc/163867/comm /proc/163901/comm /proc/163940/comm /proc/163942/comm /proc/163981/comm /proc/164067/comm /proc/164117/comm /proc/164145/comm /proc/164164/comm /proc/164200/comm /proc/164232/comm /proc/164256/comm /proc/164309/comm /proc/164326/comm /proc/164346/comm /proc/164382/comm /proc/164412/comm /proc/164427/comm /proc/164455/comm /proc/164480/comm /proc/164523/comm /proc/164566/comm /proc/164913/comm /proc/165085/comm /proc/165293/comm /proc/165297/comm /proc/165357/comm /proc/165654/comm /proc/165679/comm /proc/166/comm /proc/166112/comm /proc/166377/comm /proc/166425/comm /proc/166451/comm /proc/166486/comm /proc/166490/comm /proc/166610/comm /proc/166714/comm /proc/166781/comm /proc/166783/comm /proc/166784/comm /proc/166785/comm /proc/16681/comm /proc/167/comm /proc/168/comm /proc/16937/comm /proc/170/comm /proc/171/comm /proc/172/comm /proc/173/comm /proc/174/comm /proc/175/comm /proc/177/comm /proc/179/comm /proc/18/comm /proc/180/comm /proc/182/comm /proc/183/comm /proc/184/comm /proc/185/comm /proc/186/comm /proc/187/comm /proc/188/comm /proc/189/comm /proc/19/comm /proc/190/comm /proc/191/comm /proc/192/comm /proc/193/comm /proc/19376/comm /proc/194/comm /proc/19403/comm /proc/19436/comm /proc/19462/comm /proc/19479/comm /proc/2/comm /proc/20/comm /proc/200/comm /proc/2099/comm /proc/21/comm /proc/21519/comm /proc/21524/comm /proc/21526/comm /proc/21546/comm /proc/217/comm /proc/22/comm /proc/220/comm /proc/221/comm /proc/226/comm /proc/24/comm /proc/24316/comm /proc/24596/comm /proc/24613/comm /proc/24637/comm /proc/24650/comm /proc/248/comm /proc/25/comm /proc/25293/comm /proc/26/comm /proc/27/comm /proc/28/comm /proc/286/comm /proc/287/comm /proc/288/comm /proc/29027/comm /proc/29303/comm /proc/29320/comm /proc/29344/comm /proc/29356/comm /proc/3/comm /proc/30/comm /proc/308/comm /proc/309/comm /proc/31/comm /proc/32/comm /proc/321/comm /proc/33/comm /proc/33808/comm /proc/34/comm /proc/340/comm /proc/34082/comm /proc/34100/comm /proc/34122/comm /proc/34136/comm /proc/34940/comm /proc/34976/comm /proc/350/comm /proc/355/comm /proc/36/comm /proc/37/comm /proc/37112/comm /proc/37114/comm /proc/375/comm /proc/38/comm /proc/382/comm /proc/384/comm /proc/385/comm /proc/39/comm /proc/390/comm /proc/39483/comm /proc/395/comm /proc/39514/comm /proc/39535/comm /proc/39550/comm /proc/39552/comm /proc/39553/comm /proc/39625/comm /proc/39641/comm /proc/39648/comm /proc/39655/comm /proc/39738/comm /proc/39741/comm /proc/39742/comm /proc/39772/comm /proc/39879/comm /proc/39944/comm /proc/39964/comm /proc/4/comm /proc/40/comm /proc/40003/comm /proc/40088/comm /proc/40112/comm /proc/40137/comm /proc/40819/comm /proc/40846/comm /proc/40862/comm /proc/40881/comm /proc/41630/comm /proc/41858/comm /proc/42/comm /proc/42403/comm /proc/42651/comm /proc/42678/comm /proc/42688/comm /proc/42722/comm /proc/42737/comm /proc/42769/comm /proc/42809/comm /proc/42844/comm /proc/42887/comm /proc/42933/comm /proc/42970/comm /proc/42996/comm /proc/43/comm /proc/43021/comm /proc/43044/comm /proc/43116/comm /proc/43158/comm /proc/43207/comm /proc/43372/comm /proc/44/comm /proc/45/comm /proc/45108/comm /proc/45138/comm /proc/45197/comm /proc/452/comm /proc/45220/comm /proc/453/comm /proc/45447/comm /proc/45459/comm /proc/45487/comm /proc/45607/comm /proc/45928/comm /proc/45951/comm /proc/46/comm /proc/46043/comm /proc/46064/comm /proc/46141/comm /proc/46241/comm /proc/46436/comm /proc/46459/comm /proc/46593/comm /proc/46732/comm /proc/46757/comm /proc/47002/comm /proc/47048/comm /proc/47160/comm /proc/47183/comm /proc/47438/comm /proc/47534/comm /proc/476/comm /proc/47640/comm /proc/48/comm /proc/48375/comm /proc/48858/comm /proc/48882/comm /proc/48983/comm /proc/49/comm /proc/490/comm /proc/495/comm /proc/5/comm /proc/50/comm /proc/50884/comm /proc/50907/comm /proc/51/comm /proc/51459/comm /proc/51483/comm /proc/51506/comm /proc/51535/comm /proc/51695/comm /proc/51719/comm /proc/51770/comm /proc/51813/comm /proc/51933/comm /proc/52/comm /proc/522/comm /proc/54/comm /proc/54610/comm /proc/54653/comm /proc/54683/comm /proc/54771/comm /proc/54800/comm /proc/54827/comm /proc/54851/comm /proc/54865/comm /proc/54888/comm /proc/54958/comm /proc/55/comm /proc/55154/comm /proc/55431/comm /proc/55788/comm /proc/55822/comm /proc/55944/comm /proc/55945/comm /proc/55949/comm /proc/55950/comm /proc/55968/comm /proc/56/comm /proc/56011/comm /proc/56036/comm /proc/56103/comm /proc/56127/comm /proc/56420/comm /proc/56444/comm /proc/56745/comm /proc/56856/comm /proc/56879/comm /proc/57/comm /proc/57292/comm /proc/57315/comm /proc/57329/comm /proc/57405/comm /proc/57429/comm /proc/57484/comm /proc/57512/comm /proc/57528/comm /proc/57529/comm /proc/57530/comm /proc/57531/comm /proc/57532/comm /proc/57798/comm /proc/57821/comm /proc/58/comm /proc/58056/comm /proc/58101/comm /proc/58192/comm /proc/58232/comm /proc/58543/comm /proc/58567/comm /proc/58675/comm /proc/58720/comm /proc/58814/comm /proc/58893/comm /proc/59024/comm /proc/59085/comm /proc/59215/comm /proc/59342/comm /proc/59542/comm /proc/59578/comm /proc/59644/comm /proc/59668/comm /proc/59688/comm /proc/59941/comm /proc/59959/comm /proc/59966/comm /proc/6/comm /proc/60/comm /proc/60057/comm /proc/60108/comm /proc/60109/comm /proc/61/comm /proc/61133/comm /proc/61156/comm /proc/613/comm /proc/617/comm /proc/619/comm /proc/62/comm /proc/628/comm /proc/629/comm /proc/63/comm /proc/63838/comm /proc/63873/comm /proc/63874/comm /proc/63875/comm /proc/63876/comm /proc/63877/comm /proc/63879/comm /proc/63884/comm /proc/63886/comm /proc/63887/comm /proc/63888/comm /proc/63889/comm /proc/63890/comm /proc/63891/comm /proc/63892/comm /proc/64/comm /proc/644/comm /proc/649/comm /proc/66/comm /proc/67/comm /proc/68/comm /proc/68333/comm /proc/68356/comm /proc/68436/comm /proc/68453/comm /proc/68460/comm /proc/68550/comm /proc/68603/comm /proc/68604/comm /proc/69/comm /proc/69436/comm /proc/69460/comm /proc/699/comm /proc/70/comm /proc/702/comm /proc/703/comm /proc/716/comm /proc/72/comm /proc/72511/comm /proc/73/comm /proc/73573/comm /proc/73586/comm /proc/74/comm /proc/74099/comm /proc/74122/comm /proc/74804/comm /proc/75/comm /proc/76/comm /proc/77305/comm /proc/78/comm /proc/78484/comm /proc/78604/comm /proc/78627/comm /proc/78709/comm /proc/78726/comm /proc/78733/comm /proc/78789/comm /proc/78840/comm /proc/78841/comm /proc/79/comm /proc/8/comm /proc/80/comm /proc/80948/comm /proc/81/comm /proc/81529/comm /proc/82/comm /proc/82241/comm /proc/83362/comm /proc/84/comm /proc/85/comm /proc/85721/comm /proc/86/comm /proc/861/comm /proc/86403/comm /proc/86426/comm /proc/86518/comm /proc/86542/comm /proc/86640/comm /proc/86759/comm /proc/87/comm /proc/87437/comm /proc/88/comm /proc/89643/comm /proc/9/comm /proc/90/comm /proc/90452/comm /proc/90477/comm /proc/9060/comm /proc/9077/comm /proc/90793/comm /proc/90807/comm /proc/90808/comm /proc/9093/comm /proc/91/comm /proc/91737/comm /proc/9175/comm /proc/91766/comm /proc/91790/comm /proc/91814/comm /proc/91998/comm /proc/92/comm /proc/92081/comm /proc/92182/comm /proc/92184/comm /proc/92312/comm /proc/93/comm /proc/93236/comm /proc/93367/comm /proc/93368/comm /proc/93455/comm /proc/93478/comm /proc/93587/comm /proc/93605/comm /proc/93612/comm /proc/93677/comm /proc/93728/comm /proc/93729/comm /proc/94/comm /proc/94948/comm /proc/94972/comm /proc/94987/comm /proc/95010/comm /proc/96/comm /proc/97/comm /proc/97386/comm /proc/9791/comm /proc/98/comm /proc/98650/comm /proc/99/comm /proc/99797/comm /proc/self/comm /proc/thread-self/comm
+ '[' -n '' ']'
+ rm -f /var/run/libvirtd.pid
+ [[ -c /dev/kvm ]]
+ chmod 660 /dev/kvm
+ chown root:kvm /dev/kvm
+ CGROUPS=
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/blkio ']'
+ grep -w blkio /sys/fs/cgroup/cgroup.controllers
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/cpu ']'
+ grep -w cpu /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=cpu,
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/devices ']'
+ grep -w devices /sys/fs/cgroup/cgroup.controllers
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/freezer ']'
+ grep -w freezer /sys/fs/cgroup/cgroup.controllers
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/hugetlb ']'
+ grep -w hugetlb /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=hugetlb,
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/memory ']'
+ grep -w memory /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=memory,
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/net_cls ']'
+ grep -w net_cls /sys/fs/cgroup/cgroup.controllers
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/perf_event ']'
+ grep -w perf_event /sys/fs/cgroup/cgroup.controllers
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/rdma ']'
+ grep -w rdma /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=rdma,
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/misc ']'
+ grep -w misc /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=misc,
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/pids ']'
+ grep -w pids /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=pids,
+ cgcreate -g cpu,hugetlb,memory,rdma,misc,pids:/osh-libvirt
++ cat /proc/meminfo
++ grep HugePages_Total
++ tr -cd '[:digit:]'
+ hp_count=0
+ '[' 00 -gt 0 ']'
+ '[' -n 457eb676-33da-42ec-9a8c-9293d545c337 ']'
+ cgexec -g cpu,hugetlb,memory,rdma,misc,pids:/osh-libvirt systemd-run --scope --slice=system libvirtd --listen
++ mktemp --suffix .xml
+ tmpsecret=/tmp/tmp.I2fFUarWYe.xml
+ '[' -n '' ']'
+ trap cleanup EXIT
+ TIMEOUT=60
+ [[ ! -f /var/run/libvirtd.pid ]]
+ [[ 60 -gt 0 ]]
+ let TIMEOUT-=1
+ sleep 1
Running scope as unit: run-r98fc3893659b48b39e37a5626264d96b.scope
+ [[ ! -f /var/run/libvirtd.pid ]]
+ TIMEOUT=10
+ [[ ! -e /var/run/libvirt/libvirt-sock ]]
+ '[' -z '' ']'
+ '[' -n cinder ']'
++ awk '/key/{print $3}' /etc/ceph/ceph.client.cinder.keyring
+ CEPH_CINDER_KEYRING=AQDLzZ9p5pNaMhAA/j8YuKMWPfO8hJKCFoUung==
+ '[' -n cinder ']'
+ create_virsh_libvirt_secret cinder 457eb676-33da-42ec-9a8c-9293d545c337 AQDLzZ9p5pNaMhAA/j8YuKMWPfO8hJKCFoUung==
+ sec_user=cinder
+ sec_uuid=457eb676-33da-42ec-9a8c-9293d545c337
+ sec_ceph_keyring=AQDLzZ9p5pNaMhAA/j8YuKMWPfO8hJKCFoUung==
+ cat
+ virsh secret-define --file /tmp/tmp.I2fFUarWYe.xml
Secret 457eb676-33da-42ec-9a8c-9293d545c337 created

+ virsh secret-set-value --secret 457eb676-33da-42ec-9a8c-9293d545c337 --base64 AQDLzZ9p5pNaMhAA/j8YuKMWPfO8hJKCFoUung==
error: Passing secret value as command-line argument is insecure!
Secret value set

+ '[' -n '' ']'
+ cleanup
+ rm -f /tmp/tmp.I2fFUarWYe.xml
+ '[' -n '' ']'
++ cat /var/run/libvirtd.pid
+ LIBVIRTD_PID=166805
+ kill 166805
+ tail --pid=166805 -f /dev/null
+ cgexec -g cpu,hugetlb,memory,rdma,misc,pids:/osh-libvirt systemd-run --scope --slice=system libvirtd --listen
Running scope as unit: run-raa5b5122c7064676b34dcf67fc51d9a3.scope