+ wait_for_file /etc/pki/CA/cacert.pem
+ local file=/etc/pki/CA/cacert.pem
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ sleep 1
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ sleep 1
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ sleep 1
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ sleep 1
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ sleep 1
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ wait_for_file /etc/pki/qemu/ca-cert.pem
+ local file=/etc/pki/qemu/ca-cert.pem
+ '[' '!' -f /etc/pki/qemu/ca-cert.pem ']'
+ wait_for_file /etc/pki/libvirt/servercert.pem
+ local file=/etc/pki/libvirt/servercert.pem
+ '[' '!' -f /etc/pki/libvirt/servercert.pem ']'
+ wait_for_file /etc/pki/libvirt/clientcert.pem
+ local file=/etc/pki/libvirt/clientcert.pem
+ '[' '!' -f /etc/pki/libvirt/clientcert.pem ']'
+ wait_for_file /etc/pki/qemu/server-cert.pem
+ local file=/etc/pki/qemu/server-cert.pem
+ '[' '!' -f /etc/pki/qemu/server-cert.pem ']'
+ wait_for_file /etc/pki/qemu/client-cert.pem
+ local file=/etc/pki/qemu/client-cert.pem
+ '[' '!' -f /etc/pki/qemu/client-cert.pem ']'
+ wait_for_file /etc/pki/libvirt/private/serverkey.pem
+ local file=/etc/pki/libvirt/private/serverkey.pem
+ '[' '!' -f /etc/pki/libvirt/private/serverkey.pem ']'
+ wait_for_file /etc/pki/libvirt/private/clientkey.pem
+ local file=/etc/pki/libvirt/private/clientkey.pem
+ '[' '!' -f /etc/pki/libvirt/private/clientkey.pem ']'
+ wait_for_file /etc/pki/qemu/server-key.pem
+ local file=/etc/pki/qemu/server-key.pem
+ '[' '!' -f /etc/pki/qemu/server-key.pem ']'
+ wait_for_file /etc/pki/qemu/client-key.pem
+ local file=/etc/pki/qemu/client-key.pem
+ '[' '!' -f /etc/pki/qemu/client-key.pem ']'
+ wait_for_file /etc/pki/libvirt-vnc/ca-cert.pem
+ local file=/etc/pki/libvirt-vnc/ca-cert.pem
+ '[' '!' -f /etc/pki/libvirt-vnc/ca-cert.pem ']'
+ wait_for_file /etc/pki/libvirt-vnc/server-cert.pem
+ local file=/etc/pki/libvirt-vnc/server-cert.pem
+ '[' '!' -f /etc/pki/libvirt-vnc/server-cert.pem ']'
+ wait_for_file /etc/pki/libvirt-vnc/server-key.pem
+ local file=/etc/pki/libvirt-vnc/server-key.pem
+ '[' '!' -f /etc/pki/libvirt-vnc/server-key.pem ']'
++ grep -w libvirtd
++ cat /proc/1/comm /proc/10/comm /proc/100/comm /proc/100299/comm /proc/100704/comm /proc/101752/comm /proc/102/comm /proc/102562/comm /proc/103/comm /proc/10335/comm /proc/104/comm /proc/105/comm /proc/106/comm /proc/107393/comm /proc/108/comm /proc/108012/comm /proc/109/comm /proc/1095/comm /proc/11/comm /proc/110/comm /proc/11094/comm /proc/11095/comm /proc/111/comm /proc/112/comm /proc/112865/comm /proc/112888/comm /proc/113/comm /proc/113229/comm /proc/113242/comm /proc/113243/comm /proc/114/comm /proc/114353/comm /proc/114377/comm /proc/114399/comm /proc/114423/comm /proc/114598/comm /proc/114867/comm /proc/115/comm /proc/115153/comm /proc/115155/comm /proc/115588/comm /proc/116/comm /proc/116093/comm /proc/116268/comm /proc/116292/comm /proc/116531/comm /proc/116548/comm /proc/116554/comm /proc/116606/comm /proc/116607/comm /proc/116617/comm /proc/116902/comm /proc/117/comm /proc/118094/comm /proc/118120/comm /proc/118141/comm /proc/118166/comm /proc/12/comm /proc/120733/comm /proc/120884/comm /proc/120946/comm /proc/122058/comm /proc/12448/comm /proc/124697/comm /proc/124706/comm /proc/124707/comm /proc/12482/comm /proc/12512/comm /proc/12568/comm /proc/125842/comm /proc/12593/comm /proc/12611/comm /proc/126173/comm /proc/126174/comm /proc/126175/comm /proc/128267/comm /proc/128281/comm /proc/128282/comm /proc/12841/comm /proc/12872/comm /proc/12929/comm /proc/12954/comm /proc/12973/comm /proc/129773/comm /proc/13/comm /proc/131224/comm /proc/131248/comm /proc/131272/comm /proc/131296/comm /proc/131880/comm /proc/132369/comm /proc/132552/comm /proc/133362/comm /proc/133387/comm /proc/136966/comm /proc/137075/comm /proc/14/comm /proc/1426/comm /proc/145782/comm /proc/146473/comm /proc/146698/comm /proc/146715/comm /proc/147761/comm /proc/147765/comm /proc/149406/comm /proc/149427/comm /proc/149828/comm /proc/15/comm /proc/150470/comm /proc/151176/comm /proc/151235/comm /proc/151249/comm /proc/151250/comm /proc/152546/comm /proc/152547/comm /proc/1544/comm /proc/1545/comm /proc/1546/comm /proc/1547/comm /proc/1551/comm /proc/159526/comm /proc/159527/comm /proc/159529/comm /proc/159531/comm /proc/159758/comm /proc/16/comm /proc/160379/comm /proc/160405/comm /proc/160639/comm /proc/160827/comm /proc/160861/comm /proc/160875/comm /proc/160907/comm /proc/160908/comm /proc/160909/comm /proc/160910/comm /proc/161411/comm /proc/161439/comm /proc/1618/comm /proc/1622/comm /proc/162224/comm /proc/162421/comm /proc/162444/comm /proc/162465/comm /proc/162490/comm /proc/162628/comm /proc/162667/comm /proc/162680/comm /proc/162887/comm /proc/162905/comm /proc/162919/comm /proc/163014/comm /proc/1631/comm /proc/163101/comm /proc/163150/comm /proc/163180/comm /proc/163331/comm /proc/163332/comm /proc/163352/comm /proc/163520/comm /proc/163525/comm /proc/164182/comm /proc/164394/comm /proc/164417/comm /proc/164512/comm /proc/164528/comm /proc/164534/comm /proc/164699/comm /proc/164700/comm /proc/164710/comm /proc/164793/comm /proc/165/comm /proc/166/comm /proc/166557/comm /proc/166637/comm /proc/166756/comm /proc/166833/comm /proc/166860/comm /proc/166898/comm /proc/166926/comm /proc/167/comm /proc/167085/comm /proc/167113/comm /proc/167157/comm /proc/167194/comm /proc/167213/comm /proc/167235/comm /proc/167271/comm /proc/167504/comm /proc/167527/comm /proc/168/comm /proc/168064/comm /proc/168133/comm /proc/169/comm /proc/170/comm /proc/171/comm /proc/171345/comm /proc/172/comm /proc/172744/comm /proc/172745/comm /proc/172753/comm /proc/172805/comm /proc/173/comm /proc/173494/comm /proc/173502/comm /proc/173552/comm /proc/176450/comm /proc/177/comm /proc/177877/comm /proc/178405/comm /proc/178440/comm /proc/178441/comm /proc/178505/comm /proc/178518/comm /proc/178519/comm /proc/179/comm /proc/179193/comm /proc/179423/comm /proc/179534/comm /proc/179560/comm /proc/179710/comm /proc/179870/comm /proc/179871/comm /proc/179886/comm /proc/179888/comm /proc/18/comm /proc/180/comm /proc/180532/comm /proc/180540/comm /proc/180708/comm /proc/180731/comm /proc/180850/comm /proc/180869/comm /proc/180875/comm /proc/180947/comm /proc/180948/comm /proc/180958/comm /proc/181169/comm /proc/182/comm /proc/182553/comm /proc/182576/comm /proc/182588/comm /proc/182647/comm /proc/182680/comm /proc/182715/comm /proc/182798/comm /proc/182833/comm /proc/182937/comm /proc/182961/comm /proc/182981/comm /proc/183/comm /proc/183005/comm /proc/183600/comm /proc/183607/comm /proc/183619/comm /proc/183675/comm /proc/185/comm /proc/186/comm /proc/186792/comm /proc/186991/comm /proc/187/comm /proc/18742/comm /proc/187604/comm /proc/187607/comm /proc/18763/comm /proc/18784/comm /proc/188/comm /proc/18811/comm /proc/188260/comm /proc/18828/comm /proc/188284/comm /proc/188480/comm /proc/188715/comm /proc/188730/comm /proc/188790/comm /proc/188865/comm /proc/188894/comm /proc/188959/comm /proc/188971/comm /proc/189/comm /proc/189549/comm /proc/189551/comm /proc/189552/comm /proc/19/comm /proc/190/comm /proc/190767/comm /proc/191184/comm /proc/191185/comm /proc/191186/comm /proc/192176/comm /proc/192177/comm /proc/192765/comm /proc/192769/comm /proc/193054/comm /proc/193055/comm /proc/193056/comm /proc/193179/comm /proc/193198/comm /proc/193391/comm /proc/193559/comm /proc/193572/comm /proc/193613/comm /proc/193660/comm /proc/193661/comm /proc/193674/comm /proc/193706/comm /proc/193707/comm /proc/193935/comm /proc/194080/comm /proc/194128/comm /proc/194153/comm /proc/194203/comm /proc/194206/comm /proc/194210/comm /proc/194246/comm /proc/194248/comm /proc/194411/comm /proc/194414/comm /proc/194484/comm /proc/194485/comm /proc/194486/comm /proc/194487/comm /proc/199/comm /proc/2/comm /proc/20/comm /proc/200/comm /proc/203/comm /proc/204/comm /proc/205/comm /proc/21/comm /proc/21169/comm /proc/214/comm /proc/21750/comm /proc/218/comm /proc/21803/comm /proc/21804/comm /proc/21820/comm /proc/219/comm /proc/22/comm /proc/224/comm /proc/24/comm /proc/246/comm /proc/25/comm /proc/25077/comm /proc/25343/comm /proc/25359/comm /proc/25383/comm /proc/25395/comm /proc/26/comm /proc/27/comm /proc/28/comm /proc/294/comm /proc/296/comm /proc/29678/comm /proc/297/comm /proc/298/comm /proc/29951/comm /proc/29968/comm /proc/29992/comm /proc/3/comm /proc/30/comm /proc/30004/comm /proc/31/comm /proc/317/comm /proc/318/comm /proc/32/comm /proc/322/comm /proc/323/comm /proc/324/comm /proc/325/comm /proc/326/comm /proc/327/comm /proc/328/comm /proc/329/comm /proc/33/comm /proc/330/comm /proc/331/comm /proc/34/comm /proc/34488/comm /proc/34765/comm /proc/34782/comm /proc/34806/comm /proc/34818/comm /proc/36/comm /proc/37/comm /proc/371/comm /proc/38/comm /proc/39/comm /proc/39344/comm /proc/39346/comm /proc/39449/comm /proc/39492/comm /proc/39518/comm /proc/39545/comm /proc/39565/comm /proc/4/comm /proc/40/comm /proc/403/comm /proc/406/comm /proc/42/comm /proc/42045/comm /proc/42081/comm /proc/42100/comm /proc/42114/comm /proc/42116/comm /proc/42123/comm /proc/42180/comm /proc/42201/comm /proc/42210/comm /proc/42225/comm /proc/42292/comm /proc/42325/comm /proc/42337/comm /proc/42350/comm /proc/42454/comm /proc/42519/comm /proc/42662/comm /proc/42686/comm /proc/42710/comm /proc/43/comm /proc/43408/comm /proc/43426/comm /proc/43456/comm /proc/43470/comm /proc/43709/comm /proc/43922/comm /proc/44/comm /proc/44300/comm /proc/44751/comm /proc/44774/comm /proc/44802/comm /proc/45/comm /proc/45144/comm /proc/45167/comm /proc/45183/comm /proc/45206/comm /proc/45238/comm /proc/45266/comm /proc/45604/comm /proc/45628/comm /proc/45688/comm /proc/45769/comm /proc/46/comm /proc/46115/comm /proc/46138/comm /proc/46152/comm /proc/46177/comm /proc/46198/comm /proc/46222/comm /proc/463/comm /proc/46332/comm /proc/46381/comm /proc/46426/comm /proc/48/comm /proc/48360/comm /proc/48398/comm /proc/48485/comm /proc/48508/comm /proc/48729/comm /proc/48742/comm /proc/48787/comm /proc/48871/comm /proc/49/comm /proc/49270/comm /proc/49297/comm /proc/49311/comm /proc/49335/comm /proc/49393/comm /proc/49515/comm /proc/49681/comm /proc/49706/comm /proc/49825/comm /proc/49983/comm /proc/5/comm /proc/50/comm /proc/50011/comm /proc/50342/comm /proc/50364/comm /proc/50473/comm /proc/50548/comm /proc/50645/comm /proc/50674/comm /proc/50730/comm /proc/50789/comm /proc/51/comm /proc/51799/comm /proc/52/comm /proc/526/comm /proc/52614/comm /proc/52638/comm /proc/52798/comm /proc/52823/comm /proc/52868/comm /proc/52961/comm /proc/53152/comm /proc/53243/comm /proc/54/comm /proc/55/comm /proc/56/comm /proc/57/comm /proc/57545/comm /proc/57570/comm /proc/579/comm /proc/58/comm /proc/58117/comm /proc/58148/comm /proc/58183/comm /proc/58213/comm /proc/58219/comm /proc/58247/comm /proc/58448/comm /proc/58471/comm /proc/58509/comm /proc/58548/comm /proc/58587/comm /proc/58696/comm /proc/6/comm /proc/60/comm /proc/61/comm /proc/619/comm /proc/62/comm /proc/624/comm /proc/626/comm /proc/62824/comm /proc/63/comm /proc/63134/comm /proc/63167/comm /proc/63269/comm /proc/63296/comm /proc/63323/comm /proc/63346/comm /proc/63367/comm /proc/63384/comm /proc/635/comm /proc/636/comm /proc/63722/comm /proc/63876/comm /proc/64/comm /proc/64062/comm /proc/64437/comm /proc/64457/comm /proc/64470/comm /proc/64645/comm /proc/64675/comm /proc/64688/comm /proc/64689/comm /proc/64690/comm /proc/64691/comm /proc/64761/comm /proc/64782/comm /proc/64812/comm /proc/650/comm /proc/651/comm /proc/65145/comm /proc/65176/comm /proc/65204/comm /proc/65205/comm /proc/65250/comm /proc/65275/comm /proc/65286/comm /proc/65525/comm /proc/65594/comm /proc/65617/comm /proc/65703/comm /proc/66/comm /proc/66034/comm /proc/66057/comm /proc/66319/comm /proc/66419/comm /proc/66443/comm /proc/66507/comm /proc/66743/comm /proc/66769/comm /proc/66770/comm /proc/66771/comm /proc/66772/comm /proc/66773/comm /proc/66786/comm /proc/66909/comm /proc/66932/comm /proc/67/comm /proc/67178/comm /proc/67213/comm /proc/67425/comm /proc/67650/comm /proc/67674/comm /proc/67785/comm /proc/67821/comm /proc/67872/comm /proc/68/comm /proc/68037/comm /proc/68076/comm /proc/68121/comm /proc/68170/comm /proc/68201/comm /proc/68243/comm /proc/68365/comm /proc/68446/comm /proc/68467/comm /proc/68507/comm /proc/69/comm /proc/69764/comm /proc/69788/comm /proc/70/comm /proc/70138/comm /proc/70155/comm /proc/70161/comm /proc/70219/comm /proc/70220/comm /proc/70230/comm /proc/70284/comm /proc/710/comm /proc/713/comm /proc/714/comm /proc/71618/comm /proc/71640/comm /proc/72/comm /proc/728/comm /proc/73/comm /proc/74/comm /proc/75/comm /proc/75056/comm /proc/75095/comm /proc/75096/comm /proc/75097/comm /proc/75098/comm /proc/75100/comm /proc/75101/comm /proc/75102/comm /proc/75103/comm /proc/75105/comm /proc/75106/comm /proc/75109/comm /proc/75111/comm /proc/75113/comm /proc/75114/comm /proc/76/comm /proc/78/comm /proc/79/comm /proc/8/comm /proc/80/comm /proc/81/comm /proc/81035/comm /proc/81061/comm /proc/81144/comm /proc/81175/comm /proc/81193/comm /proc/81199/comm /proc/81263/comm /proc/81264/comm /proc/81274/comm /proc/81465/comm /proc/82/comm /proc/82560/comm /proc/82584/comm /proc/83783/comm /proc/84/comm /proc/85/comm /proc/85491/comm /proc/86/comm /proc/87/comm /proc/873/comm /proc/88/comm /proc/88043/comm /proc/88056/comm /proc/88776/comm /proc/88800/comm /proc/89649/comm /proc/90/comm /proc/90479/comm /proc/91/comm /proc/91613/comm /proc/92/comm /proc/9229/comm /proc/9246/comm /proc/9262/comm /proc/93/comm /proc/9345/comm /proc/94/comm /proc/95623/comm /proc/95648/comm /proc/95802/comm /proc/95820/comm /proc/95826/comm /proc/96/comm /proc/96053/comm /proc/96054/comm /proc/96065/comm /proc/96204/comm /proc/97/comm /proc/98/comm /proc/98982/comm /proc/99/comm /proc/99009/comm /proc/99034/comm /proc/99060/comm /proc/99451/comm /proc/99578/comm /proc/9962/comm /proc/self/comm /proc/thread-self/comm
+ '[' -n '' ']'
+ rm -f /var/run/libvirtd.pid
+ [[ -c /dev/kvm ]]
+ chmod 660 /dev/kvm
+ chown root:kvm /dev/kvm
+ CGROUPS=
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/blkio ']'
+ grep -w blkio /sys/fs/cgroup/cgroup.controllers
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/cpu ']'
+ grep -w cpu /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=cpu,
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/devices ']'
+ grep -w devices /sys/fs/cgroup/cgroup.controllers
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/freezer ']'
+ grep -w freezer /sys/fs/cgroup/cgroup.controllers
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/hugetlb ']'
+ grep -w hugetlb /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=hugetlb,
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/memory ']'
+ grep -w memory /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=memory,
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/net_cls ']'
+ grep -w net_cls /sys/fs/cgroup/cgroup.controllers
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/perf_event ']'
+ grep -w perf_event /sys/fs/cgroup/cgroup.controllers
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/rdma ']'
+ grep -w rdma /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=rdma,
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/misc ']'
+ grep -w misc /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=misc,
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/pids ']'
+ grep -w pids /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=pids,
+ cgcreate -g cpu,hugetlb,memory,rdma,misc,pids:/osh-libvirt
++ cat /proc/meminfo
++ grep HugePages_Total
++ tr -cd '[:digit:]'
+ hp_count=0
+ '[' 00 -gt 0 ']'
+ '[' -n 457eb676-33da-42ec-9a8c-9293d545c337 ']'
+ cgexec -g cpu,hugetlb,memory,rdma,misc,pids:/osh-libvirt systemd-run --scope --slice=system libvirtd --listen
++ mktemp --suffix .xml
+ tmpsecret=/tmp/tmp.cWFAGYu64U.xml
+ '[' -n '' ']'
+ trap cleanup EXIT
+ TIMEOUT=60
+ [[ ! -f /var/run/libvirtd.pid ]]
+ [[ 60 -gt 0 ]]
+ let TIMEOUT-=1
+ sleep 1
Running as unit: run-r236d3f6262c0402d8b1c76cfcb4d9ff9.scope; invocation ID: 02558416d54d44dc8a5329e0aab619f4
+ [[ ! -f /var/run/libvirtd.pid ]]
+ TIMEOUT=10
+ [[ ! -e /var/run/libvirt/libvirt-sock ]]
+ '[' -z '' ']'
+ '[' -n cinder ']'
++ awk '/key/{print $3}' /etc/ceph/ceph.client.cinder.keyring
+ CEPH_CINDER_KEYRING=AQCDOrtqzjpREhAAb6ndAfPHmV1fqRJMeBrU2Q==
+ '[' -n cinder ']'
+ create_virsh_libvirt_secret cinder 457eb676-33da-42ec-9a8c-9293d545c337 AQCDOrtqzjpREhAAb6ndAfPHmV1fqRJMeBrU2Q==
+ sec_user=cinder
+ sec_uuid=457eb676-33da-42ec-9a8c-9293d545c337
+ sec_ceph_keyring=AQCDOrtqzjpREhAAb6ndAfPHmV1fqRJMeBrU2Q==
+ cat
+ virsh secret-define --file /tmp/tmp.cWFAGYu64U.xml
Secret 457eb676-33da-42ec-9a8c-9293d545c337 created

+ virsh secret-set-value --secret 457eb676-33da-42ec-9a8c-9293d545c337 --base64 AQCDOrtqzjpREhAAb6ndAfPHmV1fqRJMeBrU2Q==
error: Passing secret value as command-line argument is insecure!
Secret value set

+ '[' -n '' ']'
+ '[' -n '' ']'
+ cleanup
+ rm -f /tmp/tmp.cWFAGYu64U.xml
+ '[' -n '' ']'
++ cat /var/run/libvirtd.pid
+ LIBVIRTD_PID=194508
+ kill 194508
+ tail --pid=194508 -f /dev/null
+ cgexec -g cpu,hugetlb,memory,rdma,misc,pids:/osh-libvirt systemd-run --scope --slice=system libvirtd --listen
Running as unit: run-r550e7f989e0a49be9c2fc31405c69238.scope; invocation ID: 6e98ddddf3c54140bc7e2a6cb9bd3fab