+ wait_for_file /etc/pki/CA/cacert.pem
+ local file=/etc/pki/CA/cacert.pem
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ sleep 1
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ sleep 1
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ sleep 1
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ sleep 1
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ sleep 1
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ wait_for_file /etc/pki/qemu/ca-cert.pem
+ local file=/etc/pki/qemu/ca-cert.pem
+ '[' '!' -f /etc/pki/qemu/ca-cert.pem ']'
+ wait_for_file /etc/pki/libvirt/servercert.pem
+ local file=/etc/pki/libvirt/servercert.pem
+ '[' '!' -f /etc/pki/libvirt/servercert.pem ']'
+ wait_for_file /etc/pki/libvirt/clientcert.pem
+ local file=/etc/pki/libvirt/clientcert.pem
+ '[' '!' -f /etc/pki/libvirt/clientcert.pem ']'
+ wait_for_file /etc/pki/qemu/server-cert.pem
+ local file=/etc/pki/qemu/server-cert.pem
+ '[' '!' -f /etc/pki/qemu/server-cert.pem ']'
+ wait_for_file /etc/pki/qemu/client-cert.pem
+ local file=/etc/pki/qemu/client-cert.pem
+ '[' '!' -f /etc/pki/qemu/client-cert.pem ']'
+ wait_for_file /etc/pki/libvirt/private/serverkey.pem
+ local file=/etc/pki/libvirt/private/serverkey.pem
+ '[' '!' -f /etc/pki/libvirt/private/serverkey.pem ']'
+ wait_for_file /etc/pki/libvirt/private/clientkey.pem
+ local file=/etc/pki/libvirt/private/clientkey.pem
+ '[' '!' -f /etc/pki/libvirt/private/clientkey.pem ']'
+ wait_for_file /etc/pki/qemu/server-key.pem
+ local file=/etc/pki/qemu/server-key.pem
+ '[' '!' -f /etc/pki/qemu/server-key.pem ']'
+ wait_for_file /etc/pki/qemu/client-key.pem
+ local file=/etc/pki/qemu/client-key.pem
+ '[' '!' -f /etc/pki/qemu/client-key.pem ']'
+ wait_for_file /etc/pki/libvirt-vnc/ca-cert.pem
+ local file=/etc/pki/libvirt-vnc/ca-cert.pem
+ '[' '!' -f /etc/pki/libvirt-vnc/ca-cert.pem ']'
+ wait_for_file /etc/pki/libvirt-vnc/server-cert.pem
+ local file=/etc/pki/libvirt-vnc/server-cert.pem
+ '[' '!' -f /etc/pki/libvirt-vnc/server-cert.pem ']'
+ wait_for_file /etc/pki/libvirt-vnc/server-key.pem
+ local file=/etc/pki/libvirt-vnc/server-key.pem
+ '[' '!' -f /etc/pki/libvirt-vnc/server-key.pem ']'
++ grep -w libvirtd
++ cat /proc/1/comm /proc/10/comm /proc/100/comm /proc/100383/comm /proc/101457/comm /proc/101616/comm /proc/102/comm /proc/103/comm /proc/10358/comm /proc/10379/comm /proc/104/comm /proc/105/comm /proc/106/comm /proc/10632/comm /proc/108/comm /proc/109/comm /proc/11/comm /proc/110/comm /proc/111/comm /proc/1111/comm /proc/11118/comm /proc/11119/comm /proc/112/comm /proc/112469/comm /proc/112527/comm /proc/112659/comm /proc/112840/comm /proc/112854/comm /proc/112855/comm /proc/113/comm /proc/113948/comm /proc/113971/comm /proc/114/comm /proc/114031/comm /proc/114055/comm /proc/114215/comm /proc/114507/comm /proc/114509/comm /proc/115/comm /proc/115048/comm /proc/115192/comm /proc/11538/comm /proc/115638/comm /proc/115802/comm /proc/115891/comm /proc/115914/comm /proc/116/comm /proc/116083/comm /proc/116100/comm /proc/116106/comm /proc/116163/comm /proc/116164/comm /proc/116174/comm /proc/116299/comm /proc/117/comm /proc/117683/comm /proc/117713/comm /proc/117734/comm /proc/117758/comm /proc/118569/comm /proc/12/comm /proc/120427/comm /proc/120801/comm /proc/121533/comm /proc/122519/comm /proc/12504/comm /proc/12535/comm /proc/12570/comm /proc/12614/comm /proc/12626/comm /proc/127150/comm /proc/127683/comm /proc/127696/comm /proc/127697/comm /proc/12866/comm /proc/12896/comm /proc/129197/comm /proc/129293/comm /proc/12951/comm /proc/12976/comm /proc/12995/comm /proc/13/comm /proc/130684/comm /proc/130712/comm /proc/130754/comm /proc/130793/comm /proc/130993/comm /proc/131322/comm /proc/131841/comm /proc/132070/comm /proc/132796/comm /proc/133490/comm /proc/133513/comm /proc/14/comm /proc/1442/comm /proc/145646/comm /proc/146374/comm /proc/147377/comm /proc/147423/comm /proc/147477/comm /proc/148984/comm /proc/149176/comm /proc/15/comm /proc/150031/comm /proc/150087/comm /proc/150142/comm /proc/150801/comm /proc/150832/comm /proc/150833/comm /proc/152051/comm /proc/152052/comm /proc/1560/comm /proc/1561/comm /proc/1562/comm /proc/1563/comm /proc/1567/comm /proc/159218/comm /proc/159219/comm /proc/159221/comm /proc/159223/comm /proc/159355/comm /proc/159939/comm /proc/159962/comm /proc/16/comm /proc/160426/comm /proc/160461/comm /proc/160473/comm /proc/160504/comm /proc/160505/comm /proc/160506/comm /proc/160507/comm /proc/161038/comm /proc/161061/comm /proc/161879/comm /proc/161890/comm /proc/162045/comm /proc/162068/comm /proc/162090/comm /proc/162114/comm /proc/162177/comm /proc/162178/comm /proc/162388/comm /proc/162389/comm /proc/162426/comm /proc/162449/comm /proc/162494/comm /proc/162513/comm /proc/162606/comm /proc/162654/comm /proc/162790/comm /proc/162816/comm /proc/163055/comm /proc/163273/comm /proc/163278/comm /proc/1636/comm /proc/163710/comm /proc/163717/comm /proc/163960/comm /proc/163985/comm /proc/1640/comm /proc/164230/comm /proc/164248/comm /proc/164254/comm /proc/164316/comm /proc/164317/comm /proc/164327/comm /proc/164417/comm /proc/1649/comm /proc/166/comm /proc/166101/comm /proc/166126/comm /proc/166223/comm /proc/166308/comm /proc/166335/comm /proc/166361/comm /proc/166403/comm /proc/166428/comm /proc/166474/comm /proc/166517/comm /proc/166719/comm /proc/166752/comm /proc/166861/comm /proc/166884/comm /proc/166954/comm /proc/167/comm /proc/167052/comm /proc/168/comm /proc/169/comm /proc/170/comm /proc/171/comm /proc/171103/comm /proc/172/comm /proc/172367/comm /proc/173/comm /proc/173063/comm /proc/174/comm /proc/175498/comm /proc/175692/comm /proc/175697/comm /proc/176946/comm /proc/177290/comm /proc/177322/comm /proc/177880/comm /proc/177918/comm /proc/177919/comm /proc/178/comm /proc/178052/comm /proc/178065/comm /proc/178066/comm /proc/178226/comm /proc/178953/comm /proc/179043/comm /proc/179136/comm /proc/179143/comm /proc/179171/comm /proc/179372/comm /proc/179373/comm /proc/179382/comm /proc/179384/comm /proc/179875/comm /proc/179940/comm /proc/18/comm /proc/180/comm /proc/180088/comm /proc/180112/comm /proc/180219/comm /proc/180278/comm /proc/180314/comm /proc/180320/comm /proc/180486/comm /proc/180487/comm /proc/180497/comm /proc/180595/comm /proc/181/comm /proc/181658/comm /proc/181949/comm /proc/181966/comm /proc/181999/comm /proc/182024/comm /proc/182062/comm /proc/182130/comm /proc/182180/comm /proc/182242/comm /proc/182370/comm /proc/182396/comm /proc/182410/comm /proc/182436/comm /proc/182874/comm /proc/182923/comm /proc/183/comm /proc/184/comm /proc/186/comm /proc/186595/comm /proc/186600/comm /proc/187/comm /proc/187339/comm /proc/187396/comm /proc/187748/comm /proc/187772/comm /proc/188/comm /proc/188225/comm /proc/188286/comm /proc/188327/comm /proc/188405/comm /proc/188431/comm /proc/188526/comm /proc/188537/comm /proc/18861/comm /proc/18882/comm /proc/189/comm /proc/18901/comm /proc/18928/comm /proc/189305/comm /proc/18947/comm /proc/19/comm /proc/190/comm /proc/190479/comm /proc/191/comm /proc/191978/comm /proc/192190/comm /proc/192191/comm /proc/192683/comm /proc/192684/comm /proc/192685/comm /proc/192780/comm /proc/192789/comm /proc/193161/comm /proc/193172/comm /proc/193207/comm /proc/193208/comm /proc/193231/comm /proc/193254/comm /proc/193255/comm /proc/193454/comm /proc/193651/comm /proc/193701/comm /proc/193728/comm /proc/193770/comm /proc/193772/comm /proc/193860/comm /proc/193861/comm /proc/193864/comm /proc/193999/comm /proc/194018/comm /proc/194039/comm /proc/194040/comm /proc/194041/comm /proc/2/comm /proc/20/comm /proc/202/comm /proc/203/comm /proc/204/comm /proc/205/comm /proc/207/comm /proc/21/comm /proc/216/comm /proc/21888/comm /proc/21932/comm /proc/21933/comm /proc/21946/comm /proc/22/comm /proc/220/comm /proc/221/comm /proc/226/comm /proc/24/comm /proc/248/comm /proc/25/comm /proc/25194/comm /proc/25456/comm /proc/25472/comm /proc/25498/comm /proc/25510/comm /proc/26/comm /proc/26004/comm /proc/27/comm /proc/28/comm /proc/286/comm /proc/29693/comm /proc/29972/comm /proc/29989/comm /proc/3/comm /proc/30/comm /proc/30014/comm /proc/30026/comm /proc/301/comm /proc/303/comm /proc/305/comm /proc/306/comm /proc/307/comm /proc/31/comm /proc/32/comm /proc/326/comm /proc/327/comm /proc/33/comm /proc/331/comm /proc/332/comm /proc/333/comm /proc/334/comm /proc/335/comm /proc/336/comm /proc/34/comm /proc/34509/comm /proc/34771/comm /proc/34788/comm /proc/34812/comm /proc/34824/comm /proc/36/comm /proc/37/comm /proc/376/comm /proc/38/comm /proc/386/comm /proc/39/comm /proc/39178/comm /proc/39180/comm /proc/39284/comm /proc/39326/comm /proc/39352/comm /proc/39379/comm /proc/39397/comm /proc/4/comm /proc/40/comm /proc/408/comm /proc/412/comm /proc/41848/comm /proc/41856/comm /proc/41891/comm /proc/41898/comm /proc/41907/comm /proc/41972/comm /proc/41989/comm /proc/41992/comm /proc/42/comm /proc/42011/comm /proc/42013/comm /proc/42076/comm /proc/42098/comm /proc/42115/comm /proc/42137/comm /proc/42231/comm /proc/42304/comm /proc/42445/comm /proc/42469/comm /proc/42497/comm /proc/43/comm /proc/43191/comm /proc/43212/comm /proc/43233/comm /proc/43254/comm /proc/43514/comm /proc/43723/comm /proc/44/comm /proc/44101/comm /proc/44540/comm /proc/44563/comm /proc/44604/comm /proc/44984/comm /proc/45/comm /proc/45009/comm /proc/45023/comm /proc/45047/comm /proc/45078/comm /proc/45107/comm /proc/45448/comm /proc/45473/comm /proc/45697/comm /proc/45949/comm /proc/45975/comm /proc/46/comm /proc/46007/comm /proc/46032/comm /proc/46047/comm /proc/46072/comm /proc/46184/comm /proc/46229/comm /proc/46277/comm /proc/467/comm /proc/48/comm /proc/48109/comm /proc/48137/comm /proc/48215/comm /proc/48239/comm /proc/48456/comm /proc/48469/comm /proc/48540/comm /proc/48614/comm /proc/49/comm /proc/49176/comm /proc/49200/comm /proc/49212/comm /proc/49238/comm /proc/49311/comm /proc/49433/comm /proc/49597/comm /proc/49620/comm /proc/49741/comm /proc/49955/comm /proc/49979/comm /proc/5/comm /proc/50/comm /proc/50157/comm /proc/50293/comm /proc/50318/comm /proc/50431/comm /proc/50488/comm /proc/50585/comm /proc/50614/comm /proc/50682/comm /proc/50729/comm /proc/51/comm /proc/52/comm /proc/52486/comm /proc/52510/comm /proc/52751/comm /proc/52774/comm /proc/52804/comm /proc/52912/comm /proc/53101/comm /proc/53170/comm /proc/53212/comm /proc/535/comm /proc/54/comm /proc/55/comm /proc/56/comm /proc/57/comm /proc/57737/comm /proc/57760/comm /proc/58/comm /proc/58404/comm /proc/58431/comm /proc/58484/comm /proc/58520/comm /proc/58531/comm /proc/58554/comm /proc/58729/comm /proc/58752/comm /proc/58802/comm /proc/58866/comm /proc/58908/comm /proc/59005/comm /proc/6/comm /proc/60/comm /proc/61/comm /proc/62/comm /proc/627/comm /proc/63/comm /proc/631/comm /proc/63280/comm /proc/633/comm /proc/63536/comm /proc/63584/comm /proc/63712/comm /proc/63737/comm /proc/63758/comm /proc/63781/comm /proc/63796/comm /proc/63820/comm /proc/63904/comm /proc/64/comm /proc/641/comm /proc/64119/comm /proc/642/comm /proc/64355/comm /proc/64381/comm /proc/64423/comm /proc/64621/comm /proc/64622/comm /proc/64669/comm /proc/64670/comm /proc/64742/comm /proc/64743/comm /proc/64965/comm /proc/65409/comm /proc/65444/comm /proc/65469/comm /proc/65495/comm /proc/65525/comm /proc/65556/comm /proc/65582/comm /proc/65820/comm /proc/65845/comm /proc/659/comm /proc/65970/comm /proc/65995/comm /proc/66/comm /proc/66090/comm /proc/66109/comm /proc/66139/comm /proc/663/comm /proc/66464/comm /proc/66490/comm /proc/66538/comm /proc/66553/comm /proc/66554/comm /proc/66555/comm /proc/66556/comm /proc/66557/comm /proc/66751/comm /proc/66774/comm /proc/66846/comm /proc/66901/comm /proc/66944/comm /proc/67/comm /proc/67327/comm /proc/67364/comm /proc/67669/comm /proc/67704/comm /proc/68/comm /proc/68028/comm /proc/68042/comm /proc/68068/comm /proc/68149/comm /proc/68181/comm /proc/68260/comm /proc/68306/comm /proc/68336/comm /proc/68479/comm /proc/68685/comm /proc/68727/comm /proc/68776/comm /proc/68944/comm /proc/69/comm /proc/69118/comm /proc/69168/comm /proc/69197/comm /proc/69240/comm /proc/69541/comm /proc/69564/comm /proc/70/comm /proc/70088/comm /proc/70105/comm /proc/70111/comm /proc/70192/comm /proc/70193/comm /proc/70203/comm /proc/70371/comm /proc/71573/comm /proc/71598/comm /proc/72/comm /proc/720/comm /proc/723/comm /proc/724/comm /proc/73/comm /proc/737/comm /proc/74/comm /proc/74862/comm /proc/74877/comm /proc/74878/comm /proc/74879/comm /proc/74880/comm /proc/74881/comm /proc/74884/comm /proc/74885/comm /proc/74887/comm /proc/74889/comm /proc/74891/comm /proc/74892/comm /proc/74893/comm /proc/74894/comm /proc/74896/comm /proc/75/comm /proc/76/comm /proc/78/comm /proc/79/comm /proc/8/comm /proc/80/comm /proc/80928/comm /proc/80953/comm /proc/81/comm /proc/81066/comm /proc/81083/comm /proc/81090/comm /proc/81216/comm /proc/81217/comm /proc/81227/comm /proc/81339/comm /proc/82/comm /proc/82531/comm /proc/82556/comm /proc/83021/comm /proc/84/comm /proc/85/comm /proc/86/comm /proc/86699/comm /proc/87/comm /proc/87487/comm /proc/87819/comm /proc/87845/comm /proc/88/comm /proc/882/comm /proc/88601/comm /proc/88626/comm /proc/89554/comm /proc/90/comm /proc/90459/comm /proc/91/comm /proc/92/comm /proc/92014/comm /proc/92016/comm /proc/92165/comm /proc/9253/comm /proc/9270/comm /proc/9286/comm /proc/93/comm /proc/9370/comm /proc/94/comm /proc/95360/comm /proc/95384/comm /proc/95541/comm /proc/95559/comm /proc/95565/comm /proc/95767/comm /proc/95768/comm /proc/95778/comm /proc/95913/comm /proc/96/comm /proc/97/comm /proc/98/comm /proc/98690/comm /proc/98715/comm /proc/98729/comm /proc/98753/comm /proc/99/comm /proc/99037/comm /proc/99106/comm /proc/99660/comm /proc/9987/comm /proc/self/comm /proc/thread-self/comm
+ '[' -n '' ']'
+ rm -f /var/run/libvirtd.pid
+ [[ -c /dev/kvm ]]
+ chmod 660 /dev/kvm
+ chown root:kvm /dev/kvm
+ CGROUPS=
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/blkio ']'
+ grep -w blkio /sys/fs/cgroup/cgroup.controllers
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/cpu ']'
+ grep -w cpu /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=cpu,
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/devices ']'
+ grep -w devices /sys/fs/cgroup/cgroup.controllers
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/freezer ']'
+ grep -w freezer /sys/fs/cgroup/cgroup.controllers
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/hugetlb ']'
+ grep -w hugetlb /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=hugetlb,
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/memory ']'
+ grep -w memory /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=memory,
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/net_cls ']'
+ grep -w net_cls /sys/fs/cgroup/cgroup.controllers
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/perf_event ']'
+ grep -w perf_event /sys/fs/cgroup/cgroup.controllers
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/rdma ']'
+ grep -w rdma /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=rdma,
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/misc ']'
+ grep -w misc /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=misc,
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/pids ']'
+ grep -w pids /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=pids,
+ cgcreate -g cpu,hugetlb,memory,rdma,misc,pids:/osh-libvirt
++ cat /proc/meminfo
++ grep HugePages_Total
++ tr -cd '[:digit:]'
+ hp_count=0
+ '[' 00 -gt 0 ']'
+ '[' -n 457eb676-33da-42ec-9a8c-9293d545c337 ']'
+ cgexec -g cpu,hugetlb,memory,rdma,misc,pids:/osh-libvirt systemd-run --scope --slice=system libvirtd --listen
++ mktemp --suffix .xml
+ tmpsecret=/tmp/tmp.mnCMqvvb3E.xml
+ '[' -n '' ']'
+ trap cleanup EXIT
+ TIMEOUT=60
+ [[ ! -f /var/run/libvirtd.pid ]]
+ [[ 60 -gt 0 ]]
+ let TIMEOUT-=1
+ sleep 1
Running as unit: run-ra80afd330c3745e4a7b82711ee4c4e00.scope; invocation ID: 2dc70b3c0261403aa1025ade3b31b9fc
+ [[ ! -f /var/run/libvirtd.pid ]]
+ TIMEOUT=10
+ [[ ! -e /var/run/libvirt/libvirt-sock ]]
+ '[' -z '' ']'
+ '[' -n cinder ']'
++ awk '/key/{print $3}' /etc/ceph/ceph.client.cinder.keyring
+ CEPH_CINDER_KEYRING=AQC8xsVqBgECMBAADj/FmQ6AsXqE2i5K9zc0PQ==
+ '[' -n cinder ']'
+ create_virsh_libvirt_secret cinder 457eb676-33da-42ec-9a8c-9293d545c337 AQC8xsVqBgECMBAADj/FmQ6AsXqE2i5K9zc0PQ==
+ sec_user=cinder
+ sec_uuid=457eb676-33da-42ec-9a8c-9293d545c337
+ sec_ceph_keyring=AQC8xsVqBgECMBAADj/FmQ6AsXqE2i5K9zc0PQ==
+ cat
+ virsh secret-define --file /tmp/tmp.mnCMqvvb3E.xml
Secret 457eb676-33da-42ec-9a8c-9293d545c337 created

+ virsh secret-set-value --secret 457eb676-33da-42ec-9a8c-9293d545c337 --base64 AQC8xsVqBgECMBAADj/FmQ6AsXqE2i5K9zc0PQ==
error: Passing secret value as command-line argument is insecure!
Secret value set

+ '[' -n '' ']'
+ '[' -n '' ']'
+ cleanup
+ rm -f /tmp/tmp.mnCMqvvb3E.xml
+ '[' -n '' ']'
++ cat /var/run/libvirtd.pid
+ LIBVIRTD_PID=194061
+ kill 194061
+ tail --pid=194061 -f /dev/null
+ cgexec -g cpu,hugetlb,memory,rdma,misc,pids:/osh-libvirt systemd-run --scope --slice=system libvirtd --listen
Running as unit: run-r79d48c3f731c447bb021d8261240f3bd.scope; invocation ID: aec61f7db9f94ce4826f11eb26e6fdb9