+ wait_for_file /etc/pki/CA/cacert.pem
+ local file=/etc/pki/CA/cacert.pem
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ sleep 1
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ sleep 1
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ sleep 1
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ sleep 1
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ sleep 1
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ wait_for_file /etc/pki/qemu/ca-cert.pem
+ local file=/etc/pki/qemu/ca-cert.pem
+ '[' '!' -f /etc/pki/qemu/ca-cert.pem ']'
+ wait_for_file /etc/pki/libvirt/servercert.pem
+ local file=/etc/pki/libvirt/servercert.pem
+ '[' '!' -f /etc/pki/libvirt/servercert.pem ']'
+ wait_for_file /etc/pki/libvirt/clientcert.pem
+ local file=/etc/pki/libvirt/clientcert.pem
+ '[' '!' -f /etc/pki/libvirt/clientcert.pem ']'
+ wait_for_file /etc/pki/qemu/server-cert.pem
+ local file=/etc/pki/qemu/server-cert.pem
+ '[' '!' -f /etc/pki/qemu/server-cert.pem ']'
+ wait_for_file /etc/pki/qemu/client-cert.pem
+ local file=/etc/pki/qemu/client-cert.pem
+ '[' '!' -f /etc/pki/qemu/client-cert.pem ']'
+ wait_for_file /etc/pki/libvirt/private/serverkey.pem
+ local file=/etc/pki/libvirt/private/serverkey.pem
+ '[' '!' -f /etc/pki/libvirt/private/serverkey.pem ']'
+ wait_for_file /etc/pki/libvirt/private/clientkey.pem
+ local file=/etc/pki/libvirt/private/clientkey.pem
+ '[' '!' -f /etc/pki/libvirt/private/clientkey.pem ']'
+ wait_for_file /etc/pki/qemu/server-key.pem
+ local file=/etc/pki/qemu/server-key.pem
+ '[' '!' -f /etc/pki/qemu/server-key.pem ']'
+ wait_for_file /etc/pki/qemu/client-key.pem
+ local file=/etc/pki/qemu/client-key.pem
+ '[' '!' -f /etc/pki/qemu/client-key.pem ']'
+ wait_for_file /etc/pki/libvirt-vnc/ca-cert.pem
+ local file=/etc/pki/libvirt-vnc/ca-cert.pem
+ '[' '!' -f /etc/pki/libvirt-vnc/ca-cert.pem ']'
+ wait_for_file /etc/pki/libvirt-vnc/server-cert.pem
+ local file=/etc/pki/libvirt-vnc/server-cert.pem
+ '[' '!' -f /etc/pki/libvirt-vnc/server-cert.pem ']'
+ wait_for_file /etc/pki/libvirt-vnc/server-key.pem
+ local file=/etc/pki/libvirt-vnc/server-key.pem
+ '[' '!' -f /etc/pki/libvirt-vnc/server-key.pem ']'
++ grep -w libvirtd
++ cat /proc/1/comm /proc/10/comm /proc/100/comm /proc/102/comm /proc/103/comm /proc/10326/comm /proc/104/comm /proc/105/comm /proc/106/comm /proc/106317/comm /proc/106369/comm /proc/106378/comm /proc/108/comm /proc/108107/comm /proc/108122/comm /proc/10832/comm /proc/10833/comm /proc/108489/comm /proc/108501/comm /proc/108502/comm /proc/108906/comm /proc/109/comm /proc/109077/comm /proc/1091/comm /proc/11/comm /proc/110/comm /proc/111/comm /proc/111177/comm /proc/111200/comm /proc/111234/comm /proc/111263/comm /proc/111580/comm /proc/111581/comm /proc/111746/comm /proc/112/comm /proc/112014/comm /proc/112169/comm /proc/113/comm /proc/113427/comm /proc/113450/comm /proc/113941/comm /proc/114/comm /proc/114194/comm /proc/115/comm /proc/115462/comm /proc/116/comm /proc/116572/comm /proc/117/comm /proc/117352/comm /proc/117924/comm /proc/117948/comm /proc/117949/comm /proc/119024/comm /proc/119025/comm /proc/12/comm /proc/12226/comm /proc/12256/comm /proc/12313/comm /proc/12339/comm /proc/12357/comm /proc/12590/comm /proc/126036/comm /proc/126037/comm /proc/126039/comm /proc/126040/comm /proc/126066/comm /proc/12617/comm /proc/126456/comm /proc/126482/comm /proc/12674/comm /proc/12698/comm /proc/12717/comm /proc/127207/comm /proc/127273/comm /proc/127297/comm /proc/127342/comm /proc/127343/comm /proc/127344/comm /proc/127345/comm /proc/128019/comm /proc/128043/comm /proc/128480/comm /proc/128503/comm /proc/128760/comm /proc/128810/comm /proc/129036/comm /proc/129132/comm /proc/129160/comm /proc/129240/comm /proc/129263/comm /proc/129339/comm /proc/129369/comm /proc/129387/comm /proc/129394/comm /proc/129584/comm /proc/129637/comm /proc/129638/comm /proc/13/comm /proc/131294/comm /proc/131379/comm /proc/131455/comm /proc/131620/comm /proc/131652/comm /proc/131745/comm /proc/131801/comm /proc/131804/comm /proc/131862/comm /proc/131939/comm /proc/131957/comm /proc/131994/comm /proc/132124/comm /proc/132147/comm /proc/132639/comm /proc/132657/comm /proc/132680/comm /proc/14/comm /proc/1422/comm /proc/148712/comm /proc/149048/comm /proc/149260/comm /proc/149416/comm /proc/15/comm /proc/150570/comm /proc/150845/comm /proc/151410/comm /proc/151449/comm /proc/152720/comm /proc/152721/comm /proc/152724/comm /proc/152811/comm /proc/153110/comm /proc/153143/comm /proc/153144/comm /proc/153218/comm /proc/153233/comm /proc/153234/comm /proc/153807/comm /proc/153953/comm /proc/1540/comm /proc/1541/comm /proc/154157/comm /proc/154158/comm /proc/1542/comm /proc/154220/comm /proc/154221/comm /proc/154285/comm /proc/154286/comm /proc/1543/comm /proc/154558/comm /proc/1547/comm /proc/154712/comm /proc/154852/comm /proc/154904/comm /proc/154985/comm /proc/155056/comm /proc/155139/comm /proc/155164/comm /proc/155171/comm /proc/155225/comm /proc/155278/comm /proc/155279/comm /proc/156611/comm /proc/156651/comm /proc/156665/comm /proc/156729/comm /proc/156797/comm /proc/156860/comm /proc/156876/comm /proc/156914/comm /proc/156938/comm /proc/156959/comm /proc/157032/comm /proc/157084/comm /proc/157132/comm /proc/157159/comm /proc/157729/comm /proc/157759/comm /proc/157761/comm /proc/158478/comm /proc/158491/comm /proc/16/comm /proc/160395/comm /proc/160711/comm /proc/160902/comm /proc/160946/comm /proc/161011/comm /proc/1614/comm /proc/1618/comm /proc/161807/comm /proc/161964/comm /proc/161986/comm /proc/1627/comm /proc/162813/comm /proc/164472/comm /proc/164473/comm /proc/164474/comm /proc/164739/comm /proc/164750/comm /proc/164779/comm /proc/164780/comm /proc/164793/comm /proc/164806/comm /proc/164807/comm /proc/164948/comm /proc/164949/comm /proc/164950/comm /proc/165/comm /proc/165612/comm /proc/165786/comm /proc/165883/comm /proc/166/comm /proc/166076/comm /proc/166656/comm /proc/166874/comm /proc/166900/comm /proc/166909/comm /proc/167/comm /proc/167035/comm /proc/167036/comm /proc/167151/comm /proc/167242/comm /proc/167289/comm /proc/167661/comm /proc/167676/comm /proc/167677/comm /proc/167678/comm /proc/167679/comm /proc/167680/comm /proc/167681/comm /proc/167741/comm /proc/167742/comm /proc/167743/comm /proc/167747/comm /proc/167748/comm /proc/167749/comm /proc/167750/comm /proc/167751/comm /proc/167752/comm /proc/167753/comm /proc/167754/comm /proc/167755/comm /proc/167756/comm /proc/167757/comm /proc/167758/comm /proc/167759/comm /proc/167760/comm /proc/167761/comm /proc/167762/comm /proc/167763/comm /proc/167764/comm /proc/167765/comm /proc/167766/comm /proc/167767/comm /proc/167768/comm /proc/167769/comm /proc/167770/comm /proc/167771/comm /proc/167772/comm /proc/167773/comm /proc/167774/comm /proc/167775/comm /proc/167776/comm /proc/167777/comm /proc/167873/comm /proc/168/comm /proc/168062/comm /proc/168104/comm /proc/168117/comm /proc/168147/comm /proc/168159/comm /proc/168161/comm /proc/168265/comm /proc/168289/comm /proc/168359/comm /proc/168401/comm /proc/168418/comm /proc/168426/comm /proc/168531/comm /proc/168536/comm /proc/168544/comm /proc/168597/comm /proc/168598/comm /proc/168608/comm /proc/168609/comm /proc/168610/comm /proc/169/comm /proc/170/comm /proc/171/comm /proc/172/comm /proc/173/comm /proc/175/comm /proc/177/comm /proc/179/comm /proc/18/comm /proc/180/comm /proc/182/comm /proc/183/comm /proc/184/comm /proc/18485/comm /proc/18504/comm /proc/18526/comm /proc/18551/comm /proc/18570/comm /proc/186/comm /proc/187/comm /proc/188/comm /proc/189/comm /proc/19/comm /proc/191/comm /proc/192/comm /proc/193/comm /proc/194/comm /proc/199/comm /proc/2/comm /proc/20/comm /proc/207/comm /proc/21/comm /proc/21098/comm /proc/21486/comm /proc/215/comm /proc/21557/comm /proc/21558/comm /proc/21574/comm /proc/219/comm /proc/22/comm /proc/220/comm /proc/225/comm /proc/24/comm /proc/247/comm /proc/24819/comm /proc/25/comm /proc/25093/comm /proc/25110/comm /proc/25135/comm /proc/25148/comm /proc/26/comm /proc/267/comm /proc/27/comm /proc/28/comm /proc/285/comm /proc/287/comm /proc/288/comm /proc/289/comm /proc/29079/comm /proc/291/comm /proc/29428/comm /proc/29698/comm /proc/29716/comm /proc/29740/comm /proc/29752/comm /proc/3/comm /proc/30/comm /proc/30252/comm /proc/31/comm /proc/310/comm /proc/311/comm /proc/315/comm /proc/316/comm /proc/317/comm /proc/318/comm /proc/319/comm /proc/32/comm /proc/320/comm /proc/322/comm /proc/33/comm /proc/330/comm /proc/34/comm /proc/34052/comm /proc/34328/comm /proc/34345/comm /proc/34371/comm /proc/34383/comm /proc/36/comm /proc/362/comm /proc/37/comm /proc/38/comm /proc/38826/comm /proc/38835/comm /proc/38838/comm /proc/38919/comm /proc/38944/comm /proc/38966/comm /proc/38996/comm /proc/39/comm /proc/39033/comm /proc/394/comm /proc/397/comm /proc/4/comm /proc/40/comm /proc/41628/comm /proc/41652/comm /proc/41670/comm /proc/41685/comm /proc/41708/comm /proc/41721/comm /proc/41759/comm /proc/41783/comm /proc/41800/comm /proc/41803/comm /proc/41871/comm /proc/41889/comm /proc/41911/comm /proc/41941/comm /proc/42/comm /proc/42044/comm /proc/42099/comm /proc/42202/comm /proc/42230/comm /proc/42255/comm /proc/42976/comm /proc/42994/comm /proc/43/comm /proc/43019/comm /proc/43038/comm /proc/43290/comm /proc/43499/comm /proc/43876/comm /proc/44/comm /proc/44333/comm /proc/44357/comm /proc/44383/comm /proc/44727/comm /proc/44750/comm /proc/44765/comm /proc/44789/comm /proc/44821/comm /proc/44840/comm /proc/45/comm /proc/45191/comm /proc/452/comm /proc/45217/comm /proc/45359/comm /proc/45748/comm /proc/45774/comm /proc/45788/comm /proc/45816/comm /proc/45833/comm /proc/45862/comm /proc/45974/comm /proc/46/comm /proc/46021/comm /proc/46065/comm /proc/47569/comm /proc/47664/comm /proc/47694/comm /proc/47755/comm /proc/47779/comm /proc/47993/comm /proc/48/comm /proc/48007/comm /proc/48056/comm /proc/48130/comm /proc/48728/comm /proc/48751/comm /proc/48845/comm /proc/48868/comm /proc/48918/comm /proc/49/comm /proc/49040/comm /proc/49237/comm /proc/49261/comm /proc/49374/comm /proc/49506/comm /proc/49544/comm /proc/49808/comm /proc/49855/comm /proc/49999/comm /proc/5/comm /proc/50/comm /proc/50022/comm /proc/50158/comm /proc/50254/comm /proc/50362/comm /proc/51/comm /proc/51131/comm /proc/51636/comm /proc/51660/comm /proc/51736/comm /proc/52/comm /proc/520/comm /proc/53814/comm /proc/53837/comm /proc/54/comm /proc/54476/comm /proc/54502/comm /proc/54523/comm /proc/54556/comm /proc/54675/comm /proc/54700/comm /proc/54827/comm /proc/54876/comm /proc/54929/comm /proc/55/comm /proc/56/comm /proc/57/comm /proc/57809/comm /proc/57885/comm /proc/57958/comm /proc/57983/comm /proc/58/comm /proc/58000/comm /proc/58025/comm /proc/58054/comm /proc/58078/comm /proc/58471/comm /proc/58615/comm /proc/58640/comm /proc/58702/comm /proc/58909/comm /proc/58910/comm /proc/58911/comm /proc/58912/comm /proc/59172/comm /proc/59529/comm /proc/59554/comm /proc/59570/comm /proc/59856/comm /proc/59857/comm /proc/59926/comm /proc/59955/comm /proc/6/comm /proc/60/comm /proc/60028/comm /proc/60056/comm /proc/60079/comm /proc/60103/comm /proc/60417/comm /proc/60561/comm /proc/60589/comm /proc/60701/comm /proc/60721/comm /proc/60722/comm /proc/60723/comm /proc/60724/comm /proc/60725/comm /proc/60816/comm /proc/60840/comm /proc/60983/comm /proc/61/comm /proc/613/comm /proc/61342/comm /proc/61366/comm /proc/61607/comm /proc/61643/comm /proc/617/comm /proc/61784/comm /proc/619/comm /proc/62/comm /proc/62119/comm /proc/62142/comm /proc/62237/comm /proc/62357/comm /proc/62395/comm /proc/62454/comm /proc/625/comm /proc/626/comm /proc/62626/comm /proc/62849/comm /proc/62892/comm /proc/63/comm /proc/63089/comm /proc/63133/comm /proc/63152/comm /proc/63211/comm /proc/63247/comm /proc/63285/comm /proc/63305/comm /proc/63485/comm /proc/63503/comm /proc/63510/comm /proc/63614/comm /proc/63665/comm /proc/63666/comm /proc/64/comm /proc/644/comm /proc/64748/comm /proc/64772/comm /proc/649/comm /proc/64909/comm /proc/66/comm /proc/67/comm /proc/67709/comm /proc/67740/comm /proc/67741/comm /proc/67742/comm /proc/67743/comm /proc/67747/comm /proc/67748/comm /proc/67750/comm /proc/67753/comm /proc/67754/comm /proc/67755/comm /proc/67756/comm /proc/67757/comm /proc/67758/comm /proc/67759/comm /proc/68/comm /proc/68208/comm /proc/69/comm /proc/70/comm /proc/704/comm /proc/707/comm /proc/708/comm /proc/72/comm /proc/72193/comm /proc/722/comm /proc/72216/comm /proc/72332/comm /proc/72349/comm /proc/72356/comm /proc/72410/comm /proc/72461/comm /proc/72462/comm /proc/73/comm /proc/73334/comm /proc/73358/comm /proc/74/comm /proc/75/comm /proc/76/comm /proc/77502/comm /proc/77615/comm /proc/77628/comm /proc/78/comm /proc/78233/comm /proc/78256/comm /proc/79/comm /proc/79272/comm /proc/8/comm /proc/80/comm /proc/81/comm /proc/81093/comm /proc/81888/comm /proc/82/comm /proc/83168/comm /proc/83191/comm /proc/83269/comm /proc/83285/comm /proc/83292/comm /proc/83351/comm /proc/83422/comm /proc/83423/comm /proc/84/comm /proc/85/comm /proc/85405/comm /proc/86/comm /proc/867/comm /proc/86820/comm /proc/87/comm /proc/87021/comm /proc/88/comm /proc/90/comm /proc/91/comm /proc/91265/comm /proc/92/comm /proc/9225/comm /proc/9242/comm /proc/9258/comm /proc/92865/comm /proc/92903/comm /proc/93/comm /proc/93013/comm /proc/93045/comm /proc/93131/comm /proc/93251/comm /proc/9340/comm /proc/93891/comm /proc/94/comm /proc/95114/comm /proc/95138/comm /proc/95471/comm /proc/95532/comm /proc/95533/comm /proc/96/comm /proc/96406/comm /proc/96434/comm /proc/96496/comm /proc/96534/comm /proc/96692/comm /proc/96869/comm /proc/97/comm /proc/97003/comm /proc/97174/comm /proc/97185/comm /proc/97657/comm /proc/97860/comm /proc/98/comm /proc/98104/comm /proc/98141/comm /proc/98217/comm /proc/98241/comm /proc/98349/comm /proc/98367/comm /proc/98374/comm /proc/98548/comm /proc/98601/comm /proc/98602/comm /proc/99/comm /proc/9956/comm /proc/99862/comm /proc/99888/comm /proc/99948/comm /proc/99995/comm /proc/self/comm /proc/thread-self/comm
+ '[' -n '' ']'
+ rm -f /var/run/libvirtd.pid
+ [[ -c /dev/kvm ]]
+ chmod 660 /dev/kvm
+ chown root:kvm /dev/kvm
+ CGROUPS=
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/blkio ']'
+ grep -w blkio /sys/fs/cgroup/cgroup.controllers
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/cpu ']'
+ grep -w cpu /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=cpu,
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/devices ']'
+ grep -w devices /sys/fs/cgroup/cgroup.controllers
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/freezer ']'
+ grep -w freezer /sys/fs/cgroup/cgroup.controllers
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/hugetlb ']'
+ grep -w hugetlb /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=hugetlb,
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/memory ']'
+ grep -w memory /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=memory,
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/net_cls ']'
+ grep -w net_cls /sys/fs/cgroup/cgroup.controllers
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/perf_event ']'
+ grep -w perf_event /sys/fs/cgroup/cgroup.controllers
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/rdma ']'
+ grep -w rdma /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=rdma,
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/misc ']'
+ grep -w misc /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=misc,
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/pids ']'
+ grep -w pids /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=pids,
+ cgcreate -g cpu,hugetlb,memory,rdma,misc,pids:/osh-libvirt
++ cat /proc/meminfo
++ grep HugePages_Total
++ tr -cd '[:digit:]'
+ hp_count=0
+ '[' 00 -gt 0 ']'
+ '[' -n 457eb676-33da-42ec-9a8c-9293d545c337 ']'
+ cgexec -g cpu,hugetlb,memory,rdma,misc,pids:/osh-libvirt systemd-run --scope --slice=system libvirtd --listen
++ mktemp --suffix .xml
+ tmpsecret=/tmp/tmp.5hgOkQDq6j.xml
+ '[' -n '' ']'
+ trap cleanup EXIT
+ TIMEOUT=60
+ [[ ! -f /var/run/libvirtd.pid ]]
+ [[ 60 -gt 0 ]]
+ let TIMEOUT-=1
+ sleep 1
Running scope as unit: run-rd7925da624f245f3a2881e5fa6afdbb9.scope
+ [[ ! -f /var/run/libvirtd.pid ]]
+ TIMEOUT=10
+ [[ ! -e /var/run/libvirt/libvirt-sock ]]
+ '[' -z '' ']'
+ '[' -n cinder ']'
++ awk '/key/{print $3}' /etc/ceph/ceph.client.cinder.keyring
+ CEPH_CINDER_KEYRING=AQBufp5qfYBOJRAA8UUVRXwFIeofvtRjQjSd/g==
+ '[' -n cinder ']'
+ create_virsh_libvirt_secret cinder 457eb676-33da-42ec-9a8c-9293d545c337 AQBufp5qfYBOJRAA8UUVRXwFIeofvtRjQjSd/g==
+ sec_user=cinder
+ sec_uuid=457eb676-33da-42ec-9a8c-9293d545c337
+ sec_ceph_keyring=AQBufp5qfYBOJRAA8UUVRXwFIeofvtRjQjSd/g==
+ cat
+ virsh secret-define --file /tmp/tmp.5hgOkQDq6j.xml
Secret 457eb676-33da-42ec-9a8c-9293d545c337 created

+ virsh secret-set-value --secret 457eb676-33da-42ec-9a8c-9293d545c337 --base64 AQBufp5qfYBOJRAA8UUVRXwFIeofvtRjQjSd/g==
error: Passing secret value as command-line argument is insecure!
Secret value set

+ '[' -n '' ']'
+ cleanup
+ rm -f /tmp/tmp.5hgOkQDq6j.xml
+ '[' -n '' ']'
++ cat /var/run/libvirtd.pid
+ LIBVIRTD_PID=168630
+ kill 168630
+ tail --pid=168630 -f /dev/null
+ cgexec -g cpu,hugetlb,memory,rdma,misc,pids:/osh-libvirt systemd-run --scope --slice=system libvirtd --listen
Running scope as unit: run-rb33b2e9a675f41bd84efc4d9aa71b2fe.scope