+ wait_for_file /etc/pki/CA/cacert.pem
+ local file=/etc/pki/CA/cacert.pem
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ sleep 1
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ sleep 1
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ sleep 1
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ sleep 1
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ sleep 1
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ wait_for_file /etc/pki/qemu/ca-cert.pem
+ local file=/etc/pki/qemu/ca-cert.pem
+ '[' '!' -f /etc/pki/qemu/ca-cert.pem ']'
+ wait_for_file /etc/pki/libvirt/servercert.pem
+ local file=/etc/pki/libvirt/servercert.pem
+ '[' '!' -f /etc/pki/libvirt/servercert.pem ']'
+ wait_for_file /etc/pki/libvirt/clientcert.pem
+ local file=/etc/pki/libvirt/clientcert.pem
+ '[' '!' -f /etc/pki/libvirt/clientcert.pem ']'
+ wait_for_file /etc/pki/qemu/server-cert.pem
+ local file=/etc/pki/qemu/server-cert.pem
+ '[' '!' -f /etc/pki/qemu/server-cert.pem ']'
+ wait_for_file /etc/pki/qemu/client-cert.pem
+ local file=/etc/pki/qemu/client-cert.pem
+ '[' '!' -f /etc/pki/qemu/client-cert.pem ']'
+ wait_for_file /etc/pki/libvirt/private/serverkey.pem
+ local file=/etc/pki/libvirt/private/serverkey.pem
+ '[' '!' -f /etc/pki/libvirt/private/serverkey.pem ']'
+ wait_for_file /etc/pki/libvirt/private/clientkey.pem
+ local file=/etc/pki/libvirt/private/clientkey.pem
+ '[' '!' -f /etc/pki/libvirt/private/clientkey.pem ']'
+ wait_for_file /etc/pki/qemu/server-key.pem
+ local file=/etc/pki/qemu/server-key.pem
+ '[' '!' -f /etc/pki/qemu/server-key.pem ']'
+ wait_for_file /etc/pki/qemu/client-key.pem
+ local file=/etc/pki/qemu/client-key.pem
+ '[' '!' -f /etc/pki/qemu/client-key.pem ']'
+ wait_for_file /etc/pki/libvirt-vnc/ca-cert.pem
+ local file=/etc/pki/libvirt-vnc/ca-cert.pem
+ '[' '!' -f /etc/pki/libvirt-vnc/ca-cert.pem ']'
+ wait_for_file /etc/pki/libvirt-vnc/server-cert.pem
+ local file=/etc/pki/libvirt-vnc/server-cert.pem
+ '[' '!' -f /etc/pki/libvirt-vnc/server-cert.pem ']'
+ wait_for_file /etc/pki/libvirt-vnc/server-key.pem
+ local file=/etc/pki/libvirt-vnc/server-key.pem
+ '[' '!' -f /etc/pki/libvirt-vnc/server-key.pem ']'
++ grep -w libvirtd
++ cat /proc/1/comm /proc/10/comm /proc/100/comm /proc/100518/comm /proc/101618/comm /proc/10185/comm /proc/102/comm /proc/10207/comm /proc/10208/comm /proc/102221/comm /proc/102245/comm /proc/102372/comm /proc/102597/comm /proc/102614/comm /proc/102615/comm /proc/103/comm /proc/103668/comm /proc/103695/comm /proc/103711/comm /proc/103736/comm /proc/103969/comm /proc/103996/comm /proc/104/comm /proc/104147/comm /proc/104149/comm /proc/105/comm /proc/105439/comm /proc/105534/comm /proc/105732/comm /proc/105759/comm /proc/105856/comm /proc/105892/comm /proc/105898/comm /proc/106/comm /proc/106021/comm /proc/106022/comm /proc/106032/comm /proc/106183/comm /proc/10691/comm /proc/10692/comm /proc/107572/comm /proc/107599/comm /proc/107639/comm /proc/107689/comm /proc/108/comm /proc/108234/comm /proc/109/comm /proc/11/comm /proc/110/comm /proc/111/comm /proc/111700/comm /proc/111720/comm /proc/112/comm /proc/112748/comm /proc/113/comm /proc/114/comm /proc/114316/comm /proc/115/comm /proc/116/comm /proc/116213/comm /proc/117/comm /proc/117449/comm /proc/117867/comm /proc/117879/comm /proc/117880/comm /proc/1185/comm /proc/119288/comm /proc/12/comm /proc/120647/comm /proc/120672/comm /proc/120787/comm /proc/120830/comm /proc/12126/comm /proc/121342/comm /proc/12157/comm /proc/121810/comm /proc/12184/comm /proc/122003/comm /proc/12235/comm /proc/12255/comm /proc/122700/comm /proc/122709/comm /proc/123237/comm /proc/123260/comm /proc/123836/comm /proc/12493/comm /proc/12525/comm /proc/125758/comm /proc/12580/comm /proc/12606/comm /proc/12625/comm /proc/128050/comm /proc/128086/comm /proc/128157/comm /proc/128855/comm /proc/128869/comm /proc/128870/comm /proc/1290/comm /proc/1291/comm /proc/1292/comm /proc/1293/comm /proc/13/comm /proc/130298/comm /proc/130299/comm /proc/137463/comm /proc/137464/comm /proc/137466/comm /proc/137467/comm /proc/137583/comm /proc/138160/comm /proc/138188/comm /proc/138605/comm /proc/138638/comm /proc/138651/comm /proc/138681/comm /proc/138682/comm /proc/138683/comm /proc/138684/comm /proc/139197/comm /proc/139220/comm /proc/1395/comm /proc/1399/comm /proc/14/comm /proc/140174/comm /proc/140195/comm /proc/140224/comm /proc/140254/comm /proc/140446/comm /proc/140448/comm /proc/140491/comm /proc/140516/comm /proc/140567/comm /proc/140581/comm /proc/140848/comm /proc/140870/comm /proc/140933/comm /proc/140959/comm /proc/141072/comm /proc/141254/comm /proc/141283/comm /proc/141712/comm /proc/141814/comm /proc/142028/comm /proc/142051/comm /proc/142107/comm /proc/142199/comm /proc/142200/comm /proc/142244/comm /proc/142261/comm /proc/142267/comm /proc/142336/comm /proc/142337/comm /proc/142347/comm /proc/142516/comm /proc/144244/comm /proc/144335/comm /proc/144438/comm /proc/144510/comm /proc/144535/comm /proc/144607/comm /proc/144631/comm /proc/144657/comm /proc/144775/comm /proc/144799/comm /proc/144819/comm /proc/144862/comm /proc/145074/comm /proc/145101/comm /proc/145129/comm /proc/145292/comm /proc/145324/comm /proc/145338/comm /proc/145553/comm /proc/145763/comm /proc/145851/comm /proc/1466/comm /proc/1470/comm /proc/1479/comm /proc/15/comm /proc/150188/comm /proc/150199/comm /proc/150250/comm /proc/150544/comm /proc/150956/comm /proc/151004/comm /proc/151013/comm /proc/151014/comm /proc/152529/comm /proc/16/comm /proc/166/comm /proc/167/comm /proc/167344/comm /proc/167360/comm /proc/168/comm /proc/168519/comm /proc/168550/comm /proc/168603/comm /proc/169/comm /proc/169161/comm /proc/169186/comm /proc/169196/comm /proc/169560/comm /proc/169597/comm /proc/169598/comm /proc/169708/comm /proc/169730/comm /proc/169731/comm /proc/170/comm /proc/170294/comm /proc/170335/comm /proc/170416/comm /proc/170721/comm /proc/170826/comm /proc/170827/comm /proc/170884/comm /proc/170886/comm /proc/171/comm /proc/171337/comm /proc/171501/comm /proc/171504/comm /proc/171697/comm /proc/171739/comm /proc/171916/comm /proc/171933/comm /proc/171939/comm /proc/171994/comm /proc/171996/comm /proc/172/comm /proc/172018/comm /proc/172243/comm /proc/172621/comm /proc/173/comm /proc/173611/comm /proc/173654/comm /proc/173684/comm /proc/173695/comm /proc/173726/comm /proc/173752/comm /proc/174/comm /proc/174015/comm /proc/174039/comm /proc/174053/comm /proc/174086/comm /proc/174624/comm /proc/174637/comm /proc/174744/comm /proc/174750/comm /proc/176/comm /proc/177/comm /proc/177820/comm /proc/179564/comm /proc/18/comm /proc/180/comm /proc/180825/comm /proc/180856/comm /proc/180869/comm /proc/180913/comm /proc/180937/comm /proc/181/comm /proc/181391/comm /proc/181563/comm /proc/181666/comm /proc/181751/comm /proc/181784/comm /proc/181853/comm /proc/181864/comm /proc/183/comm /proc/183185/comm /proc/183186/comm /proc/183187/comm /proc/183670/comm /proc/183678/comm /proc/183710/comm /proc/183711/comm /proc/183712/comm /proc/183726/comm /proc/183738/comm /proc/183739/comm /proc/183825/comm /proc/184125/comm /proc/184127/comm /proc/184130/comm /proc/184938/comm /proc/185/comm /proc/185097/comm /proc/185251/comm /proc/185274/comm /proc/185501/comm /proc/185519/comm /proc/185525/comm /proc/185605/comm /proc/185606/comm /proc/185616/comm /proc/186/comm /proc/186032/comm /proc/186222/comm /proc/186238/comm /proc/186257/comm /proc/186591/comm /proc/186609/comm /proc/186630/comm /proc/186684/comm /proc/186752/comm /proc/187/comm /proc/187040/comm /proc/187298/comm /proc/187367/comm /proc/187390/comm /proc/187417/comm /proc/187568/comm /proc/187589/comm /proc/187603/comm /proc/187605/comm /proc/187640/comm /proc/187665/comm /proc/187690/comm /proc/187692/comm /proc/187693/comm /proc/187694/comm /proc/187695/comm /proc/187696/comm /proc/187697/comm /proc/188/comm /proc/189/comm /proc/19/comm /proc/190/comm /proc/191/comm /proc/192/comm /proc/193/comm /proc/194/comm /proc/19403/comm /proc/19424/comm /proc/19445/comm /proc/19471/comm /proc/19489/comm /proc/195/comm /proc/2/comm /proc/20/comm /proc/21/comm /proc/211/comm /proc/21523/comm /proc/21533/comm /proc/21534/comm /proc/21547/comm /proc/219/comm /proc/22/comm /proc/220/comm /proc/225/comm /proc/24/comm /proc/24360/comm /proc/24635/comm /proc/24652/comm /proc/24676/comm /proc/24688/comm /proc/247/comm /proc/25/comm /proc/26/comm /proc/266/comm /proc/27/comm /proc/28/comm /proc/286/comm /proc/288/comm /proc/28809/comm /proc/289/comm /proc/290/comm /proc/29089/comm /proc/29108/comm /proc/29132/comm /proc/29145/comm /proc/292/comm /proc/29636/comm /proc/3/comm /proc/30/comm /proc/31/comm /proc/311/comm /proc/312/comm /proc/32/comm /proc/33/comm /proc/33324/comm /proc/33604/comm /proc/33621/comm /proc/33645/comm /proc/33658/comm /proc/34/comm /proc/35237/comm /proc/35239/comm /proc/354/comm /proc/358/comm /proc/36/comm /proc/37/comm /proc/38/comm /proc/387/comm /proc/39/comm /proc/390/comm /proc/39004/comm /proc/39038/comm /proc/39056/comm /proc/39061/comm /proc/39064/comm /proc/39097/comm /proc/391/comm /proc/39144/comm /proc/39163/comm /proc/39176/comm /proc/39177/comm /proc/39250/comm /proc/39266/comm /proc/39297/comm /proc/39304/comm /proc/394/comm /proc/39420/comm /proc/39476/comm /proc/39646/comm /proc/39670/comm /proc/39698/comm /proc/4/comm /proc/40/comm /proc/40351/comm /proc/40373/comm /proc/40396/comm /proc/40414/comm /proc/40646/comm /proc/40857/comm /proc/41277/comm /proc/41703/comm /proc/41728/comm /proc/41765/comm /proc/42/comm /proc/42101/comm /proc/42107/comm /proc/42153/comm /proc/42154/comm /proc/42196/comm /proc/42209/comm /proc/42563/comm /proc/42587/comm /proc/42912/comm /proc/43/comm /proc/43081/comm /proc/43104/comm /proc/43118/comm /proc/43142/comm /proc/43157/comm /proc/43187/comm /proc/43298/comm /proc/43343/comm /proc/43385/comm /proc/44/comm /proc/444/comm /proc/445/comm /proc/446/comm /proc/45/comm /proc/45338/comm /proc/45426/comm /proc/45460/comm /proc/45494/comm /proc/45518/comm /proc/45735/comm /proc/45748/comm /proc/45781/comm /proc/458/comm /proc/45886/comm /proc/46/comm /proc/46225/comm /proc/46250/comm /proc/46329/comm /proc/46353/comm /proc/46398/comm /proc/46526/comm /proc/46713/comm /proc/46736/comm /proc/46872/comm /proc/47031/comm /proc/47062/comm /proc/47601/comm /proc/47625/comm /proc/47738/comm /proc/47792/comm /proc/47889/comm /proc/47918/comm /proc/47985/comm /proc/48/comm /proc/48035/comm /proc/49/comm /proc/49775/comm /proc/49803/comm /proc/49918/comm /proc/49941/comm /proc/5/comm /proc/50/comm /proc/50007/comm /proc/50101/comm /proc/50266/comm /proc/50346/comm /proc/50445/comm /proc/51/comm /proc/515/comm /proc/518/comm /proc/52/comm /proc/54/comm /proc/54140/comm /proc/54162/comm /proc/54800/comm /proc/54832/comm /proc/54833/comm /proc/54863/comm /proc/54882/comm /proc/54912/comm /proc/55/comm /proc/55034/comm /proc/55057/comm /proc/55123/comm /proc/55162/comm /proc/55207/comm /proc/55309/comm /proc/56/comm /proc/57/comm /proc/58/comm /proc/584/comm /proc/58704/comm /proc/58876/comm /proc/58921/comm /proc/58990/comm /proc/59015/comm /proc/59044/comm /proc/59069/comm /proc/59087/comm /proc/59117/comm /proc/59419/comm /proc/59562/comm /proc/59956/comm /proc/59982/comm /proc/6/comm /proc/60/comm /proc/60230/comm /proc/60237/comm /proc/60238/comm /proc/60251/comm /proc/60280/comm /proc/60281/comm /proc/60345/comm /proc/60631/comm /proc/60655/comm /proc/60779/comm /proc/60803/comm /proc/609/comm /proc/61/comm /proc/61074/comm /proc/61100/comm /proc/61114/comm /proc/61141/comm /proc/61159/comm /proc/61189/comm /proc/612/comm /proc/61223/comm /proc/615/comm /proc/61598/comm /proc/61624/comm /proc/61666/comm /proc/61845/comm /proc/61884/comm /proc/62/comm /proc/621/comm /proc/622/comm /proc/62219/comm /proc/62234/comm /proc/62235/comm /proc/62236/comm /proc/62237/comm /proc/62238/comm /proc/62331/comm /proc/62355/comm /proc/62464/comm /proc/62486/comm /proc/62712/comm /proc/62787/comm /proc/63/comm /proc/63167/comm /proc/63190/comm /proc/63292/comm /proc/63318/comm /proc/63394/comm /proc/63401/comm /proc/63453/comm /proc/63560/comm /proc/6357/comm /proc/63599/comm /proc/63784/comm /proc/63827/comm /proc/63872/comm /proc/64/comm /proc/64081/comm /proc/641/comm /proc/64227/comm /proc/64281/comm /proc/64358/comm /proc/64444/comm /proc/64483/comm /proc/64502/comm /proc/646/comm /proc/64716/comm /proc/64739/comm /proc/65062/comm /proc/65079/comm /proc/65085/comm /proc/65132/comm /proc/65133/comm /proc/65143/comm /proc/65278/comm /proc/66/comm /proc/66861/comm /proc/66885/comm /proc/67/comm /proc/68/comm /proc/69/comm /proc/697/comm /proc/69946/comm /proc/70/comm /proc/702/comm /proc/70269/comm /proc/70295/comm /proc/70296/comm /proc/70297/comm /proc/70298/comm /proc/70299/comm /proc/70300/comm /proc/70302/comm /proc/70304/comm /proc/70306/comm /proc/70308/comm /proc/70310/comm /proc/70311/comm /proc/70313/comm /proc/70314/comm /proc/705/comm /proc/706/comm /proc/719/comm /proc/72/comm /proc/73/comm /proc/74/comm /proc/74233/comm /proc/75/comm /proc/75867/comm /proc/76/comm /proc/76089/comm /proc/76114/comm /proc/76320/comm /proc/76336/comm /proc/76342/comm /proc/76395/comm /proc/76396/comm /proc/76406/comm /proc/76494/comm /proc/77621/comm /proc/77645/comm /proc/78/comm /proc/78810/comm /proc/79/comm /proc/8/comm /proc/80/comm /proc/80510/comm /proc/81/comm /proc/82/comm /proc/82886/comm /proc/82899/comm /proc/83567/comm /proc/83590/comm /proc/84/comm /proc/84367/comm /proc/85/comm /proc/86/comm /proc/864/comm /proc/86440/comm /proc/87/comm /proc/88/comm /proc/89364/comm /proc/89513/comm /proc/89538/comm /proc/89676/comm /proc/89693/comm /proc/89701/comm /proc/89910/comm /proc/89911/comm /proc/89921/comm /proc/90/comm /proc/90059/comm /proc/9079/comm /proc/9096/comm /proc/91/comm /proc/9112/comm /proc/9197/comm /proc/92/comm /proc/93/comm /proc/93741/comm /proc/93765/comm /proc/93787/comm /proc/93830/comm /proc/94/comm /proc/94313/comm /proc/94381/comm /proc/95106/comm /proc/95928/comm /proc/96/comm /proc/96038/comm /proc/97/comm /proc/97731/comm /proc/98/comm /proc/9815/comm /proc/99/comm /proc/self/comm /proc/thread-self/comm
+ '[' -n '' ']'
+ rm -f /var/run/libvirtd.pid
+ [[ -c /dev/kvm ]]
+ chmod 660 /dev/kvm
+ chown root:kvm /dev/kvm
+ CGROUPS=
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/blkio ']'
+ grep -w blkio /sys/fs/cgroup/cgroup.controllers
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/cpu ']'
+ grep -w cpu /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=cpu,
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/devices ']'
+ grep -w devices /sys/fs/cgroup/cgroup.controllers
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/freezer ']'
+ grep -w freezer /sys/fs/cgroup/cgroup.controllers
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/hugetlb ']'
+ grep -w hugetlb /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=hugetlb,
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/memory ']'
+ grep -w memory /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=memory,
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/net_cls ']'
+ grep -w net_cls /sys/fs/cgroup/cgroup.controllers
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/perf_event ']'
+ grep -w perf_event /sys/fs/cgroup/cgroup.controllers
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/rdma ']'
+ grep -w rdma /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=rdma,
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/misc ']'
+ grep -w misc /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=misc,
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/pids ']'
+ grep -w pids /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=pids,
+ cgcreate -g cpu,hugetlb,memory,rdma,misc,pids:/osh-libvirt
++ cat /proc/meminfo
++ grep HugePages_Total
++ tr -cd '[:digit:]'
+ hp_count=0
+ '[' 00 -gt 0 ']'
+ '[' -n 457eb676-33da-42ec-9a8c-9293d545c337 ']'
+ cgexec -g cpu,hugetlb,memory,rdma,misc,pids:/osh-libvirt systemd-run --scope --slice=system libvirtd --listen
++ mktemp --suffix .xml
+ tmpsecret=/tmp/tmp.ogMorXjqwD.xml
+ '[' -n '' ']'
+ trap cleanup EXIT
+ TIMEOUT=60
+ [[ ! -f /var/run/libvirtd.pid ]]
+ [[ 60 -gt 0 ]]
+ let TIMEOUT-=1
+ sleep 1
Running as unit: run-r74557a54f36f4bb28172c57f0db4f145.scope; invocation ID: b3e2f704e72446beaac2626a7389deb1
+ [[ ! -f /var/run/libvirtd.pid ]]
+ TIMEOUT=10
+ [[ ! -e /var/run/libvirt/libvirt-sock ]]
+ '[' -z '' ']'
+ '[' -n cinder ']'
++ awk '/key/{print $3}' /etc/ceph/ceph.client.cinder.keyring
+ CEPH_CINDER_KEYRING=AQBIZPFpBbJmEBAAY5Dv0bHusJ2xTiErZRY0sg==
+ '[' -n cinder ']'
+ create_virsh_libvirt_secret cinder 457eb676-33da-42ec-9a8c-9293d545c337 AQBIZPFpBbJmEBAAY5Dv0bHusJ2xTiErZRY0sg==
+ sec_user=cinder
+ sec_uuid=457eb676-33da-42ec-9a8c-9293d545c337
+ sec_ceph_keyring=AQBIZPFpBbJmEBAAY5Dv0bHusJ2xTiErZRY0sg==
+ cat
+ virsh secret-define --file /tmp/tmp.ogMorXjqwD.xml
Secret 457eb676-33da-42ec-9a8c-9293d545c337 created

+ virsh secret-set-value --secret 457eb676-33da-42ec-9a8c-9293d545c337 --base64 AQBIZPFpBbJmEBAAY5Dv0bHusJ2xTiErZRY0sg==
error: Passing secret value as command-line argument is insecure!
Secret value set

+ '[' -n '' ']'
+ '[' -n '' ']'
+ cleanup
+ rm -f /tmp/tmp.ogMorXjqwD.xml
+ '[' -n '' ']'
++ cat /var/run/libvirtd.pid
+ LIBVIRTD_PID=187718
+ kill 187718
+ tail --pid=187718 -f /dev/null
+ cgexec -g cpu,hugetlb,memory,rdma,misc,pids:/osh-libvirt systemd-run --scope --slice=system libvirtd --listen
Running as unit: run-r2a34da0ed6884267abaf08ee9868ca62.scope; invocation ID: ae0d8e6dfb284b63be0fe7b1669b6df2