+ wait_for_file /etc/pki/CA/cacert.pem
+ local file=/etc/pki/CA/cacert.pem
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ sleep 1
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ sleep 1
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ sleep 1
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ sleep 1
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ sleep 1
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ wait_for_file /etc/pki/qemu/ca-cert.pem
+ local file=/etc/pki/qemu/ca-cert.pem
+ '[' '!' -f /etc/pki/qemu/ca-cert.pem ']'
+ wait_for_file /etc/pki/libvirt/servercert.pem
+ local file=/etc/pki/libvirt/servercert.pem
+ '[' '!' -f /etc/pki/libvirt/servercert.pem ']'
+ wait_for_file /etc/pki/libvirt/clientcert.pem
+ local file=/etc/pki/libvirt/clientcert.pem
+ '[' '!' -f /etc/pki/libvirt/clientcert.pem ']'
+ wait_for_file /etc/pki/qemu/server-cert.pem
+ local file=/etc/pki/qemu/server-cert.pem
+ '[' '!' -f /etc/pki/qemu/server-cert.pem ']'
+ wait_for_file /etc/pki/qemu/client-cert.pem
+ local file=/etc/pki/qemu/client-cert.pem
+ '[' '!' -f /etc/pki/qemu/client-cert.pem ']'
+ wait_for_file /etc/pki/libvirt/private/serverkey.pem
+ local file=/etc/pki/libvirt/private/serverkey.pem
+ '[' '!' -f /etc/pki/libvirt/private/serverkey.pem ']'
+ wait_for_file /etc/pki/libvirt/private/clientkey.pem
+ local file=/etc/pki/libvirt/private/clientkey.pem
+ '[' '!' -f /etc/pki/libvirt/private/clientkey.pem ']'
+ wait_for_file /etc/pki/qemu/server-key.pem
+ local file=/etc/pki/qemu/server-key.pem
+ '[' '!' -f /etc/pki/qemu/server-key.pem ']'
+ wait_for_file /etc/pki/qemu/client-key.pem
+ local file=/etc/pki/qemu/client-key.pem
+ '[' '!' -f /etc/pki/qemu/client-key.pem ']'
+ wait_for_file /etc/pki/libvirt-vnc/ca-cert.pem
+ local file=/etc/pki/libvirt-vnc/ca-cert.pem
+ '[' '!' -f /etc/pki/libvirt-vnc/ca-cert.pem ']'
+ wait_for_file /etc/pki/libvirt-vnc/server-cert.pem
+ local file=/etc/pki/libvirt-vnc/server-cert.pem
+ '[' '!' -f /etc/pki/libvirt-vnc/server-cert.pem ']'
+ wait_for_file /etc/pki/libvirt-vnc/server-key.pem
+ local file=/etc/pki/libvirt-vnc/server-key.pem
+ '[' '!' -f /etc/pki/libvirt-vnc/server-key.pem ']'
++ grep -w libvirtd
++ cat /proc/1/comm /proc/10/comm /proc/100/comm /proc/100091/comm /proc/100116/comm /proc/100157/comm /proc/100181/comm /proc/100471/comm /proc/100772/comm /proc/101442/comm /proc/102/comm /proc/103/comm /proc/103004/comm /proc/10327/comm /proc/104/comm /proc/105/comm /proc/106/comm /proc/108/comm /proc/108274/comm /proc/10834/comm /proc/10835/comm /proc/1084/comm /proc/108719/comm /proc/108741/comm /proc/109/comm /proc/109130/comm /proc/109148/comm /proc/109149/comm /proc/11/comm /proc/110/comm /proc/110505/comm /proc/110541/comm /proc/110542/comm /proc/110575/comm /proc/110933/comm /proc/111/comm /proc/111266/comm /proc/111268/comm /proc/112/comm /proc/112393/comm /proc/112541/comm /proc/112768/comm /proc/112793/comm /proc/112932/comm /proc/112949/comm /proc/112957/comm /proc/113/comm /proc/113023/comm /proc/113024/comm /proc/113034/comm /proc/113203/comm /proc/114/comm /proc/114517/comm /proc/114542/comm /proc/114556/comm /proc/114588/comm /proc/115/comm /proc/115017/comm /proc/116/comm /proc/116583/comm /proc/117/comm /proc/119283/comm /proc/12/comm /proc/121756/comm /proc/121764/comm /proc/12219/comm /proc/12249/comm /proc/12258/comm /proc/12292/comm /proc/12331/comm /proc/12343/comm /proc/123604/comm /proc/123715/comm /proc/123716/comm /proc/123724/comm /proc/124182/comm /proc/124204/comm /proc/124205/comm /proc/124680/comm /proc/12582/comm /proc/12612/comm /proc/12667/comm /proc/12693/comm /proc/12713/comm /proc/127557/comm /proc/127588/comm /proc/127593/comm /proc/127622/comm /proc/128062/comm /proc/128270/comm /proc/128633/comm /proc/128773/comm /proc/129505/comm /proc/129519/comm /proc/129573/comm /proc/13/comm /proc/130127/comm /proc/130155/comm /proc/130609/comm /proc/131424/comm /proc/132429/comm /proc/132507/comm /proc/133702/comm /proc/133706/comm /proc/134604/comm /proc/134626/comm /proc/135298/comm /proc/135324/comm /proc/135326/comm /proc/136585/comm /proc/136586/comm /proc/14/comm /proc/1415/comm /proc/143476/comm /proc/143629/comm /proc/143630/comm /proc/143632/comm /proc/143633/comm /proc/143837/comm /proc/144452/comm /proc/144477/comm /proc/144918/comm /proc/144954/comm /proc/144974/comm /proc/145009/comm /proc/145010/comm /proc/145011/comm /proc/145012/comm /proc/145458/comm /proc/145487/comm /proc/146379/comm /proc/146471/comm /proc/146884/comm /proc/146907/comm /proc/146928/comm /proc/146953/comm /proc/147024/comm /proc/147130/comm /proc/147149/comm /proc/147178/comm /proc/147211/comm /proc/147255/comm /proc/147269/comm /proc/147336/comm /proc/147363/comm /proc/147503/comm /proc/147527/comm /proc/147714/comm /proc/147758/comm /proc/147968/comm /proc/147978/comm /proc/148333/comm /proc/148490/comm /proc/15/comm /proc/150232/comm /proc/150316/comm /proc/152634/comm /proc/152776/comm /proc/152856/comm /proc/1537/comm /proc/1538/comm /proc/1539/comm /proc/1540/comm /proc/1544/comm /proc/156276/comm /proc/156283/comm /proc/156373/comm /proc/16/comm /proc/1611/comm /proc/161289/comm /proc/1615/comm /proc/1624/comm /proc/162769/comm /proc/162836/comm /proc/162961/comm /proc/163011/comm /proc/163055/comm /proc/163146/comm /proc/163179/comm /proc/163210/comm /proc/163235/comm /proc/163262/comm /proc/163296/comm /proc/163320/comm /proc/163362/comm /proc/163473/comm /proc/163839/comm /proc/163863/comm /proc/165/comm /proc/166/comm /proc/167/comm /proc/168/comm /proc/168815/comm /proc/169/comm /proc/169528/comm /proc/169641/comm /proc/169723/comm /proc/170/comm /proc/171/comm /proc/171080/comm /proc/171442/comm /proc/172/comm /proc/172211/comm /proc/173/comm /proc/173791/comm /proc/173798/comm /proc/173801/comm /proc/174/comm /proc/174154/comm /proc/174214/comm /proc/174243/comm /proc/174244/comm /proc/174256/comm /proc/174321/comm /proc/174334/comm /proc/174335/comm /proc/174899/comm /proc/174980/comm /proc/174987/comm /proc/175340/comm /proc/175341/comm /proc/175344/comm /proc/175345/comm /proc/176/comm /proc/176147/comm /proc/176350/comm /proc/176374/comm /proc/176505/comm /proc/176531/comm /proc/176539/comm /proc/176589/comm /proc/176590/comm /proc/176600/comm /proc/176852/comm /proc/178062/comm /proc/178088/comm /proc/178122/comm /proc/178143/comm /proc/178323/comm /proc/178348/comm /proc/178801/comm /proc/178818/comm /proc/178920/comm /proc/179/comm /proc/179803/comm /proc/18/comm /proc/180/comm /proc/181768/comm /proc/181785/comm /proc/181786/comm /proc/182/comm /proc/182508/comm /proc/183/comm /proc/184826/comm /proc/184849/comm /proc/185/comm /proc/185547/comm /proc/185583/comm /proc/185659/comm /proc/185680/comm /proc/185834/comm /proc/185845/comm /proc/186/comm /proc/187/comm /proc/187226/comm /proc/187227/comm /proc/187228/comm /proc/187393/comm /proc/187429/comm /proc/187453/comm /proc/187486/comm /proc/187499/comm /proc/187500/comm /proc/18762/comm /proc/18782/comm /proc/187997/comm /proc/187998/comm /proc/188/comm /proc/188000/comm /proc/188001/comm /proc/188002/comm /proc/188003/comm /proc/188004/comm /proc/18804/comm /proc/18832/comm /proc/18849/comm /proc/189/comm /proc/189253/comm /proc/189318/comm /proc/189677/comm /proc/189678/comm /proc/189705/comm /proc/189824/comm /proc/189839/comm /proc/189840/comm /proc/189841/comm /proc/189842/comm /proc/189843/comm /proc/189844/comm /proc/189943/comm /proc/189948/comm /proc/19/comm /proc/190/comm /proc/190282/comm /proc/190602/comm /proc/190650/comm /proc/190672/comm /proc/190778/comm /proc/190829/comm /proc/190854/comm /proc/190963/comm /proc/190990/comm /proc/190996/comm /proc/191/comm /proc/191084/comm /proc/191085/comm /proc/191095/comm /proc/191183/comm /proc/191186/comm /proc/191231/comm /proc/191232/comm /proc/191233/comm /proc/192/comm /proc/193/comm /proc/195/comm /proc/198/comm /proc/2/comm /proc/20/comm /proc/21/comm /proc/216/comm /proc/21789/comm /proc/21849/comm /proc/21850/comm /proc/21870/comm /proc/219/comm /proc/22/comm /proc/220/comm /proc/225/comm /proc/24/comm /proc/247/comm /proc/25/comm /proc/25111/comm /proc/25390/comm /proc/25407/comm /proc/25431/comm /proc/25443/comm /proc/26/comm /proc/26218/comm /proc/27/comm /proc/28/comm /proc/284/comm /proc/286/comm /proc/288/comm /proc/290/comm /proc/29821/comm /proc/3/comm /proc/30/comm /proc/30095/comm /proc/30111/comm /proc/30136/comm /proc/30148/comm /proc/309/comm /proc/30915/comm /proc/31/comm /proc/310/comm /proc/314/comm /proc/315/comm /proc/316/comm /proc/317/comm /proc/318/comm /proc/32/comm /proc/320/comm /proc/321/comm /proc/322/comm /proc/323/comm /proc/324/comm /proc/33/comm /proc/34/comm /proc/34462/comm /proc/34749/comm /proc/34767/comm /proc/34790/comm /proc/34803/comm /proc/36/comm /proc/363/comm /proc/37/comm /proc/38/comm /proc/382/comm /proc/39/comm /proc/39327/comm /proc/39329/comm /proc/394/comm /proc/39502/comm /proc/39527/comm /proc/39551/comm /proc/39578/comm /proc/39594/comm /proc/4/comm /proc/40/comm /proc/400/comm /proc/42/comm /proc/42048/comm /proc/42069/comm /proc/42102/comm /proc/42124/comm /proc/42125/comm /proc/42138/comm /proc/42140/comm /proc/42208/comm /proc/42228/comm /proc/42233/comm /proc/42241/comm /proc/42316/comm /proc/42331/comm /proc/42350/comm /proc/42369/comm /proc/42482/comm /proc/42540/comm /proc/42686/comm /proc/42709/comm /proc/42736/comm /proc/43/comm /proc/43422/comm /proc/43455/comm /proc/43457/comm /proc/43488/comm /proc/43731/comm /proc/43954/comm /proc/44/comm /proc/44333/comm /proc/44786/comm /proc/44809/comm /proc/44834/comm /proc/45/comm /proc/45183/comm /proc/45207/comm /proc/45221/comm /proc/45244/comm /proc/45278/comm /proc/45302/comm /proc/45690/comm /proc/45714/comm /proc/458/comm /proc/45986/comm /proc/46/comm /proc/46151/comm /proc/46175/comm /proc/46190/comm /proc/46215/comm /proc/46234/comm /proc/46265/comm /proc/46378/comm /proc/46425/comm /proc/46471/comm /proc/48/comm /proc/48032/comm /proc/48075/comm /proc/48157/comm /proc/48181/comm /proc/48402/comm /proc/48414/comm /proc/48449/comm /proc/48557/comm /proc/49/comm /proc/49103/comm /proc/49126/comm /proc/49203/comm /proc/49227/comm /proc/49272/comm /proc/49398/comm /proc/49572/comm /proc/49595/comm /proc/49723/comm /proc/49865/comm /proc/49888/comm /proc/5/comm /proc/50/comm /proc/50267/comm /proc/50290/comm /proc/50317/comm /proc/50399/comm /proc/50482/comm /proc/50602/comm /proc/50626/comm /proc/50724/comm /proc/51/comm /proc/51578/comm /proc/52/comm /proc/522/comm /proc/52422/comm /proc/52451/comm /proc/52523/comm /proc/52549/comm /proc/52621/comm /proc/52743/comm /proc/52985/comm /proc/53067/comm /proc/54/comm /proc/55/comm /proc/56/comm /proc/56787/comm /proc/56811/comm /proc/57/comm /proc/57441/comm /proc/57468/comm /proc/57479/comm /proc/57505/comm /proc/57521/comm /proc/57553/comm /proc/57733/comm /proc/57788/comm /proc/57848/comm /proc/57883/comm /proc/57925/comm /proc/58/comm /proc/58027/comm /proc/6/comm /proc/60/comm /proc/61/comm /proc/614/comm /proc/61515/comm /proc/617/comm /proc/61704/comm /proc/61740/comm /proc/61863/comm /proc/61886/comm /proc/61900/comm /proc/61927/comm /proc/62/comm /proc/620/comm /proc/62028/comm /proc/62051/comm /proc/62393/comm /proc/62537/comm /proc/626/comm /proc/627/comm /proc/62922/comm /proc/63/comm /proc/63140/comm /proc/63335/comm /proc/63365/comm /proc/63494/comm /proc/63530/comm /proc/63584/comm /proc/63602/comm /proc/63608/comm /proc/63610/comm /proc/63624/comm /proc/63625/comm /proc/63858/comm /proc/63880/comm /proc/63906/comm /proc/63923/comm /proc/63955/comm /proc/63972/comm /proc/64/comm /proc/64009/comm /proc/64312/comm /proc/64313/comm /proc/64314/comm /proc/64315/comm /proc/64344/comm /proc/64369/comm /proc/64489/comm /proc/645/comm /proc/64664/comm /proc/64687/comm /proc/650/comm /proc/65032/comm /proc/65047/comm /proc/65048/comm /proc/65049/comm /proc/65050/comm /proc/65051/comm /proc/65161/comm /proc/65185/comm /proc/65557/comm /proc/65588/comm /proc/65611/comm /proc/65640/comm /proc/65659/comm /proc/66/comm /proc/66001/comm /proc/66060/comm /proc/66305/comm /proc/66330/comm /proc/66439/comm /proc/66532/comm /proc/66713/comm /proc/66759/comm /proc/66913/comm /proc/66961/comm /proc/67/comm /proc/67012/comm /proc/67359/comm /proc/67475/comm /proc/67820/comm /proc/67865/comm /proc/67946/comm /proc/68/comm /proc/68156/comm /proc/68177/comm /proc/68305/comm /proc/68331/comm /proc/684/comm /proc/68713/comm /proc/68730/comm /proc/68736/comm /proc/68882/comm /proc/68883/comm /proc/68896/comm /proc/69/comm /proc/69136/comm /proc/70/comm /proc/70362/comm /proc/70388/comm /proc/709/comm /proc/712/comm /proc/713/comm /proc/72/comm /proc/72162/comm /proc/726/comm /proc/73/comm /proc/73595/comm /proc/74/comm /proc/74117/comm /proc/74240/comm /proc/74241/comm /proc/74242/comm /proc/74243/comm /proc/74245/comm /proc/74246/comm /proc/74247/comm /proc/74248/comm /proc/74252/comm /proc/74255/comm /proc/74256/comm /proc/74257/comm /proc/74258/comm /proc/74259/comm /proc/75/comm /proc/76/comm /proc/78/comm /proc/79/comm /proc/79723/comm /proc/79746/comm /proc/79829/comm /proc/79846/comm /proc/79852/comm /proc/79910/comm /proc/79911/comm /proc/79921/comm /proc/8/comm /proc/80/comm /proc/80163/comm /proc/81/comm /proc/81158/comm /proc/81182/comm /proc/81431/comm /proc/82/comm /proc/83967/comm /proc/84/comm /proc/85/comm /proc/85829/comm /proc/86/comm /proc/86076/comm /proc/86088/comm /proc/86737/comm /proc/86761/comm /proc/87/comm /proc/871/comm /proc/87952/comm /proc/88/comm /proc/90/comm /proc/90439/comm /proc/91/comm /proc/91153/comm /proc/92/comm /proc/9223/comm /proc/92337/comm /proc/9240/comm /proc/9256/comm /proc/92796/comm /proc/92819/comm /proc/93/comm /proc/93073/comm /proc/93074/comm /proc/93132/comm /proc/93152/comm /proc/93158/comm /proc/93277/comm /proc/93278/comm /proc/93289/comm /proc/9338/comm /proc/93723/comm /proc/94/comm /proc/96/comm /proc/97/comm /proc/97568/comm /proc/97570/comm /proc/98/comm /proc/98673/comm /proc/99/comm /proc/9958/comm /proc/self/comm /proc/thread-self/comm
+ '[' -n '' ']'
+ rm -f /var/run/libvirtd.pid
+ [[ -c /dev/kvm ]]
+ chmod 660 /dev/kvm
+ chown root:kvm /dev/kvm
+ CGROUPS=
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/blkio ']'
+ grep -w blkio /sys/fs/cgroup/cgroup.controllers
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/cpu ']'
+ grep -w cpu /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=cpu,
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/devices ']'
+ grep -w devices /sys/fs/cgroup/cgroup.controllers
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/freezer ']'
+ grep -w freezer /sys/fs/cgroup/cgroup.controllers
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/hugetlb ']'
+ grep -w hugetlb /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=hugetlb,
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/memory ']'
+ grep -w memory /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=memory,
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/net_cls ']'
+ grep -w net_cls /sys/fs/cgroup/cgroup.controllers
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/perf_event ']'
+ grep -w perf_event /sys/fs/cgroup/cgroup.controllers
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/rdma ']'
+ grep -w rdma /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=rdma,
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/misc ']'
+ grep -w misc /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=misc,
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/pids ']'
+ grep -w pids /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=pids,
+ cgcreate -g cpu,hugetlb,memory,rdma,misc,pids:/osh-libvirt
++ cat /proc/meminfo
++ grep HugePages_Total
++ tr -cd '[:digit:]'
+ hp_count=0
+ '[' 00 -gt 0 ']'
+ '[' -n 457eb676-33da-42ec-9a8c-9293d545c337 ']'
+ cgexec -g cpu,hugetlb,memory,rdma,misc,pids:/osh-libvirt systemd-run --scope --slice=system libvirtd --listen
++ mktemp --suffix .xml
+ tmpsecret=/tmp/tmp.IwTA5zWXn9.xml
+ '[' -n '' ']'
+ trap cleanup EXIT
+ TIMEOUT=60
+ [[ ! -f /var/run/libvirtd.pid ]]
+ [[ 60 -gt 0 ]]
+ let TIMEOUT-=1
+ sleep 1
Running scope as unit: run-r27c1000627ac44aba181390a02a93edd.scope
+ [[ ! -f /var/run/libvirtd.pid ]]
+ TIMEOUT=10
+ [[ ! -e /var/run/libvirt/libvirt-sock ]]
+ '[' -z '' ']'
+ '[' -n cinder ']'
++ awk '/key/{print $3}' /etc/ceph/ceph.client.cinder.keyring
+ CEPH_CINDER_KEYRING=AQA3rmJqHT2+JxAAITLXIGJarwEfhsWkfNZ07Q==
+ '[' -n cinder ']'
+ create_virsh_libvirt_secret cinder 457eb676-33da-42ec-9a8c-9293d545c337 AQA3rmJqHT2+JxAAITLXIGJarwEfhsWkfNZ07Q==
+ sec_user=cinder
+ sec_uuid=457eb676-33da-42ec-9a8c-9293d545c337
+ sec_ceph_keyring=AQA3rmJqHT2+JxAAITLXIGJarwEfhsWkfNZ07Q==
+ cat
+ virsh secret-define --file /tmp/tmp.IwTA5zWXn9.xml
Secret 457eb676-33da-42ec-9a8c-9293d545c337 created

+ virsh secret-set-value --secret 457eb676-33da-42ec-9a8c-9293d545c337 --base64 AQA3rmJqHT2+JxAAITLXIGJarwEfhsWkfNZ07Q==
error: Passing secret value as command-line argument is insecure!
Secret value set

+ '[' -n '' ']'
+ cleanup
+ rm -f /tmp/tmp.IwTA5zWXn9.xml
+ '[' -n '' ']'
++ cat /var/run/libvirtd.pid
+ LIBVIRTD_PID=191253
+ kill 191253
+ tail --pid=191253 -f /dev/null
+ cgexec -g cpu,hugetlb,memory,rdma,misc,pids:/osh-libvirt systemd-run --scope --slice=system libvirtd --listen
Running scope as unit: run-r873bdb356d224d2fa27c5000ae0415fe.scope