+ wait_for_file /etc/pki/CA/cacert.pem
+ local file=/etc/pki/CA/cacert.pem
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ sleep 1
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ sleep 1
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ sleep 1
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ sleep 1
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ sleep 1
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ wait_for_file /etc/pki/qemu/ca-cert.pem
+ local file=/etc/pki/qemu/ca-cert.pem
+ '[' '!' -f /etc/pki/qemu/ca-cert.pem ']'
+ wait_for_file /etc/pki/libvirt/servercert.pem
+ local file=/etc/pki/libvirt/servercert.pem
+ '[' '!' -f /etc/pki/libvirt/servercert.pem ']'
+ wait_for_file /etc/pki/libvirt/clientcert.pem
+ local file=/etc/pki/libvirt/clientcert.pem
+ '[' '!' -f /etc/pki/libvirt/clientcert.pem ']'
+ wait_for_file /etc/pki/qemu/server-cert.pem
+ local file=/etc/pki/qemu/server-cert.pem
+ '[' '!' -f /etc/pki/qemu/server-cert.pem ']'
+ wait_for_file /etc/pki/qemu/client-cert.pem
+ local file=/etc/pki/qemu/client-cert.pem
+ '[' '!' -f /etc/pki/qemu/client-cert.pem ']'
+ wait_for_file /etc/pki/libvirt/private/serverkey.pem
+ local file=/etc/pki/libvirt/private/serverkey.pem
+ '[' '!' -f /etc/pki/libvirt/private/serverkey.pem ']'
+ wait_for_file /etc/pki/libvirt/private/clientkey.pem
+ local file=/etc/pki/libvirt/private/clientkey.pem
+ '[' '!' -f /etc/pki/libvirt/private/clientkey.pem ']'
+ wait_for_file /etc/pki/qemu/server-key.pem
+ local file=/etc/pki/qemu/server-key.pem
+ '[' '!' -f /etc/pki/qemu/server-key.pem ']'
+ wait_for_file /etc/pki/qemu/client-key.pem
+ local file=/etc/pki/qemu/client-key.pem
+ '[' '!' -f /etc/pki/qemu/client-key.pem ']'
+ wait_for_file /etc/pki/libvirt-vnc/ca-cert.pem
+ local file=/etc/pki/libvirt-vnc/ca-cert.pem
+ '[' '!' -f /etc/pki/libvirt-vnc/ca-cert.pem ']'
+ wait_for_file /etc/pki/libvirt-vnc/server-cert.pem
+ local file=/etc/pki/libvirt-vnc/server-cert.pem
+ '[' '!' -f /etc/pki/libvirt-vnc/server-cert.pem ']'
+ wait_for_file /etc/pki/libvirt-vnc/server-key.pem
+ local file=/etc/pki/libvirt-vnc/server-key.pem
+ '[' '!' -f /etc/pki/libvirt-vnc/server-key.pem ']'
++ grep -w libvirtd
++ cat /proc/1/comm /proc/10/comm /proc/100/comm /proc/100558/comm /proc/100703/comm /proc/102/comm /proc/103/comm /proc/10332/comm /proc/104/comm /proc/105/comm /proc/106/comm /proc/106156/comm /proc/106180/comm /proc/106594/comm /proc/106606/comm /proc/106607/comm /proc/107754/comm /proc/107778/comm /proc/107788/comm /proc/107815/comm /proc/108/comm /proc/108190/comm /proc/108325/comm /proc/108513/comm /proc/108515/comm /proc/108838/comm /proc/108839/comm /proc/109/comm /proc/109529/comm /proc/109864/comm /proc/109888/comm /proc/11/comm /proc/110/comm /proc/110077/comm /proc/110102/comm /proc/110108/comm /proc/110195/comm /proc/110196/comm /proc/110206/comm /proc/110393/comm /proc/1109/comm /proc/11097/comm /proc/11098/comm /proc/111/comm /proc/111560/comm /proc/111584/comm /proc/111601/comm /proc/111628/comm /proc/112/comm /proc/113/comm /proc/113466/comm /proc/114/comm /proc/115/comm /proc/116/comm /proc/116024/comm /proc/116025/comm /proc/117/comm /proc/117447/comm /proc/118963/comm /proc/12/comm /proc/120354/comm /proc/120552/comm /proc/120965/comm /proc/120978/comm /proc/120979/comm /proc/121419/comm /proc/124641/comm /proc/124664/comm /proc/124686/comm /proc/124727/comm /proc/12482/comm /proc/12511/comm /proc/125331/comm /proc/12555/comm /proc/125777/comm /proc/125879/comm /proc/12593/comm /proc/12606/comm /proc/126568/comm /proc/126587/comm /proc/127194/comm /proc/127217/comm /proc/127705/comm /proc/12847/comm /proc/128569/comm /proc/12878/comm /proc/12933/comm /proc/129460/comm /proc/12957/comm /proc/12978/comm /proc/13/comm /proc/130591/comm /proc/130604/comm /proc/132285/comm /proc/132299/comm /proc/132300/comm /proc/133810/comm /proc/133811/comm /proc/14/comm /proc/140855/comm /proc/140856/comm /proc/140858/comm /proc/140859/comm /proc/140988/comm /proc/141514/comm /proc/141537/comm /proc/142001/comm /proc/142034/comm /proc/142056/comm /proc/142091/comm /proc/142092/comm /proc/142093/comm /proc/142094/comm /proc/142417/comm /proc/142632/comm /proc/142657/comm /proc/143428/comm /proc/143505/comm /proc/143534/comm /proc/143536/comm /proc/143749/comm /proc/143776/comm /proc/143782/comm /proc/143812/comm /proc/1440/comm /proc/144006/comm /proc/144032/comm /proc/144065/comm /proc/144090/comm /proc/144150/comm /proc/144164/comm /proc/144258/comm /proc/144285/comm /proc/144317/comm /proc/144337/comm /proc/144603/comm /proc/144796/comm /proc/144801/comm /proc/145180/comm /proc/145181/comm /proc/145324/comm /proc/145469/comm /proc/145493/comm /proc/145578/comm /proc/145595/comm /proc/145601/comm /proc/145734/comm /proc/145735/comm /proc/145745/comm /proc/146043/comm /proc/146523/comm /proc/147345/comm /proc/147427/comm /proc/147521/comm /proc/147643/comm /proc/147686/comm /proc/147695/comm /proc/147725/comm /proc/147816/comm /proc/147835/comm /proc/147906/comm /proc/147941/comm /proc/147973/comm /proc/148120/comm /proc/148271/comm /proc/148293/comm /proc/148590/comm /proc/148615/comm /proc/148703/comm /proc/149062/comm /proc/149118/comm /proc/149779/comm /proc/15/comm /proc/153166/comm /proc/153885/comm /proc/153941/comm /proc/153942/comm /proc/1545/comm /proc/1546/comm /proc/1547/comm /proc/1548/comm /proc/1552/comm /proc/16/comm /proc/1619/comm /proc/1623/comm /proc/1632/comm /proc/165/comm /proc/166/comm /proc/167/comm /proc/168/comm /proc/169/comm /proc/170/comm /proc/170053/comm /proc/171/comm /proc/171598/comm /proc/171599/comm /proc/171658/comm /proc/172/comm /proc/172227/comm /proc/172281/comm /proc/172282/comm /proc/172372/comm /proc/172385/comm /proc/172386/comm /proc/172671/comm /proc/172997/comm /proc/173/comm /proc/173008/comm /proc/173243/comm /proc/173244/comm /proc/173248/comm /proc/173250/comm /proc/173801/comm /proc/173929/comm /proc/173952/comm /proc/174106/comm /proc/174123/comm /proc/174129/comm /proc/174211/comm /proc/174212/comm /proc/174222/comm /proc/174611/comm /proc/175/comm /proc/175881/comm /proc/175885/comm /proc/175945/comm /proc/175950/comm /proc/176207/comm /proc/176237/comm /proc/176645/comm /proc/176658/comm /proc/176808/comm /proc/176835/comm /proc/177/comm /proc/178469/comm /proc/179/comm /proc/179629/comm /proc/179653/comm /proc/179660/comm /proc/179678/comm /proc/18/comm /proc/180/comm /proc/181486/comm /proc/182/comm /proc/183/comm /proc/183483/comm /proc/183507/comm /proc/184008/comm /proc/184043/comm /proc/184126/comm /proc/184148/comm /proc/184246/comm /proc/184257/comm /proc/184431/comm /proc/184727/comm /proc/184736/comm /proc/184741/comm /proc/184982/comm /proc/184983/comm /proc/184984/comm /proc/185/comm /proc/185222/comm /proc/185255/comm /proc/185268/comm /proc/185269/comm /proc/185562/comm /proc/185563/comm /proc/185565/comm /proc/185566/comm /proc/185567/comm /proc/185568/comm /proc/185569/comm /proc/186/comm /proc/187/comm /proc/187052/comm /proc/187087/comm /proc/187200/comm /proc/187217/comm /proc/187223/comm /proc/187296/comm /proc/187297/comm /proc/187307/comm /proc/18751/comm /proc/187698/comm /proc/18772/comm /proc/18795/comm /proc/188/comm /proc/188195/comm /proc/18822/comm /proc/188336/comm /proc/18838/comm /proc/188610/comm /proc/188611/comm /proc/188706/comm /proc/188827/comm /proc/188832/comm /proc/189/comm /proc/189060/comm /proc/189097/comm /proc/189098/comm /proc/189099/comm /proc/189100/comm /proc/189101/comm /proc/189102/comm /proc/189213/comm /proc/189235/comm /proc/189323/comm /proc/189526/comm /proc/189550/comm /proc/189597/comm /proc/189671/comm /proc/189696/comm /proc/189734/comm /proc/189767/comm /proc/189797/comm /proc/189817/comm /proc/189936/comm /proc/189981/comm /proc/19/comm /proc/190/comm /proc/190007/comm /proc/190056/comm /proc/190377/comm /proc/190386/comm /proc/190387/comm /proc/190388/comm /proc/190394/comm /proc/190406/comm /proc/190413/comm /proc/190414/comm /proc/190415/comm /proc/192/comm /proc/193/comm /proc/194/comm /proc/198/comm /proc/19967/comm /proc/2/comm /proc/20/comm /proc/21/comm /proc/216/comm /proc/21783/comm /proc/21847/comm /proc/21848/comm /proc/21864/comm /proc/219/comm /proc/22/comm /proc/220/comm /proc/225/comm /proc/24/comm /proc/247/comm /proc/25/comm /proc/25106/comm /proc/25369/comm /proc/25387/comm /proc/25412/comm /proc/25424/comm /proc/26/comm /proc/27/comm /proc/273/comm /proc/28/comm /proc/284/comm /proc/288/comm /proc/292/comm /proc/293/comm /proc/294/comm /proc/295/comm /proc/29884/comm /proc/3/comm /proc/30/comm /proc/30168/comm /proc/30185/comm /proc/30209/comm /proc/30221/comm /proc/31/comm /proc/314/comm /proc/315/comm /proc/319/comm /proc/32/comm /proc/33/comm /proc/34/comm /proc/34436/comm /proc/34704/comm /proc/34720/comm /proc/34747/comm /proc/34759/comm /proc/353/comm /proc/354/comm /proc/36/comm /proc/361/comm /proc/366/comm /proc/37/comm /proc/38/comm /proc/38215/comm /proc/38217/comm /proc/384/comm /proc/39/comm /proc/390/comm /proc/396/comm /proc/4/comm /proc/40/comm /proc/400/comm /proc/40567/comm /proc/40591/comm /proc/40620/comm /proc/40626/comm /proc/40644/comm /proc/40656/comm /proc/40691/comm /proc/40724/comm /proc/40739/comm /proc/40740/comm /proc/40816/comm /proc/40834/comm /proc/40863/comm /proc/40885/comm /proc/40982/comm /proc/41035/comm /proc/41176/comm /proc/41199/comm /proc/41224/comm /proc/41945/comm /proc/41951/comm /proc/41988/comm /proc/42/comm /proc/42002/comm /proc/42236/comm /proc/42356/comm /proc/42446/comm /proc/42866/comm /proc/43/comm /proc/43259/comm /proc/43283/comm /proc/43320/comm /proc/43656/comm /proc/43679/comm /proc/43695/comm /proc/43720/comm /proc/43745/comm /proc/43789/comm /proc/44/comm /proc/44117/comm /proc/44141/comm /proc/44227/comm /proc/44614/comm /proc/44638/comm /proc/44657/comm /proc/44684/comm /proc/44698/comm /proc/44722/comm /proc/44833/comm /proc/44879/comm /proc/44924/comm /proc/45/comm /proc/452/comm /proc/46/comm /proc/46684/comm /proc/467/comm /proc/46716/comm /proc/46788/comm /proc/46811/comm /proc/46998/comm /proc/47011/comm /proc/47048/comm /proc/47159/comm /proc/47484/comm /proc/47507/comm /proc/47585/comm /proc/47609/comm /proc/47654/comm /proc/47767/comm /proc/47961/comm /proc/47985/comm /proc/48/comm /proc/48319/comm /proc/48525/comm /proc/48551/comm /proc/48817/comm /proc/48842/comm /proc/48970/comm /proc/49/comm /proc/49025/comm /proc/49122/comm /proc/49151/comm /proc/49209/comm /proc/49265/comm /proc/5/comm /proc/50/comm /proc/50911/comm /proc/51/comm /proc/51055/comm /proc/51078/comm /proc/51226/comm /proc/51250/comm /proc/51305/comm /proc/51397/comm /proc/51576/comm /proc/51669/comm /proc/51711/comm /proc/52/comm /proc/523/comm /proc/54/comm /proc/55/comm /proc/55417/comm /proc/55440/comm /proc/56/comm /proc/56088/comm /proc/56113/comm /proc/56128/comm /proc/56153/comm /proc/56172/comm /proc/56203/comm /proc/56346/comm /proc/56370/comm /proc/56411/comm /proc/56449/comm /proc/56491/comm /proc/56814/comm /proc/57/comm /proc/58/comm /proc/6/comm /proc/60/comm /proc/60233/comm /proc/60347/comm /proc/60396/comm /proc/60467/comm /proc/60491/comm /proc/60518/comm /proc/60549/comm /proc/60555/comm /proc/60583/comm /proc/60720/comm /proc/60892/comm /proc/61/comm /proc/61003/comm /proc/61441/comm /proc/61466/comm /proc/615/comm /proc/61618/comm /proc/61744/comm /proc/61771/comm /proc/61772/comm /proc/61775/comm /proc/61776/comm /proc/618/comm /proc/61960/comm /proc/61989/comm /proc/62/comm /proc/62018/comm /proc/62042/comm /proc/621/comm /proc/62276/comm /proc/62306/comm /proc/62339/comm /proc/62372/comm /proc/62386/comm /proc/624/comm /proc/62411/comm /proc/625/comm /proc/62714/comm /proc/62737/comm /proc/62761/comm /proc/63/comm /proc/63038/comm /proc/63078/comm /proc/63322/comm /proc/63465/comm /proc/63488/comm /proc/63754/comm /proc/63778/comm /proc/64/comm /proc/64115/comm /proc/645/comm /proc/64682/comm /proc/647/comm /proc/64708/comm /proc/64813/comm /proc/64829/comm /proc/64830/comm /proc/64831/comm /proc/64832/comm /proc/64833/comm /proc/64936/comm /proc/64982/comm /proc/65345/comm /proc/65379/comm /proc/65653/comm /proc/65851/comm /proc/65882/comm /proc/65931/comm /proc/66/comm /proc/66034/comm /proc/66058/comm /proc/66157/comm /proc/66200/comm /proc/66257/comm /proc/66293/comm /proc/66328/comm /proc/66376/comm /proc/66434/comm /proc/66462/comm /proc/66804/comm /proc/66821/comm /proc/66827/comm /proc/66886/comm /proc/66907/comm /proc/66928/comm /proc/66988/comm /proc/66989/comm /proc/66999/comm /proc/67/comm /proc/67475/comm /proc/68/comm /proc/68674/comm /proc/68698/comm /proc/69/comm /proc/70/comm /proc/706/comm /proc/709/comm /proc/710/comm /proc/71828/comm /proc/72/comm /proc/72110/comm /proc/72125/comm /proc/72126/comm /proc/72127/comm /proc/72128/comm /proc/72129/comm /proc/72130/comm /proc/72132/comm /proc/72137/comm /proc/72139/comm /proc/72140/comm /proc/72141/comm /proc/72142/comm /proc/72143/comm /proc/72144/comm /proc/723/comm /proc/73/comm /proc/74/comm /proc/75/comm /proc/76/comm /proc/77665/comm /proc/77688/comm /proc/77778/comm /proc/77795/comm /proc/77801/comm /proc/77877/comm /proc/77879/comm /proc/77910/comm /proc/78/comm /proc/78135/comm /proc/79/comm /proc/79166/comm /proc/79189/comm /proc/79341/comm /proc/79343/comm /proc/8/comm /proc/80/comm /proc/80435/comm /proc/81/comm /proc/81024/comm /proc/82/comm /proc/84/comm /proc/84251/comm /proc/84264/comm /proc/84959/comm /proc/84991/comm /proc/85/comm /proc/86/comm /proc/86248/comm /proc/868/comm /proc/87/comm /proc/88/comm /proc/88625/comm /proc/89839/comm /proc/90/comm /proc/90320/comm /proc/90419/comm /proc/90749/comm /proc/90774/comm /proc/90944/comm /proc/90960/comm /proc/90966/comm /proc/91/comm /proc/91124/comm /proc/91125/comm /proc/91135/comm /proc/91472/comm /proc/92/comm /proc/9230/comm /proc/9247/comm /proc/9265/comm /proc/93/comm /proc/9347/comm /proc/94/comm /proc/94960/comm /proc/94962/comm /proc/95284/comm /proc/95303/comm /proc/96/comm /proc/97/comm /proc/97259/comm /proc/97298/comm /proc/97321/comm /proc/97344/comm /proc/97652/comm /proc/97735/comm /proc/98/comm /proc/98578/comm /proc/99/comm /proc/99244/comm /proc/9963/comm /proc/self/comm /proc/thread-self/comm
+ '[' -n '' ']'
+ rm -f /var/run/libvirtd.pid
+ [[ -c /dev/kvm ]]
+ chmod 660 /dev/kvm
+ chown root:kvm /dev/kvm
+ CGROUPS=
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/blkio ']'
+ grep -w blkio /sys/fs/cgroup/cgroup.controllers
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/cpu ']'
+ grep -w cpu /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=cpu,
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/devices ']'
+ grep -w devices /sys/fs/cgroup/cgroup.controllers
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/freezer ']'
+ grep -w freezer /sys/fs/cgroup/cgroup.controllers
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/hugetlb ']'
+ grep -w hugetlb /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=hugetlb,
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/memory ']'
+ grep -w memory /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=memory,
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/net_cls ']'
+ grep -w net_cls /sys/fs/cgroup/cgroup.controllers
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/perf_event ']'
+ grep -w perf_event /sys/fs/cgroup/cgroup.controllers
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/rdma ']'
+ grep -w rdma /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=rdma,
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/misc ']'
+ grep -w misc /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=misc,
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/pids ']'
+ grep -w pids /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=pids,
+ cgcreate -g cpu,hugetlb,memory,rdma,misc,pids:/osh-libvirt
++ cat /proc/meminfo
++ grep HugePages_Total
++ tr -cd '[:digit:]'
+ hp_count=0
+ '[' 00 -gt 0 ']'
+ '[' -n 457eb676-33da-42ec-9a8c-9293d545c337 ']'
+ cgexec -g cpu,hugetlb,memory,rdma,misc,pids:/osh-libvirt systemd-run --scope --slice=system libvirtd --listen
++ mktemp --suffix .xml
+ tmpsecret=/tmp/tmp.IqRiEhk3JW.xml
+ '[' -n '' ']'
+ trap cleanup EXIT
+ TIMEOUT=60
+ [[ ! -f /var/run/libvirtd.pid ]]
+ [[ 60 -gt 0 ]]
+ let TIMEOUT-=1
+ sleep 1
Running scope as unit: run-r7d79955fb5e74af7a08f57bcd6a5be6a.scope
+ [[ ! -f /var/run/libvirtd.pid ]]
+ TIMEOUT=10
+ [[ ! -e /var/run/libvirt/libvirt-sock ]]
+ '[' -z '' ']'
+ '[' -n cinder ']'
++ awk '/key/{print $3}' /etc/ceph/ceph.client.cinder.keyring
+ CEPH_CINDER_KEYRING=AQBXgx5qFqXNMRAA7QUTQqvx6R7IyHaEg2FKQw==
+ '[' -n cinder ']'
+ create_virsh_libvirt_secret cinder 457eb676-33da-42ec-9a8c-9293d545c337 AQBXgx5qFqXNMRAA7QUTQqvx6R7IyHaEg2FKQw==
+ sec_user=cinder
+ sec_uuid=457eb676-33da-42ec-9a8c-9293d545c337
+ sec_ceph_keyring=AQBXgx5qFqXNMRAA7QUTQqvx6R7IyHaEg2FKQw==
+ cat
+ virsh secret-define --file /tmp/tmp.IqRiEhk3JW.xml
Secret 457eb676-33da-42ec-9a8c-9293d545c337 created

+ virsh secret-set-value --secret 457eb676-33da-42ec-9a8c-9293d545c337 --base64 AQBXgx5qFqXNMRAA7QUTQqvx6R7IyHaEg2FKQw==
error: Passing secret value as command-line argument is insecure!
Secret value set

+ '[' -n '' ']'
+ cleanup
+ rm -f /tmp/tmp.IqRiEhk3JW.xml
+ '[' -n '' ']'
++ cat /var/run/libvirtd.pid
+ LIBVIRTD_PID=190435
+ kill 190435
+ tail --pid=190435 -f /dev/null
+ cgexec -g cpu,hugetlb,memory,rdma,misc,pids:/osh-libvirt systemd-run --scope --slice=system libvirtd --listen
Running scope as unit: run-r37a780c54f204374866d617e7283ebcf.scope