+ wait_for_file /etc/pki/CA/cacert.pem
+ local file=/etc/pki/CA/cacert.pem
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ sleep 1
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ sleep 1
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ sleep 1
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ sleep 1
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ sleep 1
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ wait_for_file /etc/pki/qemu/ca-cert.pem
+ local file=/etc/pki/qemu/ca-cert.pem
+ '[' '!' -f /etc/pki/qemu/ca-cert.pem ']'
+ wait_for_file /etc/pki/libvirt/servercert.pem
+ local file=/etc/pki/libvirt/servercert.pem
+ '[' '!' -f /etc/pki/libvirt/servercert.pem ']'
+ wait_for_file /etc/pki/libvirt/clientcert.pem
+ local file=/etc/pki/libvirt/clientcert.pem
+ '[' '!' -f /etc/pki/libvirt/clientcert.pem ']'
+ wait_for_file /etc/pki/qemu/server-cert.pem
+ local file=/etc/pki/qemu/server-cert.pem
+ '[' '!' -f /etc/pki/qemu/server-cert.pem ']'
+ wait_for_file /etc/pki/qemu/client-cert.pem
+ local file=/etc/pki/qemu/client-cert.pem
+ '[' '!' -f /etc/pki/qemu/client-cert.pem ']'
+ wait_for_file /etc/pki/libvirt/private/serverkey.pem
+ local file=/etc/pki/libvirt/private/serverkey.pem
+ '[' '!' -f /etc/pki/libvirt/private/serverkey.pem ']'
+ wait_for_file /etc/pki/libvirt/private/clientkey.pem
+ local file=/etc/pki/libvirt/private/clientkey.pem
+ '[' '!' -f /etc/pki/libvirt/private/clientkey.pem ']'
+ wait_for_file /etc/pki/qemu/server-key.pem
+ local file=/etc/pki/qemu/server-key.pem
+ '[' '!' -f /etc/pki/qemu/server-key.pem ']'
+ wait_for_file /etc/pki/qemu/client-key.pem
+ local file=/etc/pki/qemu/client-key.pem
+ '[' '!' -f /etc/pki/qemu/client-key.pem ']'
+ wait_for_file /etc/pki/libvirt-vnc/ca-cert.pem
+ local file=/etc/pki/libvirt-vnc/ca-cert.pem
+ '[' '!' -f /etc/pki/libvirt-vnc/ca-cert.pem ']'
+ wait_for_file /etc/pki/libvirt-vnc/server-cert.pem
+ local file=/etc/pki/libvirt-vnc/server-cert.pem
+ '[' '!' -f /etc/pki/libvirt-vnc/server-cert.pem ']'
+ wait_for_file /etc/pki/libvirt-vnc/server-key.pem
+ local file=/etc/pki/libvirt-vnc/server-key.pem
+ '[' '!' -f /etc/pki/libvirt-vnc/server-key.pem ']'
++ grep -w libvirtd
++ cat /proc/1/comm /proc/10/comm /proc/100/comm /proc/100613/comm /proc/101037/comm /proc/102/comm /proc/102081/comm /proc/102911/comm /proc/103/comm /proc/10344/comm /proc/103953/comm /proc/104/comm /proc/105/comm /proc/106/comm /proc/106290/comm /proc/107917/comm /proc/108/comm /proc/108580/comm /proc/108604/comm /proc/109/comm /proc/109032/comm /proc/109046/comm /proc/109047/comm /proc/11/comm /proc/110/comm /proc/1101/comm /proc/110293/comm /proc/110316/comm /proc/110337/comm /proc/110362/comm /proc/110538/comm /proc/110752/comm /proc/110899/comm /proc/110901/comm /proc/111/comm /proc/11105/comm /proc/11106/comm /proc/111788/comm /proc/112/comm /proc/112370/comm /proc/112395/comm /proc/112485/comm /proc/11249/comm /proc/112501/comm /proc/112507/comm /proc/112554/comm /proc/112556/comm /proc/112557/comm /proc/112646/comm /proc/112647/comm /proc/112657/comm /proc/112809/comm /proc/113/comm /proc/11387/comm /proc/114/comm /proc/114065/comm /proc/114089/comm /proc/114110/comm /proc/114134/comm /proc/115/comm /proc/116/comm /proc/116120/comm /proc/116121/comm /proc/117/comm /proc/117929/comm /proc/118776/comm /proc/118802/comm /proc/119053/comm /proc/119064/comm /proc/12/comm /proc/121559/comm /proc/122385/comm /proc/124008/comm /proc/124044/comm /proc/124045/comm /proc/12496/comm /proc/12525/comm /proc/125327/comm /proc/12581/comm /proc/12608/comm /proc/12628/comm /proc/127166/comm /proc/127189/comm /proc/127210/comm /proc/127233/comm /proc/127757/comm /proc/128123/comm /proc/128160/comm /proc/128338/comm /proc/12861/comm /proc/12891/comm /proc/12892/comm /proc/129198/comm /proc/12948/comm /proc/12973/comm /proc/129832/comm /proc/129856/comm /proc/12994/comm /proc/13/comm /proc/130029/comm /proc/130169/comm /proc/130274/comm /proc/134531/comm /proc/134998/comm /proc/135028/comm /proc/135029/comm /proc/136305/comm /proc/136306/comm /proc/14/comm /proc/1432/comm /proc/144/comm /proc/15/comm /proc/1550/comm /proc/155076/comm /proc/155077/comm /proc/155080/comm /proc/155081/comm /proc/1551/comm /proc/155196/comm /proc/1552/comm /proc/1553/comm /proc/1557/comm /proc/155913/comm /proc/155936/comm /proc/156167/comm /proc/156309/comm /proc/156408/comm /proc/156421/comm /proc/156454/comm /proc/156455/comm /proc/156456/comm /proc/156457/comm /proc/156960/comm /proc/156988/comm /proc/157758/comm /proc/158001/comm /proc/158026/comm /proc/158041/comm /proc/158070/comm /proc/158268/comm /proc/158279/comm /proc/158315/comm /proc/158337/comm /proc/158377/comm /proc/158398/comm /proc/158562/comm /proc/158585/comm /proc/158692/comm /proc/158733/comm /proc/158881/comm /proc/159109/comm /proc/159114/comm /proc/159548/comm /proc/159835/comm /proc/159858/comm /proc/159918/comm /proc/159939/comm /proc/159957/comm /proc/159963/comm /proc/16/comm /proc/160010/comm /proc/160012/comm /proc/160013/comm /proc/160133/comm /proc/160134/comm /proc/160144/comm /proc/160349/comm /proc/162155/comm /proc/162246/comm /proc/162302/comm /proc/162347/comm /proc/162372/comm /proc/162389/comm /proc/1624/comm /proc/162425/comm /proc/162480/comm /proc/162571/comm /proc/162601/comm /proc/162738/comm /proc/162765/comm /proc/1628/comm /proc/162959/comm /proc/162983/comm /proc/163046/comm /proc/163069/comm /proc/163118/comm /proc/163134/comm /proc/1637/comm /proc/163714/comm /proc/165/comm /proc/166/comm /proc/167/comm /proc/168/comm /proc/168363/comm /proc/168432/comm /proc/168509/comm /proc/169/comm /proc/169149/comm /proc/169271/comm /proc/170/comm /proc/170573/comm /proc/170625/comm /proc/170901/comm /proc/171/comm /proc/171704/comm /proc/172/comm /proc/173/comm /proc/173631/comm /proc/173784/comm /proc/173958/comm /proc/174018/comm /proc/174027/comm /proc/174028/comm /proc/174050/comm /proc/174051/comm /proc/174808/comm /proc/174936/comm /proc/174954/comm /proc/175/comm /proc/175250/comm /proc/175314/comm /proc/175315/comm /proc/175321/comm /proc/175322/comm /proc/175594/comm /proc/175831/comm /proc/176/comm /proc/176003/comm /proc/176009/comm /proc/176010/comm /proc/176206/comm /proc/176234/comm /proc/176378/comm /proc/176395/comm /proc/176401/comm /proc/176474/comm /proc/176476/comm /proc/176477/comm /proc/176499/comm /proc/176500/comm /proc/176510/comm /proc/176720/comm /proc/178/comm /proc/178029/comm /proc/178068/comm /proc/178108/comm /proc/178111/comm /proc/178160/comm /proc/178196/comm /proc/178450/comm /proc/178474/comm /proc/178490/comm /proc/178519/comm /proc/179/comm /proc/179188/comm /proc/179205/comm /proc/179211/comm /proc/18/comm /proc/182/comm /proc/182502/comm /proc/182509/comm /proc/182510/comm /proc/182513/comm /proc/182520/comm /proc/183078/comm /proc/183154/comm /proc/183631/comm /proc/183654/comm /proc/184/comm /proc/184251/comm /proc/184306/comm /proc/184381/comm /proc/184410/comm /proc/184472/comm /proc/184483/comm /proc/184931/comm /proc/184934/comm /proc/186/comm /proc/186164/comm /proc/186175/comm /proc/187/comm /proc/187967/comm /proc/188/comm /proc/188387/comm /proc/188388/comm /proc/188389/comm /proc/18859/comm /proc/188656/comm /proc/18879/comm /proc/188793/comm /proc/188812/comm /proc/188840/comm /proc/188841/comm /proc/188857/comm /proc/188869/comm /proc/188870/comm /proc/189/comm /proc/18900/comm /proc/18927/comm /proc/18945/comm /proc/189583/comm /proc/189587/comm /proc/189588/comm /proc/189589/comm /proc/189809/comm /proc/189883/comm /proc/189884/comm /proc/189899/comm /proc/189948/comm /proc/19/comm /proc/190315/comm /proc/190328/comm /proc/190337/comm /proc/190461/comm /proc/190465/comm /proc/190521/comm /proc/190522/comm /proc/190523/comm /proc/191/comm /proc/2/comm /proc/20/comm /proc/203/comm /proc/204/comm /proc/205/comm /proc/21/comm /proc/215/comm /proc/21879/comm /proc/219/comm /proc/21938/comm /proc/21939/comm /proc/21952/comm /proc/22/comm /proc/221/comm /proc/226/comm /proc/24/comm /proc/248/comm /proc/25/comm /proc/25216/comm /proc/25484/comm /proc/25502/comm /proc/25526/comm /proc/25539/comm /proc/26/comm /proc/27/comm /proc/272/comm /proc/28/comm /proc/288/comm /proc/291/comm /proc/292/comm /proc/293/comm /proc/294/comm /proc/295/comm /proc/29996/comm /proc/3/comm /proc/30/comm /proc/30259/comm /proc/30276/comm /proc/30299/comm /proc/30312/comm /proc/31/comm /proc/314/comm /proc/315/comm /proc/319/comm /proc/32/comm /proc/320/comm /proc/321/comm /proc/322/comm /proc/323/comm /proc/324/comm /proc/325/comm /proc/33/comm /proc/34/comm /proc/34795/comm /proc/35077/comm /proc/35093/comm /proc/35118/comm /proc/35130/comm /proc/35927/comm /proc/36/comm /proc/365/comm /proc/37/comm /proc/38/comm /proc/383/comm /proc/39/comm /proc/396/comm /proc/39682/comm /proc/39684/comm /proc/39778/comm /proc/39819/comm /proc/39841/comm /proc/39869/comm /proc/39885/comm /proc/4/comm /proc/40/comm /proc/400/comm /proc/42/comm /proc/42375/comm /proc/42399/comm /proc/42435/comm /proc/42438/comm /proc/42441/comm /proc/42443/comm /proc/42521/comm /proc/42542/comm /proc/42543/comm /proc/42548/comm /proc/42619/comm /proc/42638/comm /proc/42656/comm /proc/42702/comm /proc/42784/comm /proc/42845/comm /proc/42990/comm /proc/43/comm /proc/43013/comm /proc/43039/comm /proc/43722/comm /proc/43740/comm /proc/43771/comm /proc/43784/comm /proc/44/comm /proc/44045/comm /proc/44252/comm /proc/44341/comm /proc/44342/comm /proc/44633/comm /proc/45/comm /proc/45071/comm /proc/45096/comm /proc/45125/comm /proc/455/comm /proc/45518/comm /proc/45549/comm /proc/45552/comm /proc/45584/comm /proc/45625/comm /proc/45631/comm /proc/46/comm /proc/46010/comm /proc/46034/comm /proc/46253/comm /proc/46532/comm /proc/46557/comm /proc/46579/comm /proc/46607/comm /proc/46638/comm /proc/46665/comm /proc/46755/comm /proc/46798/comm /proc/46843/comm /proc/48/comm /proc/48674/comm /proc/48704/comm /proc/48781/comm /proc/48805/comm /proc/49/comm /proc/49028/comm /proc/49041/comm /proc/49070/comm /proc/49182/comm /proc/49699/comm /proc/49722/comm /proc/49810/comm /proc/49834/comm /proc/49881/comm /proc/5/comm /proc/50/comm /proc/50003/comm /proc/50168/comm /proc/50191/comm /proc/50314/comm /proc/50475/comm /proc/50498/comm /proc/50863/comm /proc/50888/comm /proc/50997/comm /proc/51/comm /proc/51043/comm /proc/51078/comm /proc/51176/comm /proc/51204/comm /proc/51266/comm /proc/51324/comm /proc/52/comm /proc/523/comm /proc/53079/comm /proc/53105/comm /proc/53279/comm /proc/53303/comm /proc/53332/comm /proc/53426/comm /proc/53630/comm /proc/53699/comm /proc/53741/comm /proc/54/comm /proc/55/comm /proc/56/comm /proc/57/comm /proc/58/comm /proc/58189/comm /proc/58213/comm /proc/58889/comm /proc/58916/comm /proc/58941/comm /proc/58964/comm /proc/58988/comm /proc/59012/comm /proc/59198/comm /proc/59222/comm /proc/59287/comm /proc/59324/comm /proc/59361/comm /proc/59521/comm /proc/6/comm /proc/60/comm /proc/61/comm /proc/614/comm /proc/618/comm /proc/62/comm /proc/620/comm /proc/628/comm /proc/629/comm /proc/63/comm /proc/64/comm /proc/64059/comm /proc/64115/comm /proc/64141/comm /proc/643/comm /proc/64308/comm /proc/64342/comm /proc/64356/comm /proc/64378/comm /proc/64410/comm /proc/64436/comm /proc/64568/comm /proc/64583/comm /proc/646/comm /proc/65120/comm /proc/65144/comm /proc/65455/comm /proc/65486/comm /proc/65487/comm /proc/65490/comm /proc/65491/comm /proc/65607/comm /proc/65632/comm /proc/65690/comm /proc/65714/comm /proc/65744/comm /proc/65846/comm /proc/65847/comm /proc/66/comm /proc/66285/comm /proc/66311/comm /proc/66337/comm /proc/66361/comm /proc/66379/comm /proc/66406/comm /proc/66754/comm /proc/66862/comm /proc/66885/comm /proc/67/comm /proc/67258/comm /proc/67282/comm /proc/67364/comm /proc/67406/comm /proc/67420/comm /proc/67421/comm /proc/67422/comm /proc/67423/comm /proc/67424/comm /proc/67584/comm /proc/67608/comm /proc/67789/comm /proc/67860/comm /proc/68/comm /proc/68057/comm /proc/68081/comm /proc/68407/comm /proc/68442/comm /proc/68727/comm /proc/68751/comm /proc/68966/comm /proc/69/comm /proc/69009/comm /proc/69051/comm /proc/69085/comm /proc/69126/comm /proc/69212/comm /proc/69261/comm /proc/69610/comm /proc/69677/comm /proc/69706/comm /proc/69993/comm /proc/70/comm /proc/70243/comm /proc/70264/comm /proc/70347/comm /proc/70619/comm /proc/70642/comm /proc/707/comm /proc/70884/comm /proc/70901/comm /proc/70907/comm /proc/70956/comm /proc/70958/comm /proc/70959/comm /proc/710/comm /proc/71052/comm /proc/71053/comm /proc/71065/comm /proc/711/comm /proc/71159/comm /proc/72/comm /proc/72305/comm /proc/72330/comm /proc/724/comm /proc/73/comm /proc/74/comm /proc/75/comm /proc/75418/comm /proc/75877/comm /proc/75920/comm /proc/75921/comm /proc/75922/comm /proc/75923/comm /proc/75925/comm /proc/75927/comm /proc/75928/comm /proc/75929/comm /proc/75933/comm /proc/75934/comm /proc/75935/comm /proc/75936/comm /proc/75937/comm /proc/75938/comm /proc/76/comm /proc/78/comm /proc/79/comm /proc/8/comm /proc/80/comm /proc/81/comm /proc/81608/comm /proc/81631/comm /proc/81738/comm /proc/81756/comm /proc/81762/comm /proc/81820/comm /proc/81822/comm /proc/81823/comm /proc/81824/comm /proc/81825/comm /proc/81835/comm /proc/82/comm /proc/82000/comm /proc/83080/comm /proc/83102/comm /proc/84/comm /proc/85/comm /proc/86/comm /proc/869/comm /proc/87/comm /proc/88/comm /proc/88027/comm /proc/88263/comm /proc/88264/comm /proc/88265/comm /proc/88266/comm /proc/88299/comm /proc/88406/comm /proc/89162/comm /proc/89186/comm /proc/90/comm /proc/90069/comm /proc/91/comm /proc/91779/comm /proc/92/comm /proc/9242/comm /proc/9259/comm /proc/9275/comm /proc/93/comm /proc/9357/comm /proc/93812/comm /proc/94/comm /proc/96/comm /proc/96020/comm /proc/96051/comm /proc/96161/comm /proc/96178/comm /proc/96185/comm /proc/96261/comm /proc/96264/comm /proc/96266/comm /proc/96375/comm /proc/96376/comm /proc/96386/comm /proc/96571/comm /proc/97/comm /proc/98/comm /proc/99/comm /proc/99315/comm /proc/99338/comm /proc/99361/comm /proc/99404/comm /proc/9974/comm /proc/99838/comm /proc/99955/comm /proc/self/comm /proc/thread-self/comm
+ '[' -n '' ']'
+ rm -f /var/run/libvirtd.pid
+ [[ -c /dev/kvm ]]
+ chmod 660 /dev/kvm
+ chown root:kvm /dev/kvm
+ CGROUPS=
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/blkio ']'
+ grep -w blkio /sys/fs/cgroup/cgroup.controllers
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/cpu ']'
+ grep -w cpu /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=cpu,
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/devices ']'
+ grep -w devices /sys/fs/cgroup/cgroup.controllers
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/freezer ']'
+ grep -w freezer /sys/fs/cgroup/cgroup.controllers
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/hugetlb ']'
+ grep -w hugetlb /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=hugetlb,
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/memory ']'
+ grep -w memory /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=memory,
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/net_cls ']'
+ grep -w net_cls /sys/fs/cgroup/cgroup.controllers
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/perf_event ']'
+ grep -w perf_event /sys/fs/cgroup/cgroup.controllers
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/rdma ']'
+ grep -w rdma /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=rdma,
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/misc ']'
+ grep -w misc /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=misc,
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/pids ']'
+ grep -w pids /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=pids,
+ cgcreate -g cpu,hugetlb,memory,rdma,misc,pids:/osh-libvirt
++ cat /proc/meminfo
++ grep HugePages_Total
++ tr -cd '[:digit:]'
+ hp_count=0
+ '[' 00 -gt 0 ']'
+ '[' -n 457eb676-33da-42ec-9a8c-9293d545c337 ']'
+ cgexec -g cpu,hugetlb,memory,rdma,misc,pids:/osh-libvirt systemd-run --scope --slice=system libvirtd --listen
++ mktemp --suffix .xml
+ tmpsecret=/tmp/tmp.RMLRW0qqYr.xml
+ '[' -n '' ']'
+ trap cleanup EXIT
+ TIMEOUT=60
+ [[ ! -f /var/run/libvirtd.pid ]]
+ [[ 60 -gt 0 ]]
+ let TIMEOUT-=1
+ sleep 1
Running as unit: run-r6f970cf486e44d898a7fedbf78d3b69f.scope; invocation ID: e5c9c94940ff415ca1acbd930597b0eb
+ [[ ! -f /var/run/libvirtd.pid ]]
+ TIMEOUT=10
+ [[ ! -e /var/run/libvirt/libvirt-sock ]]
+ '[' -z '' ']'
+ '[' -n cinder ']'
++ awk '/key/{print $3}' /etc/ceph/ceph.client.cinder.keyring
+ CEPH_CINDER_KEYRING=AQAwO7tqkpjTMRAAldmMJPgvLbI19paPKKWmyg==
+ '[' -n cinder ']'
+ create_virsh_libvirt_secret cinder 457eb676-33da-42ec-9a8c-9293d545c337 AQAwO7tqkpjTMRAAldmMJPgvLbI19paPKKWmyg==
+ sec_user=cinder
+ sec_uuid=457eb676-33da-42ec-9a8c-9293d545c337
+ sec_ceph_keyring=AQAwO7tqkpjTMRAAldmMJPgvLbI19paPKKWmyg==
+ cat
+ virsh secret-define --file /tmp/tmp.RMLRW0qqYr.xml
Secret 457eb676-33da-42ec-9a8c-9293d545c337 created

+ virsh secret-set-value --secret 457eb676-33da-42ec-9a8c-9293d545c337 --base64 AQAwO7tqkpjTMRAAldmMJPgvLbI19paPKKWmyg==
error: Passing secret value as command-line argument is insecure!
Secret value set

+ '[' -n '' ']'
+ cleanup
+ rm -f /tmp/tmp.RMLRW0qqYr.xml
+ '[' -n '' ']'
++ cat /var/run/libvirtd.pid
+ LIBVIRTD_PID=190544
+ kill 190544
+ tail --pid=190544 -f /dev/null
+ cgexec -g cpu,hugetlb,memory,rdma,misc,pids:/osh-libvirt systemd-run --scope --slice=system libvirtd --listen
Running as unit: run-re6a791d25d6a400e8e5199cc318e3667.scope; invocation ID: e4002e80d06e474e8b6dbd19b0fb0cc8