+ wait_for_file /etc/pki/CA/cacert.pem
+ local file=/etc/pki/CA/cacert.pem
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ sleep 1
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ sleep 1
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ sleep 1
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ sleep 1
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ sleep 1
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ wait_for_file /etc/pki/qemu/ca-cert.pem
+ local file=/etc/pki/qemu/ca-cert.pem
+ '[' '!' -f /etc/pki/qemu/ca-cert.pem ']'
+ wait_for_file /etc/pki/libvirt/servercert.pem
+ local file=/etc/pki/libvirt/servercert.pem
+ '[' '!' -f /etc/pki/libvirt/servercert.pem ']'
+ wait_for_file /etc/pki/libvirt/clientcert.pem
+ local file=/etc/pki/libvirt/clientcert.pem
+ '[' '!' -f /etc/pki/libvirt/clientcert.pem ']'
+ wait_for_file /etc/pki/qemu/server-cert.pem
+ local file=/etc/pki/qemu/server-cert.pem
+ '[' '!' -f /etc/pki/qemu/server-cert.pem ']'
+ wait_for_file /etc/pki/qemu/client-cert.pem
+ local file=/etc/pki/qemu/client-cert.pem
+ '[' '!' -f /etc/pki/qemu/client-cert.pem ']'
+ wait_for_file /etc/pki/libvirt/private/serverkey.pem
+ local file=/etc/pki/libvirt/private/serverkey.pem
+ '[' '!' -f /etc/pki/libvirt/private/serverkey.pem ']'
+ wait_for_file /etc/pki/libvirt/private/clientkey.pem
+ local file=/etc/pki/libvirt/private/clientkey.pem
+ '[' '!' -f /etc/pki/libvirt/private/clientkey.pem ']'
+ wait_for_file /etc/pki/qemu/server-key.pem
+ local file=/etc/pki/qemu/server-key.pem
+ '[' '!' -f /etc/pki/qemu/server-key.pem ']'
+ wait_for_file /etc/pki/qemu/client-key.pem
+ local file=/etc/pki/qemu/client-key.pem
+ '[' '!' -f /etc/pki/qemu/client-key.pem ']'
+ wait_for_file /etc/pki/libvirt-vnc/ca-cert.pem
+ local file=/etc/pki/libvirt-vnc/ca-cert.pem
+ '[' '!' -f /etc/pki/libvirt-vnc/ca-cert.pem ']'
+ wait_for_file /etc/pki/libvirt-vnc/server-cert.pem
+ local file=/etc/pki/libvirt-vnc/server-cert.pem
+ '[' '!' -f /etc/pki/libvirt-vnc/server-cert.pem ']'
+ wait_for_file /etc/pki/libvirt-vnc/server-key.pem
+ local file=/etc/pki/libvirt-vnc/server-key.pem
+ '[' '!' -f /etc/pki/libvirt-vnc/server-key.pem ']'
++ grep -w libvirtd
++ cat /proc/1/comm /proc/10/comm /proc/100/comm /proc/100259/comm /proc/101004/comm /proc/10169/comm /proc/102/comm /proc/102165/comm /proc/102786/comm /proc/102801/comm /proc/103/comm /proc/104/comm /proc/104345/comm /proc/104381/comm /proc/105/comm /proc/105025/comm /proc/105039/comm /proc/105040/comm /proc/106/comm /proc/106037/comm /proc/106061/comm /proc/106081/comm /proc/106105/comm /proc/106401/comm /proc/106520/comm /proc/106523/comm /proc/10679/comm /proc/10680/comm /proc/107385/comm /proc/107769/comm /proc/108/comm /proc/108106/comm /proc/108129/comm /proc/108255/comm /proc/108273/comm /proc/108279/comm /proc/108337/comm /proc/108338/comm /proc/108348/comm /proc/108543/comm /proc/109/comm /proc/109902/comm /proc/109931/comm /proc/109958/comm /proc/11/comm /proc/110/comm /proc/110002/comm /proc/111/comm /proc/112/comm /proc/112641/comm /proc/113/comm /proc/114/comm /proc/114071/comm /proc/115/comm /proc/116/comm /proc/116506/comm /proc/117/comm /proc/1183/comm /proc/12/comm /proc/120045/comm /proc/120060/comm /proc/120061/comm /proc/12115/comm /proc/121444/comm /proc/12147/comm /proc/12174/comm /proc/12227/comm /proc/12239/comm /proc/122922/comm /proc/122948/comm /proc/123018/comm /proc/123042/comm /proc/123219/comm /proc/123648/comm /proc/123990/comm /proc/124122/comm /proc/124167/comm /proc/12477/comm /proc/124814/comm /proc/124901/comm /proc/12510/comm /proc/125511/comm /proc/125535/comm /proc/12567/comm /proc/125841/comm /proc/125842/comm /proc/12590/comm /proc/126003/comm /proc/126041/comm /proc/12610/comm /proc/126820/comm /proc/127165/comm /proc/127844/comm /proc/1288/comm /proc/1289/comm /proc/1290/comm /proc/1291/comm /proc/129220/comm /proc/129276/comm /proc/129277/comm /proc/129281/comm /proc/13/comm /proc/130872/comm /proc/130951/comm /proc/130952/comm /proc/132123/comm /proc/132124/comm /proc/1384/comm /proc/1388/comm /proc/139321/comm /proc/139322/comm /proc/139324/comm /proc/139325/comm /proc/139476/comm /proc/139997/comm /proc/14/comm /proc/140021/comm /proc/140441/comm /proc/140475/comm /proc/140487/comm /proc/140521/comm /proc/140522/comm /proc/140523/comm /proc/140524/comm /proc/141533/comm /proc/141556/comm /proc/141840/comm /proc/141986/comm /proc/142010/comm /proc/142155/comm /proc/142594/comm /proc/142619/comm /proc/142796/comm /proc/142819/comm /proc/142966/comm /proc/142995/comm /proc/143011/comm /proc/143017/comm /proc/143123/comm /proc/143124/comm /proc/143134/comm /proc/143311/comm /proc/144029/comm /proc/1455/comm /proc/1459/comm /proc/1468/comm /proc/15/comm /proc/156900/comm /proc/156949/comm /proc/157021/comm /proc/157082/comm /proc/157111/comm /proc/157132/comm /proc/157154/comm /proc/157267/comm /proc/157293/comm /proc/157317/comm /proc/157344/comm /proc/157380/comm /proc/157384/comm /proc/157701/comm /proc/157725/comm /proc/157878/comm /proc/157904/comm /proc/157979/comm /proc/158112/comm /proc/16/comm /proc/162571/comm /proc/162577/comm /proc/163274/comm /proc/164579/comm /proc/164604/comm /proc/165/comm /proc/165784/comm /proc/166/comm /proc/167/comm /proc/167212/comm /proc/167677/comm /proc/167686/comm /proc/167710/comm /proc/167711/comm /proc/167712/comm /proc/167713/comm /proc/168/comm /proc/168739/comm /proc/168740/comm /proc/168770/comm /proc/168788/comm /proc/168820/comm /proc/169/comm /proc/169061/comm /proc/169092/comm /proc/169182/comm /proc/169183/comm /proc/169239/comm /proc/169241/comm /proc/169540/comm /proc/169542/comm /proc/169643/comm /proc/169649/comm /proc/169650/comm /proc/169772/comm /proc/169795/comm /proc/170/comm /proc/170013/comm /proc/170030/comm /proc/170036/comm /proc/170103/comm /proc/170104/comm /proc/170114/comm /proc/170293/comm /proc/170531/comm /proc/171/comm /proc/171451/comm /proc/171500/comm /proc/171548/comm /proc/171555/comm /proc/171598/comm /proc/171612/comm /proc/171638/comm /proc/171663/comm /proc/171725/comm /proc/171763/comm /proc/171824/comm /proc/172/comm /proc/172072/comm /proc/172099/comm /proc/172111/comm /proc/172161/comm /proc/172766/comm /proc/172779/comm /proc/172866/comm /proc/173/comm /proc/175/comm /proc/176/comm /proc/177371/comm /proc/177405/comm /proc/177406/comm /proc/177482/comm /proc/178/comm /proc/178445/comm /proc/178959/comm /proc/179/comm /proc/18/comm /proc/180375/comm /proc/180376/comm /proc/180377/comm /proc/180500/comm /proc/180633/comm /proc/180654/comm /proc/180681/comm /proc/180682/comm /proc/180695/comm /proc/180708/comm /proc/180709/comm /proc/181024/comm /proc/181029/comm /proc/181032/comm /proc/181578/comm /proc/181893/comm /proc/182/comm /proc/182053/comm /proc/182740/comm /proc/182797/comm /proc/182996/comm /proc/183008/comm /proc/183090/comm /proc/183284/comm /proc/183291/comm /proc/183637/comm /proc/183849/comm /proc/183850/comm /proc/183876/comm /proc/183894/comm /proc/183895/comm /proc/183896/comm /proc/183897/comm /proc/183898/comm /proc/183899/comm /proc/183921/comm /proc/183983/comm /proc/184/comm /proc/184586/comm /proc/184713/comm /proc/184736/comm /proc/184906/comm /proc/185/comm /proc/185020/comm /proc/185046/comm /proc/185098/comm /proc/185116/comm /proc/185122/comm /proc/185177/comm /proc/185189/comm /proc/185190/comm /proc/185201/comm /proc/185402/comm /proc/185434/comm /proc/185440/comm /proc/185441/comm /proc/185442/comm /proc/186/comm /proc/187/comm /proc/188/comm /proc/189/comm /proc/19/comm /proc/190/comm /proc/191/comm /proc/192/comm /proc/19228/comm /proc/19250/comm /proc/19278/comm /proc/193/comm /proc/19304/comm /proc/19317/comm /proc/194/comm /proc/195/comm /proc/2/comm /proc/20/comm /proc/201/comm /proc/202/comm /proc/21/comm /proc/21147/comm /proc/21165/comm /proc/21166/comm /proc/21180/comm /proc/217/comm /proc/22/comm /proc/220/comm /proc/221/comm /proc/226/comm /proc/24/comm /proc/24183/comm /proc/24447/comm /proc/24465/comm /proc/24489/comm /proc/24501/comm /proc/248/comm /proc/25/comm /proc/26/comm /proc/27/comm /proc/28/comm /proc/282/comm /proc/285/comm /proc/286/comm /proc/287/comm /proc/28882/comm /proc/29156/comm /proc/29174/comm /proc/29198/comm /proc/29210/comm /proc/3/comm /proc/30/comm /proc/309/comm /proc/31/comm /proc/310/comm /proc/314/comm /proc/315/comm /proc/32/comm /proc/324/comm /proc/33/comm /proc/33375/comm /proc/33649/comm /proc/33667/comm /proc/33690/comm /proc/33703/comm /proc/34/comm /proc/356/comm /proc/36/comm /proc/366/comm /proc/36804/comm /proc/36806/comm /proc/369/comm /proc/37/comm /proc/38/comm /proc/385/comm /proc/39/comm /proc/390/comm /proc/39170/comm /proc/39199/comm /proc/39201/comm /proc/39226/comm /proc/39245/comm /proc/39248/comm /proc/39306/comm /proc/39332/comm /proc/39334/comm /proc/39335/comm /proc/39416/comm /proc/39436/comm /proc/39455/comm /proc/39473/comm /proc/395/comm /proc/39574/comm /proc/396/comm /proc/39643/comm /proc/397/comm /proc/39787/comm /proc/39810/comm /proc/39835/comm /proc/4/comm /proc/40/comm /proc/40523/comm /proc/40544/comm /proc/40563/comm /proc/40585/comm /proc/40808/comm /proc/41021/comm /proc/41110/comm /proc/41419/comm /proc/41936/comm /proc/41959/comm /proc/42/comm /proc/42001/comm /proc/42328/comm /proc/42352/comm /proc/42373/comm /proc/42397/comm /proc/42416/comm /proc/42462/comm /proc/42842/comm /proc/42867/comm /proc/43/comm /proc/43149/comm /proc/43317/comm /proc/43345/comm /proc/43373/comm /proc/43401/comm /proc/43412/comm /proc/43435/comm /proc/43545/comm /proc/43590/comm /proc/43635/comm /proc/44/comm /proc/45/comm /proc/450/comm /proc/451/comm /proc/45691/comm /proc/45724/comm /proc/45804/comm /proc/45826/comm /proc/46/comm /proc/46039/comm /proc/46058/comm /proc/46087/comm /proc/46125/comm /proc/46607/comm /proc/46646/comm /proc/46842/comm /proc/46866/comm /proc/46912/comm /proc/47034/comm /proc/47209/comm /proc/47233/comm /proc/47348/comm /proc/47560/comm /proc/47584/comm /proc/47749/comm /proc/47887/comm /proc/47910/comm /proc/48/comm /proc/48051/comm /proc/48113/comm /proc/48209/comm /proc/48237/comm /proc/48304/comm /proc/48377/comm /proc/49/comm /proc/49300/comm /proc/5/comm /proc/50/comm /proc/50146/comm /proc/50172/comm /proc/50322/comm /proc/50346/comm /proc/50412/comm /proc/50547/comm /proc/50747/comm /proc/50805/comm /proc/51/comm /proc/519/comm /proc/52/comm /proc/54/comm /proc/54812/comm /proc/54841/comm /proc/55/comm /proc/55486/comm /proc/55508/comm /proc/55537/comm /proc/55562/comm /proc/55580/comm /proc/55612/comm /proc/55743/comm /proc/55766/comm /proc/55846/comm /proc/55888/comm /proc/55929/comm /proc/56/comm /proc/56027/comm /proc/57/comm /proc/58/comm /proc/6/comm /proc/60/comm /proc/60002/comm /proc/60055/comm /proc/60159/comm /proc/60187/comm /proc/60215/comm /proc/60217/comm /proc/60262/comm /proc/60267/comm /proc/60566/comm /proc/60884/comm /proc/61/comm /proc/61120/comm /proc/61121/comm /proc/612/comm /proc/61205/comm /proc/61277/comm /proc/61302/comm /proc/61512/comm /proc/61537/comm /proc/616/comm /proc/61604/comm /proc/61605/comm /proc/61618/comm /proc/61642/comm /proc/61656/comm /proc/61657/comm /proc/618/comm /proc/62/comm /proc/62032/comm /proc/62056/comm /proc/62073/comm /proc/62106/comm /proc/62122/comm /proc/62146/comm /proc/623/comm /proc/625/comm /proc/62541/comm /proc/62568/comm /proc/62704/comm /proc/62838/comm /proc/62864/comm /proc/63/comm /proc/63096/comm /proc/63376/comm /proc/63404/comm /proc/63494/comm /proc/63515/comm /proc/64/comm /proc/641/comm /proc/64156/comm /proc/64401/comm /proc/646/comm /proc/64645/comm /proc/64668/comm /proc/64777/comm /proc/64847/comm /proc/64942/comm /proc/64957/comm /proc/64958/comm /proc/64959/comm /proc/64960/comm /proc/64961/comm /proc/65039/comm /proc/65487/comm /proc/65520/comm /proc/65612/comm /proc/65791/comm /proc/65848/comm /proc/65897/comm /proc/66/comm /proc/66006/comm /proc/66179/comm /proc/66222/comm /proc/66265/comm /proc/66305/comm /proc/66346/comm /proc/66431/comm /proc/66537/comm /proc/66565/comm /proc/66815/comm /proc/66846/comm /proc/67/comm /proc/67046/comm /proc/67092/comm /proc/67107/comm /proc/67113/comm /proc/67164/comm /proc/67165/comm /proc/67177/comm /proc/67378/comm /proc/68/comm /proc/68768/comm /proc/68791/comm /proc/69/comm /proc/697/comm /proc/70/comm /proc/700/comm /proc/701/comm /proc/715/comm /proc/72/comm /proc/72043/comm /proc/72083/comm /proc/72084/comm /proc/72085/comm /proc/72086/comm /proc/72090/comm /proc/72093/comm /proc/72094/comm /proc/72095/comm /proc/72097/comm /proc/72098/comm /proc/72099/comm /proc/72100/comm /proc/72101/comm /proc/72102/comm /proc/73/comm /proc/74/comm /proc/75/comm /proc/75544/comm /proc/76/comm /proc/77872/comm /proc/77895/comm /proc/77978/comm /proc/77995/comm /proc/78/comm /proc/78001/comm /proc/78059/comm /proc/78060/comm /proc/78070/comm /proc/78214/comm /proc/79/comm /proc/79403/comm /proc/79427/comm /proc/8/comm /proc/80/comm /proc/80576/comm /proc/80577/comm /proc/80784/comm /proc/80789/comm /proc/81/comm /proc/82/comm /proc/84/comm /proc/84719/comm /proc/84731/comm /proc/85/comm /proc/85416/comm /proc/85487/comm /proc/86/comm /proc/860/comm /proc/86385/comm /proc/87/comm /proc/88/comm /proc/8837/comm /proc/88853/comm /proc/9/comm /proc/90/comm /proc/9065/comm /proc/9082/comm /proc/9098/comm /proc/91/comm /proc/9180/comm /proc/91966/comm /proc/91989/comm /proc/92/comm /proc/92148/comm /proc/92165/comm /proc/92172/comm /proc/92242/comm /proc/92243/comm /proc/92254/comm /proc/92536/comm /proc/93/comm /proc/94/comm /proc/95698/comm /proc/95777/comm /proc/95829/comm /proc/95862/comm /proc/96/comm /proc/96262/comm /proc/96338/comm /proc/97/comm /proc/97033/comm /proc/9798/comm /proc/97994/comm /proc/98/comm /proc/98000/comm /proc/98271/comm /proc/98866/comm /proc/99/comm /proc/self/comm /proc/thread-self/comm
+ '[' -n '' ']'
+ rm -f /var/run/libvirtd.pid
+ [[ -c /dev/kvm ]]
+ chmod 660 /dev/kvm
+ chown root:kvm /dev/kvm
+ CGROUPS=
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/blkio ']'
+ grep -w blkio /sys/fs/cgroup/cgroup.controllers
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/cpu ']'
+ grep -w cpu /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=cpu,
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/devices ']'
+ grep -w devices /sys/fs/cgroup/cgroup.controllers
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/freezer ']'
+ grep -w freezer /sys/fs/cgroup/cgroup.controllers
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/hugetlb ']'
+ grep -w hugetlb /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=hugetlb,
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/memory ']'
+ grep -w memory /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=memory,
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/net_cls ']'
+ grep -w net_cls /sys/fs/cgroup/cgroup.controllers
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/perf_event ']'
+ grep -w perf_event /sys/fs/cgroup/cgroup.controllers
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/rdma ']'
+ grep -w rdma /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=rdma,
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/misc ']'
+ grep -w misc /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=misc,
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/pids ']'
+ grep -w pids /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=pids,
+ cgcreate -g cpu,hugetlb,memory,rdma,misc,pids:/osh-libvirt
++ cat /proc/meminfo
++ grep HugePages_Total
++ tr -cd '[:digit:]'
+ hp_count=0
+ '[' 00 -gt 0 ']'
+ '[' -n 457eb676-33da-42ec-9a8c-9293d545c337 ']'
+ cgexec -g cpu,hugetlb,memory,rdma,misc,pids:/osh-libvirt systemd-run --scope --slice=system libvirtd --listen
++ mktemp --suffix .xml
+ tmpsecret=/tmp/tmp.nlSLvh3q8P.xml
+ '[' -n '' ']'
+ trap cleanup EXIT
+ TIMEOUT=60
+ [[ ! -f /var/run/libvirtd.pid ]]
+ [[ 60 -gt 0 ]]
+ let TIMEOUT-=1
+ sleep 1
Running as unit: run-rdd122c2f56934ab38e844341b3c1aa02.scope; invocation ID: 97d8805052b54787a58f0759e05692d4
+ [[ ! -f /var/run/libvirtd.pid ]]
+ TIMEOUT=10
+ [[ ! -e /var/run/libvirt/libvirt-sock ]]
+ '[' -z '' ']'
+ '[' -n cinder ']'
++ awk '/key/{print $3}' /etc/ceph/ceph.client.cinder.keyring
+ CEPH_CINDER_KEYRING=AQDz/uZpGUmCAxAArQFwcXEfNOgYel2CPKAuww==
+ '[' -n cinder ']'
+ create_virsh_libvirt_secret cinder 457eb676-33da-42ec-9a8c-9293d545c337 AQDz/uZpGUmCAxAArQFwcXEfNOgYel2CPKAuww==
+ sec_user=cinder
+ sec_uuid=457eb676-33da-42ec-9a8c-9293d545c337
+ sec_ceph_keyring=AQDz/uZpGUmCAxAArQFwcXEfNOgYel2CPKAuww==
+ cat
+ virsh secret-define --file /tmp/tmp.nlSLvh3q8P.xml
Secret 457eb676-33da-42ec-9a8c-9293d545c337 created

+ virsh secret-set-value --secret 457eb676-33da-42ec-9a8c-9293d545c337 --base64 AQDz/uZpGUmCAxAArQFwcXEfNOgYel2CPKAuww==
error: Passing secret value as command-line argument is insecure!
Secret value set

+ '[' -n '' ']'
+ '[' -n '' ']'
+ cleanup
+ rm -f /tmp/tmp.nlSLvh3q8P.xml
+ '[' -n '' ']'
++ cat /var/run/libvirtd.pid
+ LIBVIRTD_PID=185483
+ kill 185483
+ tail --pid=185483 -f /dev/null
+ cgexec -g cpu,hugetlb,memory,rdma,misc,pids:/osh-libvirt systemd-run --scope --slice=system libvirtd --listen
Running as unit: run-rea30dabf58344a7990168849dfe6e837.scope; invocation ID: 18e8fbc11a7645be9119a9c101728216