+ wait_for_file /etc/pki/CA/cacert.pem
+ local file=/etc/pki/CA/cacert.pem
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ sleep 1
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ sleep 1
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ sleep 1
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ sleep 1
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ sleep 1
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ wait_for_file /etc/pki/qemu/ca-cert.pem
+ local file=/etc/pki/qemu/ca-cert.pem
+ '[' '!' -f /etc/pki/qemu/ca-cert.pem ']'
+ wait_for_file /etc/pki/libvirt/servercert.pem
+ local file=/etc/pki/libvirt/servercert.pem
+ '[' '!' -f /etc/pki/libvirt/servercert.pem ']'
+ wait_for_file /etc/pki/libvirt/clientcert.pem
+ local file=/etc/pki/libvirt/clientcert.pem
+ '[' '!' -f /etc/pki/libvirt/clientcert.pem ']'
+ wait_for_file /etc/pki/qemu/server-cert.pem
+ local file=/etc/pki/qemu/server-cert.pem
+ '[' '!' -f /etc/pki/qemu/server-cert.pem ']'
+ wait_for_file /etc/pki/qemu/client-cert.pem
+ local file=/etc/pki/qemu/client-cert.pem
+ '[' '!' -f /etc/pki/qemu/client-cert.pem ']'
+ wait_for_file /etc/pki/libvirt/private/serverkey.pem
+ local file=/etc/pki/libvirt/private/serverkey.pem
+ '[' '!' -f /etc/pki/libvirt/private/serverkey.pem ']'
+ wait_for_file /etc/pki/libvirt/private/clientkey.pem
+ local file=/etc/pki/libvirt/private/clientkey.pem
+ '[' '!' -f /etc/pki/libvirt/private/clientkey.pem ']'
+ wait_for_file /etc/pki/qemu/server-key.pem
+ local file=/etc/pki/qemu/server-key.pem
+ '[' '!' -f /etc/pki/qemu/server-key.pem ']'
+ wait_for_file /etc/pki/qemu/client-key.pem
+ local file=/etc/pki/qemu/client-key.pem
+ '[' '!' -f /etc/pki/qemu/client-key.pem ']'
+ wait_for_file /etc/pki/libvirt-vnc/ca-cert.pem
+ local file=/etc/pki/libvirt-vnc/ca-cert.pem
+ '[' '!' -f /etc/pki/libvirt-vnc/ca-cert.pem ']'
+ wait_for_file /etc/pki/libvirt-vnc/server-cert.pem
+ local file=/etc/pki/libvirt-vnc/server-cert.pem
+ '[' '!' -f /etc/pki/libvirt-vnc/server-cert.pem ']'
+ wait_for_file /etc/pki/libvirt-vnc/server-key.pem
+ local file=/etc/pki/libvirt-vnc/server-key.pem
+ '[' '!' -f /etc/pki/libvirt-vnc/server-key.pem ']'
++ grep -w libvirtd
++ cat /proc/1/comm /proc/10/comm /proc/100/comm /proc/100024/comm /proc/100047/comm /proc/100137/comm /proc/100154/comm /proc/100160/comm /proc/100216/comm /proc/100268/comm /proc/100269/comm /proc/100358/comm /proc/101286/comm /proc/101309/comm /proc/101382/comm /proc/101437/comm /proc/101775/comm /proc/102/comm /proc/103/comm /proc/10332/comm /proc/104/comm /proc/104128/comm /proc/105/comm /proc/105158/comm /proc/106/comm /proc/107011/comm /proc/107394/comm /proc/108/comm /proc/108607/comm /proc/108622/comm /proc/109/comm /proc/109021/comm /proc/109035/comm /proc/109036/comm /proc/109443/comm /proc/1097/comm /proc/11/comm /proc/110/comm /proc/11099/comm /proc/111/comm /proc/11100/comm /proc/111887/comm /proc/111911/comm /proc/111926/comm /proc/111955/comm /proc/112/comm /proc/112420/comm /proc/112478/comm /proc/112760/comm /proc/112786/comm /proc/113/comm /proc/113285/comm /proc/113357/comm /proc/113946/comm /proc/113971/comm /proc/114/comm /proc/114238/comm /proc/115/comm /proc/116/comm /proc/117/comm /proc/117018/comm /proc/118068/comm /proc/118098/comm /proc/118099/comm /proc/119169/comm /proc/119170/comm /proc/12/comm /proc/12490/comm /proc/12520/comm /proc/12543/comm /proc/125953/comm /proc/125954/comm /proc/125957/comm /proc/125958/comm /proc/12596/comm /proc/126083/comm /proc/12614/comm /proc/126680/comm /proc/126709/comm /proc/126773/comm /proc/126942/comm /proc/126958/comm /proc/126992/comm /proc/127004/comm /proc/127036/comm /proc/127037/comm /proc/127038/comm /proc/127039/comm /proc/127533/comm /proc/127570/comm /proc/128146/comm /proc/128324/comm /proc/128327/comm /proc/12853/comm /proc/128590/comm /proc/128614/comm /proc/128635/comm /proc/128660/comm /proc/128809/comm /proc/12881/comm /proc/128813/comm /proc/128861/comm /proc/128886/comm /proc/128929/comm /proc/128943/comm /proc/129069/comm /proc/129091/comm /proc/129171/comm /proc/129193/comm /proc/12941/comm /proc/129487/comm /proc/12965/comm /proc/129677/comm /proc/129682/comm /proc/12984/comm /proc/129904/comm /proc/129905/comm /proc/129906/comm /proc/13/comm /proc/134181/comm /proc/134336/comm /proc/139/comm /proc/14/comm /proc/141910/comm /proc/141934/comm /proc/142064/comm /proc/142098/comm /proc/142110/comm /proc/142243/comm /proc/142294/comm /proc/142295/comm /proc/142352/comm /proc/1428/comm /proc/143508/comm /proc/143591/comm /proc/143704/comm /proc/143829/comm /proc/143853/comm /proc/143868/comm /proc/143893/comm /proc/143988/comm /proc/144035/comm /proc/144069/comm /proc/144122/comm /proc/144228/comm /proc/144263/comm /proc/144330/comm /proc/144593/comm /proc/144625/comm /proc/144886/comm /proc/144918/comm /proc/148407/comm /proc/148412/comm /proc/148438/comm /proc/149017/comm /proc/149119/comm /proc/15/comm /proc/152547/comm /proc/152966/comm /proc/152990/comm /proc/152997/comm /proc/152998/comm /proc/153005/comm /proc/153006/comm /proc/153506/comm /proc/153512/comm /proc/153606/comm /proc/153630/comm /proc/153645/comm /proc/153687/comm /proc/153688/comm /proc/153741/comm /proc/153742/comm /proc/154027/comm /proc/154277/comm /proc/154283/comm /proc/154287/comm /proc/154488/comm /proc/154513/comm /proc/1546/comm /proc/154613/comm /proc/154633/comm /proc/154639/comm /proc/1547/comm /proc/154735/comm /proc/1548/comm /proc/154810/comm /proc/154811/comm /proc/1549/comm /proc/154947/comm /proc/1553/comm /proc/156102/comm /proc/156129/comm /proc/156164/comm /proc/156185/comm /proc/156381/comm /proc/156391/comm /proc/156415/comm /proc/156803/comm /proc/156820/comm /proc/156964/comm /proc/156966/comm /proc/156972/comm /proc/157989/comm /proc/159344/comm /proc/159345/comm /proc/159358/comm /proc/16/comm /proc/160887/comm /proc/161584/comm /proc/1620/comm /proc/1624/comm /proc/162569/comm /proc/162594/comm /proc/163066/comm /proc/163108/comm /proc/163205/comm /proc/163230/comm /proc/1633/comm /proc/163307/comm /proc/163318/comm /proc/163828/comm /proc/163829/comm /proc/163830/comm /proc/164099/comm /proc/164190/comm /proc/164206/comm /proc/164207/comm /proc/164352/comm /proc/164353/comm /proc/164355/comm /proc/164356/comm /proc/164357/comm /proc/164358/comm /proc/164359/comm /proc/165/comm /proc/165331/comm /proc/165333/comm /proc/165524/comm /proc/165547/comm /proc/165699/comm /proc/165716/comm /proc/165736/comm /proc/165909/comm /proc/165979/comm /proc/165980/comm /proc/166/comm /proc/166190/comm /proc/166697/comm /proc/166967/comm /proc/166968/comm /proc/167/comm /proc/167057/comm /proc/167074/comm /proc/167082/comm /proc/167109/comm /proc/167374/comm /proc/167375/comm /proc/167384/comm /proc/167392/comm /proc/167393/comm /proc/167394/comm /proc/167395/comm /proc/167396/comm /proc/167397/comm /proc/167439/comm /proc/167751/comm /proc/167810/comm /proc/167833/comm /proc/167872/comm /proc/167879/comm /proc/167944/comm /proc/167959/comm /proc/168/comm /proc/168015/comm /proc/168041/comm /proc/168067/comm /proc/168090/comm /proc/168122/comm /proc/168159/comm /proc/168171/comm /proc/168208/comm /proc/168233/comm /proc/168251/comm /proc/168412/comm /proc/168456/comm /proc/168475/comm /proc/168507/comm /proc/168510/comm /proc/168525/comm /proc/168526/comm /proc/168527/comm /proc/169/comm /proc/170/comm /proc/171/comm /proc/172/comm /proc/173/comm /proc/177/comm /proc/179/comm /proc/18/comm /proc/180/comm /proc/182/comm /proc/183/comm /proc/184/comm /proc/185/comm /proc/186/comm /proc/187/comm /proc/188/comm /proc/19/comm /proc/190/comm /proc/19024/comm /proc/19045/comm /proc/19065/comm /proc/19093/comm /proc/19111/comm /proc/2/comm /proc/20/comm /proc/202/comm /proc/203/comm /proc/204/comm /proc/207/comm /proc/21/comm /proc/215/comm /proc/219/comm /proc/22/comm /proc/220/comm /proc/22052/comm /proc/22117/comm /proc/22118/comm /proc/22131/comm /proc/225/comm /proc/24/comm /proc/247/comm /proc/25/comm /proc/25359/comm /proc/25627/comm /proc/25645/comm /proc/25669/comm /proc/25681/comm /proc/26/comm /proc/267/comm /proc/27/comm /proc/277/comm /proc/28/comm /proc/290/comm /proc/291/comm /proc/29846/comm /proc/3/comm /proc/30/comm /proc/30111/comm /proc/30128/comm /proc/30153/comm /proc/30165/comm /proc/31/comm /proc/311/comm /proc/312/comm /proc/316/comm /proc/317/comm /proc/318/comm /proc/319/comm /proc/32/comm /proc/320/comm /proc/321/comm /proc/322/comm /proc/323/comm /proc/324/comm /proc/325/comm /proc/33/comm /proc/34/comm /proc/34363/comm /proc/34629/comm /proc/34649/comm /proc/34676/comm /proc/34688/comm /proc/36/comm /proc/366/comm /proc/37/comm /proc/37784/comm /proc/38/comm /proc/39/comm /proc/39189/comm /proc/39191/comm /proc/39331/comm /proc/39351/comm /proc/39393/comm /proc/39421/comm /proc/39438/comm /proc/398/comm /proc/4/comm /proc/40/comm /proc/401/comm /proc/41895/comm /proc/41924/comm /proc/41936/comm /proc/41946/comm /proc/41982/comm /proc/41983/comm /proc/42/comm /proc/42024/comm /proc/42029/comm /proc/42063/comm /proc/42065/comm /proc/42136/comm /proc/42156/comm /proc/42175/comm /proc/42210/comm /proc/42309/comm /proc/42370/comm /proc/42514/comm /proc/42537/comm /proc/42563/comm /proc/43/comm /proc/43239/comm /proc/43256/comm /proc/43287/comm /proc/43301/comm /proc/43541/comm /proc/43751/comm /proc/44/comm /proc/44129/comm /proc/44599/comm /proc/44622/comm /proc/44652/comm /proc/45/comm /proc/45015/comm /proc/45038/comm /proc/45051/comm /proc/45076/comm /proc/45109/comm /proc/45127/comm /proc/455/comm /proc/45518/comm /proc/45543/comm /proc/45732/comm /proc/46/comm /proc/46018/comm /proc/46042/comm /proc/46057/comm /proc/46084/comm /proc/46099/comm /proc/46129/comm /proc/46240/comm /proc/46288/comm /proc/46334/comm /proc/47892/comm /proc/47926/comm /proc/48/comm /proc/48004/comm /proc/48027/comm /proc/48244/comm /proc/48257/comm /proc/48335/comm /proc/48422/comm /proc/48732/comm /proc/48758/comm /proc/48836/comm /proc/48859/comm /proc/49/comm /proc/49104/comm /proc/49228/comm /proc/49390/comm /proc/49413/comm /proc/49534/comm /proc/49728/comm /proc/49755/comm /proc/5/comm /proc/50/comm /proc/50028/comm /proc/50051/comm /proc/50209/comm /proc/50265/comm /proc/50363/comm /proc/50392/comm /proc/50458/comm /proc/50505/comm /proc/51/comm /proc/51428/comm /proc/51947/comm /proc/51970/comm /proc/52/comm /proc/52121/comm /proc/524/comm /proc/54/comm /proc/55/comm /proc/55961/comm /proc/55985/comm /proc/56/comm /proc/56558/comm /proc/56589/comm /proc/56613/comm /proc/56655/comm /proc/56706/comm /proc/56733/comm /proc/56847/comm /proc/56872/comm /proc/56918/comm /proc/56961/comm /proc/56998/comm /proc/57/comm /proc/57119/comm /proc/57256/comm /proc/58/comm /proc/59653/comm /proc/59654/comm /proc/59655/comm /proc/59684/comm /proc/59733/comm /proc/59983/comm /proc/6/comm /proc/60/comm /proc/60014/comm /proc/60089/comm /proc/60124/comm /proc/60161/comm /proc/60186/comm /proc/60216/comm /proc/60241/comm /proc/60305/comm /proc/60306/comm /proc/60307/comm /proc/60466/comm /proc/60634/comm /proc/60674/comm /proc/61/comm /proc/61021/comm /proc/61064/comm /proc/61263/comm /proc/61265/comm /proc/61266/comm /proc/61267/comm /proc/61268/comm /proc/61293/comm /proc/61520/comm /proc/61544/comm /proc/616/comm /proc/61623/comm /proc/61647/comm /proc/61798/comm /proc/61823/comm /proc/61852/comm /proc/61895/comm /proc/619/comm /proc/62/comm /proc/62003/comm /proc/62033/comm /proc/622/comm /proc/62254/comm /proc/62289/comm /proc/62386/comm /proc/62730/comm /proc/62753/comm /proc/62843/comm /proc/62867/comm /proc/62939/comm /proc/62959/comm /proc/62960/comm /proc/62961/comm /proc/62962/comm /proc/62963/comm /proc/63/comm /proc/630/comm /proc/63092/comm /proc/631/comm /proc/63234/comm /proc/63313/comm /proc/63471/comm /proc/63495/comm /proc/63909/comm /proc/63943/comm /proc/64/comm /proc/64087/comm /proc/64111/comm /proc/64182/comm /proc/64184/comm /proc/64247/comm /proc/64288/comm /proc/64334/comm /proc/64377/comm /proc/64430/comm /proc/64467/comm /proc/64601/comm /proc/648/comm /proc/64897/comm /proc/649/comm /proc/64942/comm /proc/64974/comm /proc/65068/comm /proc/65098/comm /proc/65114/comm /proc/65198/comm /proc/65219/comm /proc/65317/comm /proc/65341/comm /proc/65547/comm /proc/65564/comm /proc/65570/comm /proc/65661/comm /proc/65712/comm /proc/65713/comm /proc/65740/comm /proc/66/comm /proc/66764/comm /proc/66792/comm /proc/67/comm /proc/67662/comm /proc/68/comm /proc/68772/comm /proc/69/comm /proc/69105/comm /proc/69125/comm /proc/69126/comm /proc/69127/comm /proc/69128/comm /proc/69130/comm /proc/69133/comm /proc/69134/comm /proc/69135/comm /proc/69137/comm /proc/69139/comm /proc/69141/comm /proc/69142/comm /proc/69143/comm /proc/69144/comm /proc/70/comm /proc/708/comm /proc/711/comm /proc/712/comm /proc/71650/comm /proc/72/comm /proc/725/comm /proc/73/comm /proc/73060/comm /proc/73122/comm /proc/73146/comm /proc/73236/comm /proc/73253/comm /proc/73271/comm /proc/73339/comm /proc/73390/comm /proc/73391/comm /proc/73442/comm /proc/74/comm /proc/74152/comm /proc/74176/comm /proc/75/comm /proc/76/comm /proc/77928/comm /proc/77941/comm /proc/78/comm /proc/78438/comm /proc/78462/comm /proc/79/comm /proc/79089/comm /proc/8/comm /proc/80/comm /proc/81/comm /proc/81332/comm /proc/82/comm /proc/82576/comm /proc/83326/comm /proc/83351/comm /proc/83475/comm /proc/83495/comm /proc/83501/comm /proc/83614/comm /proc/83665/comm /proc/83666/comm /proc/83931/comm /proc/84/comm /proc/85/comm /proc/85618/comm /proc/85619/comm /proc/86/comm /proc/87/comm /proc/870/comm /proc/88/comm /proc/88512/comm /proc/88535/comm /proc/88556/comm /proc/88580/comm /proc/88931/comm /proc/88977/comm /proc/89767/comm /proc/90/comm /proc/91/comm /proc/91614/comm /proc/92/comm /proc/9231/comm /proc/92339/comm /proc/9248/comm /proc/9264/comm /proc/93/comm /proc/9346/comm /proc/94/comm /proc/96/comm /proc/96196/comm /proc/96834/comm /proc/96858/comm /proc/97/comm /proc/97269/comm /proc/97287/comm /proc/97288/comm /proc/98/comm /proc/98325/comm /proc/98354/comm /proc/98376/comm /proc/98399/comm /proc/98682/comm /proc/98842/comm /proc/98903/comm /proc/98905/comm /proc/99/comm /proc/99374/comm /proc/9965/comm /proc/99737/comm /proc/self/comm /proc/thread-self/comm
+ '[' -n '' ']'
+ rm -f /var/run/libvirtd.pid
+ [[ -c /dev/kvm ]]
+ chmod 660 /dev/kvm
+ chown root:kvm /dev/kvm
+ CGROUPS=
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/blkio ']'
+ grep -w blkio /sys/fs/cgroup/cgroup.controllers
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/cpu ']'
+ grep -w cpu /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=cpu,
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/devices ']'
+ grep -w devices /sys/fs/cgroup/cgroup.controllers
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/freezer ']'
+ grep -w freezer /sys/fs/cgroup/cgroup.controllers
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/hugetlb ']'
+ grep -w hugetlb /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=hugetlb,
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/memory ']'
+ grep -w memory /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=memory,
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/net_cls ']'
+ grep -w net_cls /sys/fs/cgroup/cgroup.controllers
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/perf_event ']'
+ grep -w perf_event /sys/fs/cgroup/cgroup.controllers
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/rdma ']'
+ grep -w rdma /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=rdma,
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/misc ']'
+ grep -w misc /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=misc,
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/pids ']'
+ grep -w pids /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=pids,
+ cgcreate -g cpu,hugetlb,memory,rdma,misc,pids:/osh-libvirt
++ cat /proc/meminfo
++ grep HugePages_Total
++ tr -cd '[:digit:]'
+ hp_count=0
+ '[' 00 -gt 0 ']'
+ '[' -n 457eb676-33da-42ec-9a8c-9293d545c337 ']'
+ cgexec -g cpu,hugetlb,memory,rdma,misc,pids:/osh-libvirt systemd-run --scope --slice=system libvirtd --listen
++ mktemp --suffix .xml
+ tmpsecret=/tmp/tmp.ibRvBrKFpG.xml
+ '[' -n '' ']'
+ trap cleanup EXIT
+ TIMEOUT=60
+ [[ ! -f /var/run/libvirtd.pid ]]
+ [[ 60 -gt 0 ]]
+ let TIMEOUT-=1
+ sleep 1
Running scope as unit: run-r0c0817bbb11a4674ad29cde8de32e41d.scope
+ [[ ! -f /var/run/libvirtd.pid ]]
+ TIMEOUT=10
+ [[ ! -e /var/run/libvirt/libvirt-sock ]]
+ '[' -z '' ']'
+ '[' -n cinder ']'
++ awk '/key/{print $3}' /etc/ceph/ceph.client.cinder.keyring
+ CEPH_CINDER_KEYRING=AQD07MFqKfyBHxAAJiax60eGx8K4w2xK612qkw==
+ '[' -n cinder ']'
+ create_virsh_libvirt_secret cinder 457eb676-33da-42ec-9a8c-9293d545c337 AQD07MFqKfyBHxAAJiax60eGx8K4w2xK612qkw==
+ sec_user=cinder
+ sec_uuid=457eb676-33da-42ec-9a8c-9293d545c337
+ sec_ceph_keyring=AQD07MFqKfyBHxAAJiax60eGx8K4w2xK612qkw==
+ cat
+ virsh secret-define --file /tmp/tmp.ibRvBrKFpG.xml
Secret 457eb676-33da-42ec-9a8c-9293d545c337 created

+ virsh secret-set-value --secret 457eb676-33da-42ec-9a8c-9293d545c337 --base64 AQD07MFqKfyBHxAAJiax60eGx8K4w2xK612qkw==
error: Passing secret value as command-line argument is insecure!
Secret value set

+ '[' -n '' ']'
+ cleanup
+ rm -f /tmp/tmp.ibRvBrKFpG.xml
+ '[' -n '' ']'
++ cat /var/run/libvirtd.pid
+ LIBVIRTD_PID=168547
+ kill 168547
+ tail --pid=168547 -f /dev/null
+ cgexec -g cpu,hugetlb,memory,rdma,misc,pids:/osh-libvirt systemd-run --scope --slice=system libvirtd --listen
Running scope as unit: run-r1d74873f89fc47dead454982806a81db.scope