+ wait_for_file /etc/pki/CA/cacert.pem
+ local file=/etc/pki/CA/cacert.pem
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ sleep 1
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ sleep 1
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ sleep 1
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ sleep 1
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ sleep 1
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ wait_for_file /etc/pki/qemu/ca-cert.pem
+ local file=/etc/pki/qemu/ca-cert.pem
+ '[' '!' -f /etc/pki/qemu/ca-cert.pem ']'
+ wait_for_file /etc/pki/libvirt/servercert.pem
+ local file=/etc/pki/libvirt/servercert.pem
+ '[' '!' -f /etc/pki/libvirt/servercert.pem ']'
+ wait_for_file /etc/pki/libvirt/clientcert.pem
+ local file=/etc/pki/libvirt/clientcert.pem
+ '[' '!' -f /etc/pki/libvirt/clientcert.pem ']'
+ wait_for_file /etc/pki/qemu/server-cert.pem
+ local file=/etc/pki/qemu/server-cert.pem
+ '[' '!' -f /etc/pki/qemu/server-cert.pem ']'
+ wait_for_file /etc/pki/qemu/client-cert.pem
+ local file=/etc/pki/qemu/client-cert.pem
+ '[' '!' -f /etc/pki/qemu/client-cert.pem ']'
+ wait_for_file /etc/pki/libvirt/private/serverkey.pem
+ local file=/etc/pki/libvirt/private/serverkey.pem
+ '[' '!' -f /etc/pki/libvirt/private/serverkey.pem ']'
+ wait_for_file /etc/pki/libvirt/private/clientkey.pem
+ local file=/etc/pki/libvirt/private/clientkey.pem
+ '[' '!' -f /etc/pki/libvirt/private/clientkey.pem ']'
+ wait_for_file /etc/pki/qemu/server-key.pem
+ local file=/etc/pki/qemu/server-key.pem
+ '[' '!' -f /etc/pki/qemu/server-key.pem ']'
+ wait_for_file /etc/pki/qemu/client-key.pem
+ local file=/etc/pki/qemu/client-key.pem
+ '[' '!' -f /etc/pki/qemu/client-key.pem ']'
+ wait_for_file /etc/pki/libvirt-vnc/ca-cert.pem
+ local file=/etc/pki/libvirt-vnc/ca-cert.pem
+ '[' '!' -f /etc/pki/libvirt-vnc/ca-cert.pem ']'
+ wait_for_file /etc/pki/libvirt-vnc/server-cert.pem
+ local file=/etc/pki/libvirt-vnc/server-cert.pem
+ '[' '!' -f /etc/pki/libvirt-vnc/server-cert.pem ']'
+ wait_for_file /etc/pki/libvirt-vnc/server-key.pem
+ local file=/etc/pki/libvirt-vnc/server-key.pem
+ '[' '!' -f /etc/pki/libvirt-vnc/server-key.pem ']'
++ grep -w libvirtd
++ cat /proc/1/comm /proc/10/comm /proc/100/comm /proc/100417/comm /proc/100685/comm /proc/101469/comm /proc/10160/comm /proc/10182/comm /proc/102/comm /proc/102352/comm /proc/103/comm /proc/104/comm /proc/104105/comm /proc/104474/comm /proc/104487/comm /proc/104488/comm /proc/104970/comm /proc/105/comm /proc/106/comm /proc/107403/comm /proc/107426/comm /proc/107447/comm /proc/107471/comm /proc/108/comm /proc/108013/comm /proc/108369/comm /proc/108469/comm /proc/108980/comm /proc/108981/comm /proc/108995/comm /proc/109/comm /proc/10922/comm /proc/10923/comm /proc/109618/comm /proc/109641/comm /proc/11/comm /proc/110/comm /proc/110088/comm /proc/110692/comm /proc/111/comm /proc/111476/comm /proc/112/comm /proc/112269/comm /proc/112415/comm /proc/112422/comm /proc/113/comm /proc/113186/comm /proc/113702/comm /proc/113730/comm /proc/113731/comm /proc/114/comm /proc/115/comm /proc/115036/comm /proc/115037/comm /proc/116/comm /proc/117/comm /proc/1187/comm /proc/12/comm /proc/121855/comm /proc/121856/comm /proc/121859/comm /proc/121860/comm /proc/121885/comm /proc/121893/comm /proc/122231/comm /proc/122254/comm /proc/122329/comm /proc/123144/comm /proc/123180/comm /proc/123194/comm /proc/123227/comm /proc/123228/comm /proc/123229/comm /proc/123230/comm /proc/12353/comm /proc/123709/comm /proc/123735/comm /proc/12383/comm /proc/124120/comm /proc/124143/comm /proc/12424/comm /proc/124257/comm /proc/12462/comm /proc/124737/comm /proc/12475/comm /proc/124960/comm /proc/124985/comm /proc/125044/comm /proc/125065/comm /proc/125082/comm /proc/125089/comm /proc/125192/comm /proc/125256/comm /proc/125257/comm /proc/126728/comm /proc/126794/comm /proc/126881/comm /proc/126952/comm /proc/126979/comm /proc/126988/comm /proc/127017/comm /proc/12711/comm /proc/127112/comm /proc/127171/comm /proc/127296/comm /proc/127321/comm /proc/127383/comm /proc/127414/comm /proc/12743/comm /proc/127438/comm /proc/127842/comm /proc/127865/comm /proc/12797/comm /proc/128050/comm /proc/128183/comm /proc/12822/comm /proc/12843/comm /proc/1292/comm /proc/1293/comm /proc/1294/comm /proc/1295/comm /proc/13/comm /proc/131036/comm /proc/131075/comm /proc/131607/comm /proc/132728/comm /proc/133550/comm /proc/133564/comm /proc/134738/comm /proc/135139/comm /proc/135176/comm /proc/135177/comm /proc/135184/comm /proc/135185/comm /proc/135311/comm /proc/135327/comm /proc/135328/comm /proc/135905/comm /proc/136010/comm /proc/136142/comm /proc/136193/comm /proc/136194/comm /proc/136228/comm /proc/136229/comm /proc/136687/comm /proc/136698/comm /proc/136771/comm /proc/136798/comm /proc/136907/comm /proc/136925/comm /proc/136932/comm /proc/137016/comm /proc/137067/comm /proc/137068/comm /proc/1376/comm /proc/1380/comm /proc/138298/comm /proc/138337/comm /proc/138378/comm /proc/138407/comm /proc/138451/comm /proc/138453/comm /proc/138470/comm /proc/138514/comm /proc/138527/comm /proc/138558/comm /proc/138660/comm /proc/138919/comm /proc/138944/comm /proc/138969/comm /proc/138994/comm /proc/139534/comm /proc/139553/comm /proc/139556/comm /proc/14/comm /proc/1445/comm /proc/1449/comm /proc/1458/comm /proc/15/comm /proc/156721/comm /proc/156722/comm /proc/156733/comm /proc/156988/comm /proc/157319/comm /proc/157484/comm /proc/157660/comm /proc/158517/comm /proc/158585/comm /proc/158868/comm /proc/159321/comm /proc/159874/comm /proc/159875/comm /proc/159876/comm /proc/16/comm /proc/160049/comm /proc/160050/comm /proc/160051/comm /proc/160237/comm /proc/160317/comm /proc/160337/comm /proc/160338/comm /proc/160352/comm /proc/160364/comm /proc/160365/comm /proc/160444/comm /proc/160445/comm /proc/160446/comm /proc/161066/comm /proc/161405/comm /proc/161486/comm /proc/161613/comm /proc/162164/comm /proc/162389/comm /proc/162414/comm /proc/162421/comm /proc/162736/comm /proc/162737/comm /proc/162945/comm /proc/163092/comm /proc/163105/comm /proc/163134/comm /proc/163138/comm /proc/163233/comm /proc/163251/comm /proc/163252/comm /proc/163253/comm /proc/163254/comm /proc/163255/comm /proc/163256/comm /proc/163340/comm /proc/163393/comm /proc/163394/comm /proc/163398/comm /proc/163399/comm /proc/163400/comm /proc/163401/comm /proc/163402/comm /proc/163403/comm /proc/163404/comm /proc/163405/comm /proc/163406/comm /proc/163407/comm /proc/163408/comm /proc/163409/comm /proc/163410/comm /proc/163411/comm /proc/163412/comm /proc/163413/comm /proc/163414/comm /proc/163415/comm /proc/163416/comm /proc/163417/comm /proc/163418/comm /proc/163419/comm /proc/163420/comm /proc/163421/comm /proc/163422/comm /proc/163423/comm /proc/163424/comm /proc/163425/comm /proc/163426/comm /proc/163427/comm /proc/163428/comm /proc/163434/comm /proc/163663/comm /proc/163762/comm /proc/163788/comm /proc/163862/comm /proc/163974/comm /proc/163981/comm /proc/163986/comm /proc/164017/comm /proc/164018/comm /proc/164019/comm /proc/164020/comm /proc/164021/comm /proc/164022/comm /proc/164023/comm /proc/164024/comm /proc/164025/comm /proc/164026/comm /proc/164027/comm /proc/164028/comm /proc/164029/comm /proc/164030/comm /proc/164031/comm /proc/164055/comm /proc/164078/comm /proc/164091/comm /proc/164092/comm /proc/164093/comm /proc/165/comm /proc/166/comm /proc/167/comm /proc/168/comm /proc/169/comm /proc/17/comm /proc/170/comm /proc/171/comm /proc/172/comm /proc/173/comm /proc/175/comm /proc/176/comm /proc/178/comm /proc/179/comm /proc/18/comm /proc/181/comm /proc/183/comm /proc/185/comm /proc/186/comm /proc/187/comm /proc/188/comm /proc/189/comm /proc/19/comm /proc/190/comm /proc/191/comm /proc/192/comm /proc/193/comm /proc/194/comm /proc/19599/comm /proc/196/comm /proc/19617/comm /proc/19660/comm /proc/19688/comm /proc/19700/comm /proc/2/comm /proc/20/comm /proc/200/comm /proc/209/comm /proc/21/comm /proc/21739/comm /proc/21742/comm /proc/21743/comm /proc/21762/comm /proc/22/comm /proc/220/comm /proc/221/comm /proc/226/comm /proc/24/comm /proc/24550/comm /proc/248/comm /proc/24822/comm /proc/24839/comm /proc/24863/comm /proc/24875/comm /proc/25/comm /proc/26/comm /proc/266/comm /proc/27/comm /proc/28/comm /proc/282/comm /proc/291/comm /proc/292/comm /proc/29262/comm /proc/294/comm /proc/29542/comm /proc/29559/comm /proc/29584/comm /proc/29596/comm /proc/3/comm /proc/30/comm /proc/31/comm /proc/313/comm /proc/314/comm /proc/318/comm /proc/319/comm /proc/32/comm /proc/33/comm /proc/33765/comm /proc/34/comm /proc/34039/comm /proc/34057/comm /proc/34083/comm /proc/34095/comm /proc/346/comm /proc/35265/comm /proc/35675/comm /proc/35677/comm /proc/36/comm /proc/360/comm /proc/37/comm /proc/370/comm /proc/38/comm /proc/380/comm /proc/389/comm /proc/39/comm /proc/395/comm /proc/39718/comm /proc/39731/comm /proc/39769/comm /proc/39788/comm /proc/39790/comm /proc/39822/comm /proc/39830/comm /proc/39860/comm /proc/39875/comm /proc/39893/comm /proc/399/comm /proc/39950/comm /proc/39981/comm /proc/39989/comm /proc/4/comm /proc/40/comm /proc/40012/comm /proc/40127/comm /proc/40182/comm /proc/403/comm /proc/40346/comm /proc/40370/comm /proc/40395/comm /proc/41053/comm /proc/41072/comm /proc/41100/comm /proc/41121/comm /proc/41347/comm /proc/41557/comm /proc/41638/comm /proc/41976/comm /proc/42/comm /proc/42305/comm /proc/42421/comm /proc/42445/comm /proc/42475/comm /proc/42860/comm /proc/42884/comm /proc/42898/comm /proc/42926/comm /proc/42962/comm /proc/42991/comm /proc/43/comm /proc/43350/comm /proc/43374/comm /proc/43569/comm /proc/43944/comm /proc/43967/comm /proc/43988/comm /proc/44/comm /proc/44003/comm /proc/44036/comm /proc/44048/comm /proc/44167/comm /proc/44211/comm /proc/44250/comm /proc/45/comm /proc/454/comm /proc/45942/comm /proc/46/comm /proc/46034/comm /proc/46068/comm /proc/46148/comm /proc/46170/comm /proc/46396/comm /proc/46408/comm /proc/46446/comm /proc/46555/comm /proc/46882/comm /proc/46909/comm /proc/47026/comm /proc/47049/comm /proc/47101/comm /proc/47227/comm /proc/47400/comm /proc/47424/comm /proc/47542/comm /proc/47932/comm /proc/47956/comm /proc/48/comm /proc/48149/comm /proc/48194/comm /proc/48264/comm /proc/48287/comm /proc/48379/comm /proc/48475/comm /proc/48581/comm /proc/49/comm /proc/5/comm /proc/50/comm /proc/50059/comm /proc/50081/comm /proc/50229/comm /proc/50317/comm /proc/51/comm /proc/52/comm /proc/52110/comm /proc/52133/comm /proc/523/comm /proc/52692/comm /proc/52713/comm /proc/52730/comm /proc/52762/comm /proc/52944/comm /proc/52968/comm /proc/53024/comm /proc/53071/comm /proc/53153/comm /proc/54/comm /proc/55/comm /proc/55836/comm /proc/55859/comm /proc/55983/comm /proc/56/comm /proc/56009/comm /proc/56034/comm /proc/56059/comm /proc/56081/comm /proc/56104/comm /proc/56231/comm /proc/56566/comm /proc/56856/comm /proc/56881/comm /proc/57/comm /proc/57090/comm /proc/57113/comm /proc/57114/comm /proc/57165/comm /proc/57166/comm /proc/57233/comm /proc/57258/comm /proc/57327/comm /proc/57352/comm /proc/57452/comm /proc/57584/comm /proc/57611/comm /proc/57823/comm /proc/57992/comm /proc/58/comm /proc/58027/comm /proc/58318/comm /proc/58344/comm /proc/58504/comm /proc/58518/comm /proc/58519/comm /proc/58520/comm /proc/58521/comm /proc/58522/comm /proc/58680/comm /proc/58715/comm /proc/58863/comm /proc/58885/comm /proc/59098/comm /proc/59132/comm /proc/59283/comm /proc/59615/comm /proc/59638/comm /proc/59726/comm /proc/59764/comm /proc/59805/comm /proc/59869/comm /proc/59927/comm /proc/59969/comm /proc/6/comm /proc/60/comm /proc/60055/comm /proc/60216/comm /proc/60283/comm /proc/60469/comm /proc/60481/comm /proc/60578/comm /proc/60613/comm /proc/60651/comm /proc/60753/comm /proc/60778/comm /proc/60979/comm /proc/60996/comm /proc/61/comm /proc/61003/comm /proc/61057/comm /proc/61108/comm /proc/61109/comm /proc/616/comm /proc/619/comm /proc/62/comm /proc/622/comm /proc/62268/comm /proc/62291/comm /proc/62428/comm /proc/628/comm /proc/629/comm /proc/63/comm /proc/63736/comm /proc/64/comm /proc/646/comm /proc/649/comm /proc/64903/comm /proc/64918/comm /proc/64919/comm /proc/64920/comm /proc/64921/comm /proc/64923/comm /proc/64924/comm /proc/64926/comm /proc/64929/comm /proc/64930/comm /proc/64931/comm /proc/64932/comm /proc/64934/comm /proc/64935/comm /proc/64936/comm /proc/66/comm /proc/67/comm /proc/68/comm /proc/69/comm /proc/69414/comm /proc/69575/comm /proc/69598/comm /proc/69685/comm /proc/69702/comm /proc/69709/comm /proc/69763/comm /proc/69814/comm /proc/69815/comm /proc/70/comm /proc/701/comm /proc/704/comm /proc/705/comm /proc/70776/comm /proc/70800/comm /proc/71067/comm /proc/71778/comm /proc/718/comm /proc/72/comm /proc/73/comm /proc/73054/comm /proc/73696/comm /proc/74/comm /proc/74511/comm /proc/74851/comm /proc/74864/comm /proc/75/comm /proc/75834/comm /proc/75857/comm /proc/76/comm /proc/76580/comm /proc/78/comm /proc/79/comm /proc/8/comm /proc/80/comm /proc/80332/comm /proc/80356/comm /proc/80459/comm /proc/80475/comm /proc/80482/comm /proc/80564/comm /proc/80623/comm /proc/80624/comm /proc/81/comm /proc/82/comm /proc/82783/comm /proc/84/comm /proc/84092/comm /proc/85/comm /proc/85781/comm /proc/85785/comm /proc/86/comm /proc/863/comm /proc/87/comm /proc/879/comm /proc/88/comm /proc/88078/comm /proc/88114/comm /proc/88183/comm /proc/88207/comm /proc/88315/comm /proc/88424/comm /proc/89161/comm /proc/89687/comm /proc/89803/comm /proc/90/comm /proc/90392/comm /proc/9056/comm /proc/9073/comm /proc/9089/comm /proc/91/comm /proc/9171/comm /proc/92/comm /proc/92148/comm /proc/92170/comm /proc/92304/comm /proc/92457/comm /proc/92470/comm /proc/92471/comm /proc/93/comm /proc/93389/comm /proc/93416/comm /proc/93438/comm /proc/93474/comm /proc/93814/comm /proc/93908/comm /proc/94/comm /proc/94129/comm /proc/94131/comm /proc/94508/comm /proc/94889/comm /proc/94978/comm /proc/95106/comm /proc/95131/comm /proc/95234/comm /proc/95251/comm /proc/95258/comm /proc/95371/comm /proc/95422/comm /proc/95423/comm /proc/96/comm /proc/96518/comm /proc/96549/comm /proc/96576/comm /proc/96615/comm /proc/97/comm /proc/97058/comm /proc/9787/comm /proc/98/comm /proc/98517/comm /proc/99/comm /proc/self/comm /proc/thread-self/comm
+ '[' -n '' ']'
+ rm -f /var/run/libvirtd.pid
+ [[ -c /dev/kvm ]]
+ chmod 660 /dev/kvm
+ chown root:kvm /dev/kvm
+ CGROUPS=
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/blkio ']'
+ grep -w blkio /sys/fs/cgroup/cgroup.controllers
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/cpu ']'
+ grep -w cpu /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=cpu,
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/devices ']'
+ grep -w devices /sys/fs/cgroup/cgroup.controllers
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/freezer ']'
+ grep -w freezer /sys/fs/cgroup/cgroup.controllers
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/hugetlb ']'
+ grep -w hugetlb /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=hugetlb,
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/memory ']'
+ grep -w memory /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=memory,
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/net_cls ']'
+ grep -w net_cls /sys/fs/cgroup/cgroup.controllers
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/perf_event ']'
+ grep -w perf_event /sys/fs/cgroup/cgroup.controllers
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/rdma ']'
+ grep -w rdma /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=rdma,
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/misc ']'
+ grep -w misc /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=misc,
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/pids ']'
+ grep -w pids /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=pids,
+ cgcreate -g cpu,hugetlb,memory,rdma,misc,pids:/osh-libvirt
++ cat /proc/meminfo
++ grep HugePages_Total
++ tr -cd '[:digit:]'
+ hp_count=0
+ '[' 00 -gt 0 ']'
+ '[' -n 457eb676-33da-42ec-9a8c-9293d545c337 ']'
+ cgexec -g cpu,hugetlb,memory,rdma,misc,pids:/osh-libvirt systemd-run --scope --slice=system libvirtd --listen
++ mktemp --suffix .xml
+ tmpsecret=/tmp/tmp.vHy8NBm9eF.xml
+ '[' -n '' ']'
+ trap cleanup EXIT
+ TIMEOUT=60
+ [[ ! -f /var/run/libvirtd.pid ]]
+ [[ 60 -gt 0 ]]
+ let TIMEOUT-=1
+ sleep 1
Running scope as unit: run-r918eeba9c7b5495088c0aeeece96f15e.scope
+ [[ ! -f /var/run/libvirtd.pid ]]
+ TIMEOUT=10
+ [[ ! -e /var/run/libvirt/libvirt-sock ]]
+ '[' -z '' ']'
+ '[' -n cinder ']'
++ awk '/key/{print $3}' /etc/ceph/ceph.client.cinder.keyring
+ CEPH_CINDER_KEYRING=AQBRsP9p8RZyGBAATSuhgf5ZZmNXMc2FftH+Dw==
+ '[' -n cinder ']'
+ create_virsh_libvirt_secret cinder 457eb676-33da-42ec-9a8c-9293d545c337 AQBRsP9p8RZyGBAATSuhgf5ZZmNXMc2FftH+Dw==
+ sec_user=cinder
+ sec_uuid=457eb676-33da-42ec-9a8c-9293d545c337
+ sec_ceph_keyring=AQBRsP9p8RZyGBAATSuhgf5ZZmNXMc2FftH+Dw==
+ cat
+ virsh secret-define --file /tmp/tmp.vHy8NBm9eF.xml
Secret 457eb676-33da-42ec-9a8c-9293d545c337 created

+ virsh secret-set-value --secret 457eb676-33da-42ec-9a8c-9293d545c337 --base64 AQBRsP9p8RZyGBAATSuhgf5ZZmNXMc2FftH+Dw==
error: Passing secret value as command-line argument is insecure!
Secret value set

+ '[' -n '' ']'
+ cleanup
+ rm -f /tmp/tmp.vHy8NBm9eF.xml
+ '[' -n '' ']'
++ cat /var/run/libvirtd.pid
+ LIBVIRTD_PID=164115
+ kill 164115
+ tail --pid=164115 -f /dev/null
+ cgexec -g cpu,hugetlb,memory,rdma,misc,pids:/osh-libvirt systemd-run --scope --slice=system libvirtd --listen
Running scope as unit: run-rdf7d736b6b7c4cdba0d189c6f86a7c58.scope