+ wait_for_file /etc/pki/CA/cacert.pem
+ local file=/etc/pki/CA/cacert.pem
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ sleep 1
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ sleep 1
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ sleep 1
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ sleep 1
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ sleep 1
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ wait_for_file /etc/pki/qemu/ca-cert.pem
+ local file=/etc/pki/qemu/ca-cert.pem
+ '[' '!' -f /etc/pki/qemu/ca-cert.pem ']'
+ wait_for_file /etc/pki/libvirt/servercert.pem
+ local file=/etc/pki/libvirt/servercert.pem
+ '[' '!' -f /etc/pki/libvirt/servercert.pem ']'
+ wait_for_file /etc/pki/libvirt/clientcert.pem
+ local file=/etc/pki/libvirt/clientcert.pem
+ '[' '!' -f /etc/pki/libvirt/clientcert.pem ']'
+ wait_for_file /etc/pki/qemu/server-cert.pem
+ local file=/etc/pki/qemu/server-cert.pem
+ '[' '!' -f /etc/pki/qemu/server-cert.pem ']'
+ wait_for_file /etc/pki/qemu/client-cert.pem
+ local file=/etc/pki/qemu/client-cert.pem
+ '[' '!' -f /etc/pki/qemu/client-cert.pem ']'
+ wait_for_file /etc/pki/libvirt/private/serverkey.pem
+ local file=/etc/pki/libvirt/private/serverkey.pem
+ '[' '!' -f /etc/pki/libvirt/private/serverkey.pem ']'
+ wait_for_file /etc/pki/libvirt/private/clientkey.pem
+ local file=/etc/pki/libvirt/private/clientkey.pem
+ '[' '!' -f /etc/pki/libvirt/private/clientkey.pem ']'
+ wait_for_file /etc/pki/qemu/server-key.pem
+ local file=/etc/pki/qemu/server-key.pem
+ '[' '!' -f /etc/pki/qemu/server-key.pem ']'
+ wait_for_file /etc/pki/qemu/client-key.pem
+ local file=/etc/pki/qemu/client-key.pem
+ '[' '!' -f /etc/pki/qemu/client-key.pem ']'
+ wait_for_file /etc/pki/libvirt-vnc/ca-cert.pem
+ local file=/etc/pki/libvirt-vnc/ca-cert.pem
+ '[' '!' -f /etc/pki/libvirt-vnc/ca-cert.pem ']'
+ wait_for_file /etc/pki/libvirt-vnc/server-cert.pem
+ local file=/etc/pki/libvirt-vnc/server-cert.pem
+ '[' '!' -f /etc/pki/libvirt-vnc/server-cert.pem ']'
+ wait_for_file /etc/pki/libvirt-vnc/server-key.pem
+ local file=/etc/pki/libvirt-vnc/server-key.pem
+ '[' '!' -f /etc/pki/libvirt-vnc/server-key.pem ']'
++ grep -w libvirtd
++ cat /proc/1/comm /proc/10/comm /proc/100/comm /proc/100331/comm /proc/101223/comm /proc/10172/comm /proc/102/comm /proc/103/comm /proc/103141/comm /proc/103177/comm /proc/103636/comm /proc/103650/comm /proc/103651/comm /proc/103930/comm /proc/104/comm /proc/105/comm /proc/106/comm /proc/106274/comm /proc/106297/comm /proc/106339/comm /proc/106367/comm /proc/106569/comm /proc/106662/comm /proc/106743/comm /proc/10680/comm /proc/10681/comm /proc/106922/comm /proc/107180/comm /proc/107294/comm /proc/108/comm /proc/108580/comm /proc/108603/comm /proc/108836/comm /proc/108932/comm /proc/109/comm /proc/109607/comm /proc/109881/comm /proc/10999/comm /proc/11/comm /proc/110/comm /proc/110331/comm /proc/110725/comm /proc/111/comm /proc/111396/comm /proc/111629/comm /proc/112/comm /proc/112799/comm /proc/112820/comm /proc/112821/comm /proc/113/comm /proc/114/comm /proc/114010/comm /proc/114011/comm /proc/115/comm /proc/116/comm /proc/117/comm /proc/1187/comm /proc/12/comm /proc/120879/comm /proc/120880/comm /proc/120882/comm /proc/120883/comm /proc/120903/comm /proc/121256/comm /proc/12126/comm /proc/121279/comm /proc/12161/comm /proc/122063/comm /proc/12215/comm /proc/122158/comm /proc/122182/comm /proc/122214/comm /proc/122215/comm /proc/122216/comm /proc/122217/comm /proc/12238/comm /proc/12260/comm /proc/122747/comm /proc/122772/comm /proc/123127/comm /proc/123261/comm /proc/123286/comm /proc/123396/comm /proc/123885/comm /proc/123894/comm /proc/124045/comm /proc/124069/comm /proc/124181/comm /proc/124196/comm /proc/124214/comm /proc/124221/comm /proc/124278/comm /proc/124338/comm /proc/124339/comm /proc/12491/comm /proc/12523/comm /proc/125521/comm /proc/125741/comm /proc/125784/comm /proc/12579/comm /proc/125853/comm /proc/125894/comm /proc/125934/comm /proc/12601/comm /proc/12622/comm /proc/126245/comm /proc/126270/comm /proc/126289/comm /proc/126314/comm /proc/126342/comm /proc/126374/comm /proc/126390/comm /proc/126589/comm /proc/126612/comm /proc/126824/comm /proc/126848/comm /proc/127061/comm /proc/1294/comm /proc/1295/comm /proc/1296/comm /proc/1297/comm /proc/13/comm /proc/130310/comm /proc/130311/comm /proc/130855/comm /proc/130899/comm /proc/130916/comm /proc/130986/comm /proc/132066/comm /proc/132798/comm /proc/134087/comm /proc/134094/comm /proc/134097/comm /proc/134473/comm /proc/134550/comm /proc/134616/comm /proc/134617/comm /proc/134726/comm /proc/134746/comm /proc/134747/comm /proc/135350/comm /proc/135444/comm /proc/135460/comm /proc/135586/comm /proc/135588/comm /proc/135650/comm /proc/135651/comm /proc/135657/comm /proc/135658/comm /proc/135968/comm /proc/136107/comm /proc/136216/comm /proc/136239/comm /proc/136326/comm /proc/136343/comm /proc/136350/comm /proc/136406/comm /proc/136508/comm /proc/136509/comm /proc/1385/comm /proc/1389/comm /proc/14/comm /proc/145439/comm /proc/1455/comm /proc/145549/comm /proc/145554/comm /proc/145645/comm /proc/145761/comm /proc/145795/comm /proc/145868/comm /proc/1459/comm /proc/145952/comm /proc/1468/comm /proc/146825/comm /proc/146826/comm /proc/146827/comm /proc/146842/comm /proc/146924/comm /proc/147042/comm /proc/147114/comm /proc/147905/comm /proc/147978/comm /proc/15/comm /proc/150/comm /proc/15106/comm /proc/152351/comm /proc/152363/comm /proc/152552/comm /proc/154999/comm /proc/156322/comm /proc/157059/comm /proc/157126/comm /proc/157139/comm /proc/157244/comm /proc/158400/comm /proc/158401/comm /proc/158410/comm /proc/158601/comm /proc/158602/comm /proc/158603/comm /proc/158717/comm /proc/158764/comm /proc/158787/comm /proc/158788/comm /proc/158806/comm /proc/158819/comm /proc/158820/comm /proc/158875/comm /proc/159210/comm /proc/159211/comm /proc/159212/comm /proc/159743/comm /proc/159981/comm /proc/16/comm /proc/160130/comm /proc/160209/comm /proc/160363/comm /proc/160897/comm /proc/160920/comm /proc/160926/comm /proc/161000/comm /proc/161120/comm /proc/161121/comm /proc/161296/comm /proc/161672/comm /proc/161687/comm /proc/161688/comm /proc/161689/comm /proc/161690/comm /proc/161691/comm /proc/161692/comm /proc/161810/comm /proc/161834/comm /proc/161836/comm /proc/161841/comm /proc/161842/comm /proc/161843/comm /proc/161844/comm /proc/161845/comm /proc/161846/comm /proc/161847/comm /proc/161848/comm /proc/161849/comm /proc/161850/comm /proc/161851/comm /proc/161852/comm /proc/161853/comm /proc/161854/comm /proc/161855/comm /proc/161856/comm /proc/161857/comm /proc/161858/comm /proc/161859/comm /proc/161860/comm /proc/161861/comm /proc/161862/comm /proc/161863/comm /proc/161864/comm /proc/161865/comm /proc/161866/comm /proc/161867/comm /proc/161868/comm /proc/161869/comm /proc/161870/comm /proc/161871/comm /proc/161872/comm /proc/161873/comm /proc/161874/comm /proc/161875/comm /proc/161876/comm /proc/161877/comm /proc/161878/comm /proc/161879/comm /proc/161880/comm /proc/161881/comm /proc/161882/comm /proc/161883/comm /proc/161884/comm /proc/161885/comm /proc/161886/comm /proc/162132/comm /proc/162185/comm /proc/162236/comm /proc/162299/comm /proc/162322/comm /proc/162341/comm /proc/162423/comm /proc/162431/comm /proc/162455/comm /proc/162661/comm /proc/162680/comm /proc/162690/comm /proc/162753/comm /proc/162754/comm /proc/162784/comm /proc/162785/comm /proc/162839/comm /proc/162840/comm /proc/162890/comm /proc/162908/comm /proc/162940/comm /proc/162962/comm /proc/162963/comm /proc/162964/comm /proc/167/comm /proc/168/comm /proc/169/comm /proc/170/comm /proc/171/comm /proc/172/comm /proc/173/comm /proc/174/comm /proc/175/comm /proc/177/comm /proc/178/comm /proc/18/comm /proc/181/comm /proc/182/comm /proc/184/comm /proc/186/comm /proc/187/comm /proc/188/comm /proc/189/comm /proc/19/comm /proc/190/comm /proc/191/comm /proc/192/comm /proc/193/comm /proc/19305/comm /proc/19327/comm /proc/19348/comm /proc/19374/comm /proc/19392/comm /proc/194/comm /proc/195/comm /proc/196/comm /proc/2/comm /proc/20/comm /proc/203/comm /proc/21/comm /proc/212/comm /proc/21435/comm /proc/21442/comm /proc/21444/comm /proc/21461/comm /proc/21827/comm /proc/219/comm /proc/22/comm /proc/221/comm /proc/226/comm /proc/24/comm /proc/24243/comm /proc/24513/comm /proc/24531/comm /proc/24556/comm /proc/24568/comm /proc/248/comm /proc/25/comm /proc/26/comm /proc/263/comm /proc/27/comm /proc/28/comm /proc/284/comm /proc/288/comm /proc/289/comm /proc/28951/comm /proc/290/comm /proc/292/comm /proc/29226/comm /proc/29243/comm /proc/29268/comm /proc/29284/comm /proc/3/comm /proc/30/comm /proc/31/comm /proc/311/comm /proc/312/comm /proc/316/comm /proc/32/comm /proc/33/comm /proc/33621/comm /proc/33895/comm /proc/33913/comm /proc/33937/comm /proc/33950/comm /proc/34/comm /proc/350/comm /proc/35528/comm /proc/35530/comm /proc/35531/comm /proc/357/comm /proc/36/comm /proc/365/comm /proc/37/comm /proc/377/comm /proc/38/comm /proc/387/comm /proc/388/comm /proc/39/comm /proc/394/comm /proc/39490/comm /proc/39521/comm /proc/39530/comm /proc/39559/comm /proc/39566/comm /proc/39581/comm /proc/39629/comm /proc/39634/comm /proc/39650/comm /proc/39667/comm /proc/397/comm /proc/39733/comm /proc/39746/comm /proc/39765/comm /proc/39781/comm /proc/39880/comm /proc/39952/comm /proc/4/comm /proc/40/comm /proc/40101/comm /proc/40124/comm /proc/40161/comm /proc/40816/comm /proc/40846/comm /proc/40864/comm /proc/40886/comm /proc/41587/comm /proc/41838/comm /proc/42/comm /proc/42217/comm /proc/42497/comm /proc/42521/comm /proc/42605/comm /proc/42617/comm /proc/42643/comm /proc/42697/comm /proc/42778/comm /proc/42807/comm /proc/42826/comm /proc/42854/comm /proc/42949/comm /proc/42973/comm /proc/43/comm /proc/43004/comm /proc/43027/comm /proc/43058/comm /proc/43113/comm /proc/43199/comm /proc/43242/comm /proc/43489/comm /proc/44/comm /proc/45/comm /proc/45102/comm /proc/45143/comm /proc/45207/comm /proc/45230/comm /proc/454/comm /proc/45465/comm /proc/45478/comm /proc/45505/comm /proc/45587/comm /proc/45939/comm /proc/45962/comm /proc/46/comm /proc/46057/comm /proc/46077/comm /proc/46160/comm /proc/46259/comm /proc/46431/comm /proc/46454/comm /proc/46574/comm /proc/46731/comm /proc/46757/comm /proc/47017/comm /proc/47064/comm /proc/47164/comm /proc/47187/comm /proc/47280/comm /proc/47551/comm /proc/47657/comm /proc/48/comm /proc/48880/comm /proc/48910/comm /proc/49/comm /proc/49033/comm /proc/491/comm /proc/49735/comm /proc/5/comm /proc/50/comm /proc/51/comm /proc/51231/comm /proc/51253/comm /proc/51804/comm /proc/51833/comm /proc/51852/comm /proc/51875/comm /proc/52/comm /proc/52008/comm /proc/52033/comm /proc/52108/comm /proc/52149/comm /proc/52239/comm /proc/523/comm /proc/54/comm /proc/54855/comm /proc/55/comm /proc/55048/comm /proc/55071/comm /proc/55116/comm /proc/55142/comm /proc/55160/comm /proc/55185/comm /proc/55212/comm /proc/55236/comm /proc/55492/comm /proc/55622/comm /proc/55999/comm /proc/56/comm /proc/56023/comm /proc/56120/comm /proc/56228/comm /proc/56229/comm /proc/56240/comm /proc/56241/comm /proc/56254/comm /proc/56294/comm /proc/56539/comm /proc/56574/comm /proc/56678/comm /proc/56721/comm /proc/56806/comm /proc/56829/comm /proc/57/comm /proc/57292/comm /proc/57314/comm /proc/57497/comm /proc/57630/comm /proc/57654/comm /proc/57900/comm /proc/57924/comm /proc/58/comm /proc/58042/comm /proc/58063/comm /proc/58065/comm /proc/58066/comm /proc/58067/comm /proc/58068/comm /proc/58113/comm /proc/58304/comm /proc/58326/comm /proc/58587/comm /proc/58626/comm /proc/58741/comm /proc/58957/comm /proc/58981/comm /proc/59041/comm /proc/59133/comm /proc/59176/comm /proc/59269/comm /proc/59306/comm /proc/59354/comm /proc/59483/comm /proc/59783/comm /proc/59818/comm /proc/6/comm /proc/60/comm /proc/60060/comm /proc/60085/comm /proc/60112/comm /proc/60148/comm /proc/60368/comm /proc/60386/comm /proc/60393/comm /proc/60463/comm /proc/60488/comm /proc/60539/comm /proc/60540/comm /proc/61/comm /proc/61498/comm /proc/61522/comm /proc/616/comm /proc/619/comm /proc/62/comm /proc/622/comm /proc/625/comm /proc/627/comm /proc/63/comm /proc/63701/comm /proc/64/comm /proc/64161/comm /proc/64176/comm /proc/64177/comm /proc/64178/comm /proc/64179/comm /proc/64181/comm /proc/64182/comm /proc/64183/comm /proc/64187/comm /proc/64188/comm /proc/64190/comm /proc/64191/comm /proc/64193/comm /proc/64194/comm /proc/64195/comm /proc/647/comm /proc/652/comm /proc/66/comm /proc/67/comm /proc/67189/comm /proc/68/comm /proc/68683/comm /proc/68706/comm /proc/68808/comm /proc/68826/comm /proc/68833/comm /proc/68887/comm /proc/68938/comm /proc/68939/comm /proc/69/comm /proc/69867/comm /proc/69891/comm /proc/70/comm /proc/70272/comm /proc/703/comm /proc/706/comm /proc/707/comm /proc/72/comm /proc/720/comm /proc/72259/comm /proc/73/comm /proc/73979/comm /proc/74/comm /proc/74011/comm /proc/74653/comm /proc/74678/comm /proc/75/comm /proc/75343/comm /proc/76/comm /proc/76879/comm /proc/78/comm /proc/78017/comm /proc/78693/comm /proc/79/comm /proc/79044/comm /proc/79121/comm /proc/79144/comm /proc/79248/comm /proc/79264/comm /proc/79271/comm /proc/79334/comm /proc/79385/comm /proc/79386/comm /proc/8/comm /proc/80/comm /proc/81/comm /proc/81922/comm /proc/81923/comm /proc/82/comm /proc/82557/comm /proc/84/comm /proc/84529/comm /proc/85/comm /proc/86/comm /proc/865/comm /proc/87/comm /proc/87113/comm /proc/87136/comm /proc/87159/comm /proc/87183/comm /proc/87297/comm /proc/87438/comm /proc/88/comm /proc/88100/comm /proc/9/comm /proc/90/comm /proc/9070/comm /proc/9087/comm /proc/90932/comm /proc/90956/comm /proc/91/comm /proc/9103/comm /proc/91305/comm /proc/91324/comm /proc/91325/comm /proc/9185/comm /proc/92/comm /proc/92006/comm /proc/92221/comm /proc/92246/comm /proc/92316/comm /proc/92352/comm /proc/92591/comm /proc/92814/comm /proc/92816/comm /proc/93/comm /proc/93230/comm /proc/93598/comm /proc/93937/comm /proc/93960/comm /proc/94/comm /proc/94077/comm /proc/94095/comm /proc/94102/comm /proc/94156/comm /proc/94207/comm /proc/94208/comm /proc/95147/comm /proc/95309/comm /proc/95339/comm /proc/95394/comm /proc/95435/comm /proc/95944/comm /proc/96/comm /proc/97/comm /proc/97002/comm /proc/98/comm /proc/9801/comm /proc/99/comm /proc/self/comm /proc/thread-self/comm
+ '[' -n '' ']'
+ rm -f /var/run/libvirtd.pid
+ [[ -c /dev/kvm ]]
+ chmod 660 /dev/kvm
+ chown root:kvm /dev/kvm
+ CGROUPS=
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/blkio ']'
+ grep -w blkio /sys/fs/cgroup/cgroup.controllers
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/cpu ']'
+ grep -w cpu /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=cpu,
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/devices ']'
+ grep -w devices /sys/fs/cgroup/cgroup.controllers
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/freezer ']'
+ grep -w freezer /sys/fs/cgroup/cgroup.controllers
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/hugetlb ']'
+ grep -w hugetlb /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=hugetlb,
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/memory ']'
+ grep -w memory /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=memory,
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/net_cls ']'
+ grep -w net_cls /sys/fs/cgroup/cgroup.controllers
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/perf_event ']'
+ grep -w perf_event /sys/fs/cgroup/cgroup.controllers
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/rdma ']'
+ grep -w rdma /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=rdma,
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/misc ']'
+ grep -w misc /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=misc,
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/pids ']'
+ grep -w pids /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=pids,
+ cgcreate -g cpu,hugetlb,memory,rdma,misc,pids:/osh-libvirt
++ cat /proc/meminfo
++ grep HugePages_Total
++ tr -cd '[:digit:]'
+ hp_count=0
+ '[' 00 -gt 0 ']'
+ '[' -n 457eb676-33da-42ec-9a8c-9293d545c337 ']'
+ cgexec -g cpu,hugetlb,memory,rdma,misc,pids:/osh-libvirt systemd-run --scope --slice=system libvirtd --listen
++ mktemp --suffix .xml
+ tmpsecret=/tmp/tmp.O9QeBSVYy1.xml
+ '[' -n '' ']'
+ trap cleanup EXIT
+ TIMEOUT=60
+ [[ ! -f /var/run/libvirtd.pid ]]
+ [[ 60 -gt 0 ]]
+ let TIMEOUT-=1
+ sleep 1
Running scope as unit: run-rece158d92e15484e9de238529330eb4c.scope
+ [[ ! -f /var/run/libvirtd.pid ]]
+ TIMEOUT=10
+ [[ ! -e /var/run/libvirt/libvirt-sock ]]
+ '[' -z '' ']'
+ '[' -n cinder ']'
++ awk '/key/{print $3}' /etc/ceph/ceph.client.cinder.keyring
+ CEPH_CINDER_KEYRING=AQC4zZ9pbv70IxAABvHoA8UHFr6gTmRCRH1HWw==
+ '[' -n cinder ']'
+ create_virsh_libvirt_secret cinder 457eb676-33da-42ec-9a8c-9293d545c337 AQC4zZ9pbv70IxAABvHoA8UHFr6gTmRCRH1HWw==
+ sec_user=cinder
+ sec_uuid=457eb676-33da-42ec-9a8c-9293d545c337
+ sec_ceph_keyring=AQC4zZ9pbv70IxAABvHoA8UHFr6gTmRCRH1HWw==
+ cat
+ virsh secret-define --file /tmp/tmp.O9QeBSVYy1.xml
Secret 457eb676-33da-42ec-9a8c-9293d545c337 created

+ virsh secret-set-value --secret 457eb676-33da-42ec-9a8c-9293d545c337 --base64 AQC4zZ9pbv70IxAABvHoA8UHFr6gTmRCRH1HWw==
error: Passing secret value as command-line argument is insecure!
Secret value set

+ '[' -n '' ']'
+ cleanup
+ rm -f /tmp/tmp.O9QeBSVYy1.xml
+ '[' -n '' ']'
++ cat /var/run/libvirtd.pid
+ LIBVIRTD_PID=162985
+ kill 162985
+ tail --pid=162985 -f /dev/null
+ cgexec -g cpu,hugetlb,memory,rdma,misc,pids:/osh-libvirt systemd-run --scope --slice=system libvirtd --listen
Running scope as unit: run-r0b76b44a783842868cb74bd0a01e6d95.scope