+ wait_for_file /etc/pki/CA/cacert.pem
+ local file=/etc/pki/CA/cacert.pem
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ sleep 1
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ sleep 1
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ sleep 1
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ sleep 1
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ sleep 1
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ wait_for_file /etc/pki/qemu/ca-cert.pem
+ local file=/etc/pki/qemu/ca-cert.pem
+ '[' '!' -f /etc/pki/qemu/ca-cert.pem ']'
+ wait_for_file /etc/pki/libvirt/servercert.pem
+ local file=/etc/pki/libvirt/servercert.pem
+ '[' '!' -f /etc/pki/libvirt/servercert.pem ']'
+ wait_for_file /etc/pki/libvirt/clientcert.pem
+ local file=/etc/pki/libvirt/clientcert.pem
+ '[' '!' -f /etc/pki/libvirt/clientcert.pem ']'
+ wait_for_file /etc/pki/qemu/server-cert.pem
+ local file=/etc/pki/qemu/server-cert.pem
+ '[' '!' -f /etc/pki/qemu/server-cert.pem ']'
+ wait_for_file /etc/pki/qemu/client-cert.pem
+ local file=/etc/pki/qemu/client-cert.pem
+ '[' '!' -f /etc/pki/qemu/client-cert.pem ']'
+ wait_for_file /etc/pki/libvirt/private/serverkey.pem
+ local file=/etc/pki/libvirt/private/serverkey.pem
+ '[' '!' -f /etc/pki/libvirt/private/serverkey.pem ']'
+ wait_for_file /etc/pki/libvirt/private/clientkey.pem
+ local file=/etc/pki/libvirt/private/clientkey.pem
+ '[' '!' -f /etc/pki/libvirt/private/clientkey.pem ']'
+ wait_for_file /etc/pki/qemu/server-key.pem
+ local file=/etc/pki/qemu/server-key.pem
+ '[' '!' -f /etc/pki/qemu/server-key.pem ']'
+ wait_for_file /etc/pki/qemu/client-key.pem
+ local file=/etc/pki/qemu/client-key.pem
+ '[' '!' -f /etc/pki/qemu/client-key.pem ']'
+ wait_for_file /etc/pki/libvirt-vnc/ca-cert.pem
+ local file=/etc/pki/libvirt-vnc/ca-cert.pem
+ '[' '!' -f /etc/pki/libvirt-vnc/ca-cert.pem ']'
+ wait_for_file /etc/pki/libvirt-vnc/server-cert.pem
+ local file=/etc/pki/libvirt-vnc/server-cert.pem
+ '[' '!' -f /etc/pki/libvirt-vnc/server-cert.pem ']'
+ wait_for_file /etc/pki/libvirt-vnc/server-key.pem
+ local file=/etc/pki/libvirt-vnc/server-key.pem
+ '[' '!' -f /etc/pki/libvirt-vnc/server-key.pem ']'
++ grep -w libvirtd
++ cat /proc/1/comm /proc/10/comm /proc/100/comm /proc/100298/comm /proc/10171/comm /proc/102/comm /proc/10201/comm /proc/102917/comm /proc/102935/comm /proc/102936/comm /proc/103/comm /proc/103342/comm /proc/103355/comm /proc/103356/comm /proc/103698/comm /proc/104/comm /proc/105/comm /proc/106/comm /proc/106098/comm /proc/106120/comm /proc/106179/comm /proc/106202/comm /proc/106629/comm /proc/106718/comm /proc/10688/comm /proc/10689/comm /proc/107023/comm /proc/107086/comm /proc/107210/comm /proc/107534/comm /proc/107699/comm /proc/108/comm /proc/108252/comm /proc/108276/comm /proc/108713/comm /proc/109/comm /proc/109394/comm /proc/109414/comm /proc/11/comm /proc/110/comm /proc/110107/comm /proc/11012/comm /proc/110250/comm /proc/111/comm /proc/111833/comm /proc/112/comm /proc/112372/comm /proc/112395/comm /proc/112396/comm /proc/113/comm /proc/113730/comm /proc/113731/comm /proc/114/comm /proc/115/comm /proc/116/comm /proc/117/comm /proc/1185/comm /proc/12/comm /proc/120681/comm /proc/120682/comm /proc/120685/comm /proc/120686/comm /proc/120729/comm /proc/121008/comm /proc/121031/comm /proc/121099/comm /proc/12134/comm /proc/121484/comm /proc/12165/comm /proc/121876/comm /proc/121918/comm /proc/121937/comm /proc/12199/comm /proc/122004/comm /proc/122005/comm /proc/122006/comm /proc/122007/comm /proc/122308/comm /proc/122340/comm /proc/122353/comm /proc/12244/comm /proc/12257/comm /proc/122727/comm /proc/122802/comm /proc/122864/comm /proc/123142/comm /proc/123176/comm /proc/123192/comm /proc/123219/comm /proc/123314/comm /proc/123374/comm /proc/123376/comm /proc/123412/comm /proc/123431/comm /proc/123484/comm /proc/123503/comm /proc/123578/comm /proc/123600/comm /proc/123892/comm /proc/123915/comm /proc/123978/comm /proc/124215/comm /proc/124220/comm /proc/124827/comm /proc/124854/comm /proc/124856/comm /proc/124858/comm /proc/12495/comm /proc/124958/comm /proc/124981/comm /proc/125120/comm /proc/125138/comm /proc/125145/comm /proc/125212/comm /proc/12526/comm /proc/125263/comm /proc/125264/comm /proc/12581/comm /proc/12605/comm /proc/12626/comm /proc/126766/comm /proc/126836/comm /proc/126949/comm /proc/127079/comm /proc/127103/comm /proc/127191/comm /proc/127219/comm /proc/127295/comm /proc/127318/comm /proc/127339/comm /proc/127366/comm /proc/127402/comm /proc/127541/comm /proc/127564/comm /proc/127732/comm /proc/127755/comm /proc/1292/comm /proc/1293/comm /proc/1294/comm /proc/1295/comm /proc/13/comm /proc/131729/comm /proc/132322/comm /proc/132483/comm /proc/135610/comm /proc/135611/comm /proc/135612/comm /proc/136008/comm /proc/136100/comm /proc/136118/comm /proc/136143/comm /proc/136144/comm /proc/136145/comm /proc/136146/comm /proc/136793/comm /proc/136797/comm /proc/137027/comm /proc/137028/comm /proc/137036/comm /proc/137037/comm /proc/137400/comm /proc/137800/comm /proc/137822/comm /proc/137945/comm /proc/137962/comm /proc/137969/comm /proc/138094/comm /proc/138147/comm /proc/138148/comm /proc/1386/comm /proc/1390/comm /proc/14/comm /proc/14496/comm /proc/1455/comm /proc/1459/comm /proc/1468/comm /proc/15/comm /proc/152991/comm /proc/153015/comm /proc/153042/comm /proc/153061/comm /proc/153263/comm /proc/153286/comm /proc/153751/comm /proc/153844/comm /proc/153856/comm /proc/154026/comm /proc/154038/comm /proc/156072/comm /proc/156628/comm /proc/156631/comm /proc/157624/comm /proc/158174/comm /proc/158561/comm /proc/158566/comm /proc/159531/comm /proc/159554/comm /proc/16/comm /proc/160034/comm /proc/160070/comm /proc/160151/comm /proc/160170/comm /proc/160254/comm /proc/160265/comm /proc/160425/comm /proc/160627/comm /proc/160628/comm /proc/160629/comm /proc/160849/comm /proc/160882/comm /proc/160895/comm /proc/160896/comm /proc/161330/comm /proc/161331/comm /proc/161335/comm /proc/161336/comm /proc/161337/comm /proc/161338/comm /proc/161339/comm /proc/162097/comm /proc/162121/comm /proc/162233/comm /proc/162250/comm /proc/162257/comm /proc/162311/comm /proc/162362/comm /proc/162363/comm /proc/163743/comm /proc/163803/comm /proc/163808/comm /proc/163815/comm /proc/163819/comm /proc/163820/comm /proc/163821/comm /proc/163844/comm /proc/163888/comm /proc/163959/comm /proc/164267/comm /proc/164343/comm /proc/164369/comm /proc/164392/comm /proc/164424/comm /proc/164456/comm /proc/164466/comm /proc/164522/comm /proc/164546/comm /proc/164567/comm /proc/164606/comm /proc/164648/comm /proc/164674/comm /proc/164716/comm /proc/164794/comm /proc/164795/comm /proc/164866/comm /proc/165627/comm /proc/165652/comm /proc/165743/comm /proc/165932/comm /proc/165980/comm /proc/166006/comm /proc/166019/comm /proc/166071/comm /proc/166172/comm /proc/166186/comm /proc/166197/comm /proc/166205/comm /proc/166210/comm /proc/166239/comm /proc/166240/comm /proc/166241/comm /proc/16690/comm /proc/167/comm /proc/168/comm /proc/169/comm /proc/170/comm /proc/171/comm /proc/172/comm /proc/173/comm /proc/174/comm /proc/175/comm /proc/177/comm /proc/179/comm /proc/18/comm /proc/180/comm /proc/182/comm /proc/184/comm /proc/185/comm /proc/186/comm /proc/187/comm /proc/188/comm /proc/189/comm /proc/19/comm /proc/191/comm /proc/192/comm /proc/19201/comm /proc/19229/comm /proc/19250/comm /proc/19278/comm /proc/19295/comm /proc/193/comm /proc/194/comm /proc/198/comm /proc/2/comm /proc/20/comm /proc/201/comm /proc/21/comm /proc/21147/comm /proc/21151/comm /proc/21153/comm /proc/21172/comm /proc/217/comm /proc/22/comm /proc/220/comm /proc/221/comm /proc/226/comm /proc/24/comm /proc/24135/comm /proc/24394/comm /proc/24411/comm /proc/24435/comm /proc/24448/comm /proc/248/comm /proc/25/comm /proc/25105/comm /proc/26/comm /proc/27/comm /proc/270/comm /proc/28/comm /proc/28546/comm /proc/286/comm /proc/28819/comm /proc/28837/comm /proc/28860/comm /proc/28873/comm /proc/291/comm /proc/294/comm /proc/3/comm /proc/30/comm /proc/31/comm /proc/313/comm /proc/314/comm /proc/318/comm /proc/32/comm /proc/327/comm /proc/328/comm /proc/33/comm /proc/33312/comm /proc/33591/comm /proc/33608/comm /proc/33632/comm /proc/33645/comm /proc/34/comm /proc/35213/comm /proc/35215/comm /proc/353/comm /proc/356/comm /proc/36/comm /proc/361/comm /proc/367/comm /proc/369/comm /proc/37/comm /proc/38/comm /proc/381/comm /proc/38981/comm /proc/39/comm /proc/390/comm /proc/39024/comm /proc/39034/comm /proc/39045/comm /proc/39053/comm /proc/39054/comm /proc/39131/comm /proc/39143/comm /proc/39144/comm /proc/39145/comm /proc/39220/comm /proc/39240/comm /proc/39260/comm /proc/39279/comm /proc/39390/comm /proc/39445/comm /proc/39595/comm /proc/396/comm /proc/39621/comm /proc/39647/comm /proc/399/comm /proc/4/comm /proc/40/comm /proc/40312/comm /proc/40321/comm /proc/40362/comm /proc/40375/comm /proc/40553/comm /proc/40618/comm /proc/40843/comm /proc/41223/comm /proc/41583/comm /proc/41587/comm /proc/41705/comm /proc/41730/comm /proc/41780/comm /proc/42/comm /proc/42109/comm /proc/42137/comm /proc/42147/comm /proc/42171/comm /proc/42205/comm /proc/42225/comm /proc/42571/comm /proc/42595/comm /proc/42817/comm /proc/43/comm /proc/43156/comm /proc/43179/comm /proc/43194/comm /proc/43219/comm /proc/43240/comm /proc/43264/comm /proc/43378/comm /proc/43423/comm /proc/43470/comm /proc/44/comm /proc/45/comm /proc/45254/comm /proc/45287/comm /proc/45369/comm /proc/45392/comm /proc/456/comm /proc/45613/comm /proc/45626/comm /proc/45654/comm /proc/45973/comm /proc/46/comm /proc/46293/comm /proc/46318/comm /proc/46407/comm /proc/46429/comm /proc/46508/comm /proc/46604/comm /proc/46801/comm /proc/46829/comm /proc/46933/comm /proc/47140/comm /proc/47165/comm /proc/47433/comm /proc/47456/comm /proc/47481/comm /proc/47591/comm /proc/47625/comm /proc/47722/comm /proc/47828/comm /proc/48/comm /proc/48611/comm /proc/49/comm /proc/49093/comm /proc/491/comm /proc/49115/comm /proc/49228/comm /proc/5/comm /proc/50/comm /proc/51/comm /proc/51127/comm /proc/51151/comm /proc/51710/comm /proc/51734/comm /proc/51759/comm /proc/51781/comm /proc/51917/comm /proc/51942/comm /proc/52/comm /proc/52031/comm /proc/52076/comm /proc/52176/comm /proc/522/comm /proc/54/comm /proc/54917/comm /proc/54949/comm /proc/55/comm /proc/55099/comm /proc/55116/comm /proc/55144/comm /proc/55166/comm /proc/55168/comm /proc/55197/comm /proc/55443/comm /proc/55765/comm /proc/55965/comm /proc/56/comm /proc/56046/comm /proc/56179/comm /proc/56180/comm /proc/56270/comm /proc/56271/comm /proc/56272/comm /proc/56273/comm /proc/56286/comm /proc/56374/comm /proc/56419/comm /proc/56467/comm /proc/56529/comm /proc/56553/comm /proc/56693/comm /proc/56725/comm /proc/57/comm /proc/57034/comm /proc/57057/comm /proc/57287/comm /proc/57311/comm /proc/57361/comm /proc/57671/comm /proc/57696/comm /proc/57853/comm /proc/57946/comm /proc/57993/comm /proc/57994/comm /proc/57995/comm /proc/57996/comm /proc/57997/comm /proc/58/comm /proc/58025/comm /proc/58048/comm /proc/58411/comm /proc/58457/comm /proc/58698/comm /proc/58721/comm /proc/58782/comm /proc/58783/comm /proc/58844/comm /proc/59145/comm /proc/59266/comm /proc/59317/comm /proc/59624/comm /proc/59667/comm /proc/59713/comm /proc/59818/comm /proc/6/comm /proc/60/comm /proc/60000/comm /proc/60025/comm /proc/60051/comm /proc/60095/comm /proc/60113/comm /proc/60375/comm /proc/60411/comm /proc/60427/comm /proc/60434/comm /proc/60488/comm /proc/60554/comm /proc/60555/comm /proc/61/comm /proc/614/comm /proc/61520/comm /proc/61544/comm /proc/618/comm /proc/62/comm /proc/621/comm /proc/62648/comm /proc/63/comm /proc/630/comm /proc/631/comm /proc/64/comm /proc/64221/comm /proc/64240/comm /proc/64241/comm /proc/64242/comm /proc/64243/comm /proc/64246/comm /proc/64247/comm /proc/64248/comm /proc/64250/comm /proc/64254/comm /proc/64255/comm /proc/64257/comm /proc/64259/comm /proc/64260/comm /proc/64261/comm /proc/643/comm /proc/64706/comm /proc/648/comm /proc/66/comm /proc/66742/comm /proc/67/comm /proc/67331/comm /proc/68/comm /proc/68601/comm /proc/68716/comm /proc/68740/comm /proc/68818/comm /proc/68835/comm /proc/68844/comm /proc/68915/comm /proc/68995/comm /proc/68996/comm /proc/69/comm /proc/698/comm /proc/69910/comm /proc/69933/comm /proc/70/comm /proc/702/comm /proc/705/comm /proc/706/comm /proc/719/comm /proc/72/comm /proc/72816/comm /proc/72819/comm /proc/73/comm /proc/73706/comm /proc/74/comm /proc/74025/comm /proc/74037/comm /proc/74760/comm /proc/74785/comm /proc/75/comm /proc/75460/comm /proc/76/comm /proc/78/comm /proc/78100/comm /proc/79/comm /proc/79201/comm /proc/79224/comm /proc/79303/comm /proc/79319/comm /proc/79326/comm /proc/79431/comm /proc/79482/comm /proc/79483/comm /proc/8/comm /proc/80/comm /proc/81/comm /proc/82/comm /proc/83696/comm /proc/84/comm /proc/85/comm /proc/86/comm /proc/864/comm /proc/86951/comm /proc/86977/comm /proc/86999/comm /proc/87/comm /proc/87027/comm /proc/87163/comm /proc/87271/comm /proc/87986/comm /proc/88/comm /proc/8840/comm /proc/88881/comm /proc/89425/comm /proc/90/comm /proc/9068/comm /proc/9085/comm /proc/90860/comm /proc/90883/comm /proc/91/comm /proc/9101/comm /proc/91211/comm /proc/91224/comm /proc/91225/comm /proc/9184/comm /proc/92/comm /proc/92130/comm /proc/92153/comm /proc/92167/comm /proc/92191/comm /proc/92437/comm /proc/92693/comm /proc/92694/comm /proc/92696/comm /proc/93/comm /proc/93119/comm /proc/93200/comm /proc/93583/comm /proc/93801/comm /proc/93824/comm /proc/93932/comm /proc/93950/comm /proc/93957/comm /proc/94/comm /proc/94056/comm /proc/94158/comm /proc/94159/comm /proc/95243/comm /proc/95267/comm /proc/95410/comm /proc/95433/comm /proc/96/comm /proc/96975/comm /proc/97/comm /proc/98/comm /proc/9801/comm /proc/99/comm /proc/99348/comm /proc/self/comm /proc/thread-self/comm
+ '[' -n '' ']'
+ rm -f /var/run/libvirtd.pid
+ [[ -c /dev/kvm ]]
+ chmod 660 /dev/kvm
+ chown root:kvm /dev/kvm
+ CGROUPS=
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/blkio ']'
+ grep -w blkio /sys/fs/cgroup/cgroup.controllers
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/cpu ']'
+ grep -w cpu /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=cpu,
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/devices ']'
+ grep -w devices /sys/fs/cgroup/cgroup.controllers
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/freezer ']'
+ grep -w freezer /sys/fs/cgroup/cgroup.controllers
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/hugetlb ']'
+ grep -w hugetlb /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=hugetlb,
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/memory ']'
+ grep -w memory /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=memory,
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/net_cls ']'
+ grep -w net_cls /sys/fs/cgroup/cgroup.controllers
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/perf_event ']'
+ grep -w perf_event /sys/fs/cgroup/cgroup.controllers
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/rdma ']'
+ grep -w rdma /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=rdma,
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/misc ']'
+ grep -w misc /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=misc,
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/pids ']'
+ grep -w pids /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=pids,
+ cgcreate -g cpu,hugetlb,memory,rdma,misc,pids:/osh-libvirt
++ cat /proc/meminfo
++ grep HugePages_Total
++ tr -cd '[:digit:]'
+ hp_count=0
+ '[' 00 -gt 0 ']'
+ '[' -n 457eb676-33da-42ec-9a8c-9293d545c337 ']'
+ cgexec -g cpu,hugetlb,memory,rdma,misc,pids:/osh-libvirt systemd-run --scope --slice=system libvirtd --listen
++ mktemp --suffix .xml
+ tmpsecret=/tmp/tmp.vavBEedVRg.xml
+ '[' -n '' ']'
+ trap cleanup EXIT
+ TIMEOUT=60
+ [[ ! -f /var/run/libvirtd.pid ]]
+ [[ 60 -gt 0 ]]
+ let TIMEOUT-=1
+ sleep 1
Running scope as unit: run-r7d1925eff6a043fb9dcdda5216dab37b.scope
+ [[ ! -f /var/run/libvirtd.pid ]]
+ TIMEOUT=10
+ [[ ! -e /var/run/libvirt/libvirt-sock ]]
+ '[' -z '' ']'
+ '[' -n cinder ']'
++ awk '/key/{print $3}' /etc/ceph/ceph.client.cinder.keyring
+ CEPH_CINDER_KEYRING=AQCVos5p1G7SLhAAyUpb+1ZAmor7CAEuygES8g==
+ '[' -n cinder ']'
+ create_virsh_libvirt_secret cinder 457eb676-33da-42ec-9a8c-9293d545c337 AQCVos5p1G7SLhAAyUpb+1ZAmor7CAEuygES8g==
+ sec_user=cinder
+ sec_uuid=457eb676-33da-42ec-9a8c-9293d545c337
+ sec_ceph_keyring=AQCVos5p1G7SLhAAyUpb+1ZAmor7CAEuygES8g==
+ cat
+ virsh secret-define --file /tmp/tmp.vavBEedVRg.xml
Secret 457eb676-33da-42ec-9a8c-9293d545c337 created

+ virsh secret-set-value --secret 457eb676-33da-42ec-9a8c-9293d545c337 --base64 AQCVos5p1G7SLhAAyUpb+1ZAmor7CAEuygES8g==
error: Passing secret value as command-line argument is insecure!
Secret value set

+ '[' -n '' ']'
+ cleanup
+ rm -f /tmp/tmp.vavBEedVRg.xml
+ '[' -n '' ']'
++ cat /var/run/libvirtd.pid
+ LIBVIRTD_PID=166261
+ kill 166261
+ tail --pid=166261 -f /dev/null
+ cgexec -g cpu,hugetlb,memory,rdma,misc,pids:/osh-libvirt systemd-run --scope --slice=system libvirtd --listen
Running scope as unit: run-r144e0661bb9b4d4d9d7359ecb2acf636.scope