+ wait_for_file /etc/pki/CA/cacert.pem
+ local file=/etc/pki/CA/cacert.pem
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ sleep 1
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ sleep 1
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ sleep 1
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ sleep 1
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ sleep 1
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ wait_for_file /etc/pki/qemu/ca-cert.pem
+ local file=/etc/pki/qemu/ca-cert.pem
+ '[' '!' -f /etc/pki/qemu/ca-cert.pem ']'
+ wait_for_file /etc/pki/libvirt/servercert.pem
+ local file=/etc/pki/libvirt/servercert.pem
+ '[' '!' -f /etc/pki/libvirt/servercert.pem ']'
+ wait_for_file /etc/pki/libvirt/clientcert.pem
+ local file=/etc/pki/libvirt/clientcert.pem
+ '[' '!' -f /etc/pki/libvirt/clientcert.pem ']'
+ wait_for_file /etc/pki/qemu/server-cert.pem
+ local file=/etc/pki/qemu/server-cert.pem
+ '[' '!' -f /etc/pki/qemu/server-cert.pem ']'
+ wait_for_file /etc/pki/qemu/client-cert.pem
+ local file=/etc/pki/qemu/client-cert.pem
+ '[' '!' -f /etc/pki/qemu/client-cert.pem ']'
+ wait_for_file /etc/pki/libvirt/private/serverkey.pem
+ local file=/etc/pki/libvirt/private/serverkey.pem
+ '[' '!' -f /etc/pki/libvirt/private/serverkey.pem ']'
+ wait_for_file /etc/pki/libvirt/private/clientkey.pem
+ local file=/etc/pki/libvirt/private/clientkey.pem
+ '[' '!' -f /etc/pki/libvirt/private/clientkey.pem ']'
+ wait_for_file /etc/pki/qemu/server-key.pem
+ local file=/etc/pki/qemu/server-key.pem
+ '[' '!' -f /etc/pki/qemu/server-key.pem ']'
+ wait_for_file /etc/pki/qemu/client-key.pem
+ local file=/etc/pki/qemu/client-key.pem
+ '[' '!' -f /etc/pki/qemu/client-key.pem ']'
+ wait_for_file /etc/pki/libvirt-vnc/ca-cert.pem
+ local file=/etc/pki/libvirt-vnc/ca-cert.pem
+ '[' '!' -f /etc/pki/libvirt-vnc/ca-cert.pem ']'
+ wait_for_file /etc/pki/libvirt-vnc/server-cert.pem
+ local file=/etc/pki/libvirt-vnc/server-cert.pem
+ '[' '!' -f /etc/pki/libvirt-vnc/server-cert.pem ']'
+ wait_for_file /etc/pki/libvirt-vnc/server-key.pem
+ local file=/etc/pki/libvirt-vnc/server-key.pem
+ '[' '!' -f /etc/pki/libvirt-vnc/server-key.pem ']'
++ grep -w libvirtd
++ cat /proc/1/comm /proc/10/comm /proc/100/comm /proc/102/comm /proc/102011/comm /proc/102035/comm /proc/10204/comm /proc/102569/comm /proc/102599/comm /proc/102600/comm /proc/103/comm /proc/103575/comm /proc/103603/comm /proc/103618/comm /proc/103641/comm /proc/103861/comm /proc/104/comm /proc/104002/comm /proc/104004/comm /proc/104094/comm /proc/104747/comm /proc/105/comm /proc/105298/comm /proc/105417/comm /proc/105474/comm /proc/105498/comm /proc/105619/comm /proc/105635/comm /proc/105641/comm /proc/105708/comm /proc/105709/comm /proc/105719/comm /proc/105933/comm /proc/106/comm /proc/107468/comm /proc/107491/comm /proc/107520/comm /proc/107563/comm /proc/108/comm /proc/109/comm /proc/109685/comm /proc/10969/comm /proc/10970/comm /proc/11/comm /proc/110/comm /proc/110402/comm /proc/111/comm /proc/112/comm /proc/113/comm /proc/113913/comm /proc/114/comm /proc/115/comm /proc/115832/comm /proc/116/comm /proc/117/comm /proc/117236/comm /proc/117423/comm /proc/117455/comm /proc/117456/comm /proc/119079/comm /proc/1191/comm /proc/12/comm /proc/120517/comm /proc/120540/comm /proc/120561/comm /proc/120592/comm /proc/121133/comm /proc/121681/comm /proc/121832/comm /proc/122355/comm /proc/122432/comm /proc/122439/comm /proc/123044/comm /proc/123067/comm /proc/123463/comm /proc/12413/comm /proc/124320/comm /proc/124321/comm /proc/124322/comm /proc/12443/comm /proc/124433/comm /proc/124434/comm /proc/124435/comm /proc/124452/comm /proc/12472/comm /proc/12513/comm /proc/12535/comm /proc/126955/comm /proc/12770/comm /proc/127828/comm /proc/12800/comm /proc/128314/comm /proc/128338/comm /proc/128339/comm /proc/12856/comm /proc/12880/comm /proc/12899/comm /proc/129678/comm /proc/129679/comm /proc/1299/comm /proc/13/comm /proc/1300/comm /proc/1301/comm /proc/1302/comm /proc/136669/comm /proc/136670/comm /proc/136672/comm /proc/136673/comm /proc/136855/comm /proc/137518/comm /proc/137542/comm /proc/137821/comm /proc/137857/comm /proc/137870/comm /proc/137902/comm /proc/137903/comm /proc/137904/comm /proc/137905/comm /proc/138459/comm /proc/138482/comm /proc/139112/comm /proc/139314/comm /proc/139354/comm /proc/139489/comm /proc/139514/comm /proc/139637/comm /proc/139659/comm /proc/139815/comm /proc/139834/comm /proc/139874/comm /proc/139889/comm /proc/139933/comm /proc/139948/comm /proc/14/comm /proc/1400/comm /proc/140054/comm /proc/140145/comm /proc/140298/comm /proc/140327/comm /proc/1404/comm /proc/140427/comm /proc/140428/comm /proc/140429/comm /proc/140431/comm /proc/140547/comm /proc/140750/comm /proc/140755/comm /proc/1412/comm /proc/141248/comm /proc/141550/comm /proc/141584/comm /proc/141761/comm /proc/141778/comm /proc/141785/comm /proc/141868/comm /proc/141869/comm /proc/141879/comm /proc/142076/comm /proc/143698/comm /proc/143732/comm /proc/143812/comm /proc/143926/comm /proc/143951/comm /proc/144027/comm /proc/144050/comm /proc/144069/comm /proc/144102/comm /proc/144151/comm /proc/144184/comm /proc/144299/comm /proc/144372/comm /proc/144397/comm /proc/145013/comm /proc/145123/comm /proc/145148/comm /proc/145581/comm /proc/145701/comm /proc/1478/comm /proc/1482/comm /proc/1491/comm /proc/149951/comm /proc/15/comm /proc/150083/comm /proc/151366/comm /proc/152716/comm /proc/152750/comm /proc/153975/comm /proc/16/comm /proc/165/comm /proc/166/comm /proc/167/comm /proc/167419/comm /proc/167669/comm /proc/167675/comm /proc/167677/comm /proc/167690/comm /proc/168/comm /proc/168085/comm /proc/168101/comm /proc/168102/comm /proc/168193/comm /proc/168206/comm /proc/168207/comm /proc/168914/comm /proc/169/comm /proc/169038/comm /proc/169361/comm /proc/169506/comm /proc/169507/comm /proc/169654/comm /proc/169656/comm /proc/169889/comm /proc/170/comm /proc/170077/comm /proc/170102/comm /proc/170132/comm /proc/170211/comm /proc/170233/comm /proc/170386/comm /proc/170403/comm /proc/170409/comm /proc/170569/comm /proc/170570/comm /proc/170580/comm /proc/170754/comm /proc/171/comm /proc/171481/comm /proc/171808/comm /proc/171809/comm /proc/172/comm /proc/172299/comm /proc/172309/comm /proc/172355/comm /proc/172356/comm /proc/172456/comm /proc/172488/comm /proc/172634/comm /proc/172671/comm /proc/172850/comm /proc/173/comm /proc/173102/comm /proc/174384/comm /proc/174415/comm /proc/175/comm /proc/176/comm /proc/177445/comm /proc/178/comm /proc/178815/comm /proc/179/comm /proc/179424/comm /proc/179448/comm /proc/18/comm /proc/180046/comm /proc/180082/comm /proc/180224/comm /proc/180244/comm /proc/180342/comm /proc/180353/comm /proc/180456/comm /proc/180571/comm /proc/180581/comm /proc/180583/comm /proc/181/comm /proc/181029/comm /proc/182/comm /proc/182152/comm /proc/182237/comm /proc/182454/comm /proc/182455/comm /proc/182456/comm /proc/182761/comm /proc/182782/comm /proc/182783/comm /proc/182796/comm /proc/182809/comm /proc/182810/comm /proc/183/comm /proc/184014/comm /proc/184108/comm /proc/184414/comm /proc/184431/comm /proc/184432/comm /proc/184433/comm /proc/184434/comm /proc/184435/comm /proc/184436/comm /proc/184603/comm /proc/184614/comm /proc/184630/comm /proc/184887/comm /proc/185/comm /proc/185053/comm /proc/185075/comm /proc/185080/comm /proc/185269/comm /proc/185292/comm /proc/185498/comm /proc/185545/comm /proc/185563/comm /proc/185569/comm /proc/185582/comm /proc/185652/comm /proc/185702/comm /proc/185726/comm /proc/185727/comm /proc/185737/comm /proc/185887/comm /proc/185957/comm /proc/185958/comm /proc/185993/comm /proc/186/comm /proc/186029/comm /proc/186030/comm /proc/186031/comm /proc/186032/comm /proc/186033/comm /proc/186034/comm /proc/187/comm /proc/188/comm /proc/189/comm /proc/19/comm /proc/190/comm /proc/191/comm /proc/192/comm /proc/193/comm /proc/19611/comm /proc/19668/comm /proc/19688/comm /proc/19717/comm /proc/19749/comm /proc/19768/comm /proc/2/comm /proc/20/comm /proc/201/comm /proc/21/comm /proc/21085/comm /proc/21587/comm /proc/21602/comm /proc/21603/comm /proc/21619/comm /proc/217/comm /proc/22/comm /proc/220/comm /proc/221/comm /proc/226/comm /proc/24/comm /proc/24624/comm /proc/248/comm /proc/24900/comm /proc/24917/comm /proc/24940/comm /proc/24953/comm /proc/25/comm /proc/26/comm /proc/269/comm /proc/27/comm /proc/28/comm /proc/287/comm /proc/290/comm /proc/291/comm /proc/29155/comm /proc/29429/comm /proc/29446/comm /proc/29470/comm /proc/29483/comm /proc/3/comm /proc/30/comm /proc/31/comm /proc/311/comm /proc/312/comm /proc/316/comm /proc/32/comm /proc/325/comm /proc/33/comm /proc/33653/comm /proc/33915/comm /proc/33931/comm /proc/33955/comm /proc/33968/comm /proc/34/comm /proc/351/comm /proc/35415/comm /proc/35417/comm /proc/358/comm /proc/36/comm /proc/366/comm /proc/37/comm /proc/371/comm /proc/38/comm /proc/39/comm /proc/392/comm /proc/393/comm /proc/39511/comm /proc/39545/comm /proc/39552/comm /proc/39558/comm /proc/39579/comm /proc/39608/comm /proc/39651/comm /proc/39663/comm /proc/39678/comm /proc/39691/comm /proc/397/comm /proc/39755/comm /proc/39776/comm /proc/39790/comm /proc/398/comm /proc/39809/comm /proc/39909/comm /proc/39980/comm /proc/4/comm /proc/40/comm /proc/40149/comm /proc/40172/comm /proc/40197/comm /proc/40856/comm /proc/40875/comm /proc/40904/comm /proc/40922/comm /proc/41471/comm /proc/41472/comm /proc/41614/comm /proc/41823/comm /proc/42/comm /proc/42207/comm /proc/42492/comm /proc/42516/comm /proc/42557/comm /proc/42658/comm /proc/42680/comm /proc/42696/comm /proc/42719/comm /proc/42748/comm /proc/42778/comm /proc/42790/comm /proc/42833/comm /proc/42869/comm /proc/42989/comm /proc/43/comm /proc/43013/comm /proc/43090/comm /proc/43137/comm /proc/43180/comm /proc/43225/comm /proc/43278/comm /proc/43472/comm /proc/44/comm /proc/45/comm /proc/451/comm /proc/45364/comm /proc/45398/comm /proc/45478/comm /proc/455/comm /proc/45501/comm /proc/45717/comm /proc/45746/comm /proc/45858/comm /proc/45879/comm /proc/46/comm /proc/46229/comm /proc/46252/comm /proc/46316/comm /proc/46339/comm /proc/46394/comm /proc/46509/comm /proc/46696/comm /proc/46719/comm /proc/46860/comm /proc/47006/comm /proc/47032/comm /proc/47433/comm /proc/47457/comm /proc/47482/comm /proc/47766/comm /proc/47862/comm /proc/47955/comm /proc/48/comm /proc/48049/comm /proc/48069/comm /proc/49/comm /proc/49675/comm /proc/49699/comm /proc/49824/comm /proc/49848/comm /proc/49937/comm /proc/5/comm /proc/50/comm /proc/50033/comm /proc/50262/comm /proc/50333/comm /proc/50375/comm /proc/51/comm /proc/52/comm /proc/522/comm /proc/54/comm /proc/54050/comm /proc/54074/comm /proc/54685/comm /proc/54709/comm /proc/54724/comm /proc/54748/comm /proc/54769/comm /proc/54793/comm /proc/54939/comm /proc/54961/comm /proc/55/comm /proc/55062/comm /proc/55098/comm /proc/55149/comm /proc/55251/comm /proc/56/comm /proc/57/comm /proc/58/comm /proc/58753/comm /proc/58809/comm /proc/58926/comm /proc/58950/comm /proc/58970/comm /proc/58996/comm /proc/59013/comm /proc/59042/comm /proc/59286/comm /proc/59814/comm /proc/6/comm /proc/60/comm /proc/60077/comm /proc/60107/comm /proc/60359/comm /proc/60382/comm /proc/60388/comm /proc/60389/comm /proc/60436/comm /proc/60449/comm /proc/60450/comm /proc/60472/comm /proc/60495/comm /proc/60554/comm /proc/60555/comm /proc/60556/comm /proc/60720/comm /proc/60747/comm /proc/60787/comm /proc/60813/comm /proc/60825/comm /proc/60851/comm /proc/61/comm /proc/61247/comm /proc/61274/comm /proc/614/comm /proc/61507/comm /proc/61592/comm /proc/61616/comm /proc/617/comm /proc/61807/comm /proc/61831/comm /proc/62/comm /proc/620/comm /proc/62109/comm /proc/62132/comm /proc/62163/comm /proc/62241/comm /proc/62242/comm /proc/62243/comm /proc/62244/comm /proc/62245/comm /proc/623/comm /proc/624/comm /proc/62498/comm /proc/62629/comm /proc/62700/comm /proc/62886/comm /proc/62908/comm /proc/63/comm /proc/63174/comm /proc/63220/comm /proc/63254/comm /proc/63278/comm /proc/63471/comm /proc/63857/comm /proc/63941/comm /proc/64/comm /proc/64212/comm /proc/64269/comm /proc/64351/comm /proc/644/comm /proc/64412/comm /proc/64454/comm /proc/64478/comm /proc/64505/comm /proc/64545/comm /proc/64575/comm /proc/64627/comm /proc/64646/comm /proc/648/comm /proc/65078/comm /proc/65095/comm /proc/65101/comm /proc/65150/comm /proc/65151/comm /proc/65161/comm /proc/65303/comm /proc/66/comm /proc/66813/comm /proc/66838/comm /proc/67/comm /proc/68/comm /proc/69/comm /proc/698/comm /proc/70/comm /proc/701/comm /proc/70190/comm /proc/702/comm /proc/70228/comm /proc/70229/comm /proc/70230/comm /proc/70231/comm /proc/70232/comm /proc/70235/comm /proc/70237/comm /proc/70239/comm /proc/70242/comm /proc/70243/comm /proc/70244/comm /proc/70245/comm /proc/70246/comm /proc/70247/comm /proc/715/comm /proc/72/comm /proc/73/comm /proc/74/comm /proc/75/comm /proc/76/comm /proc/76124/comm /proc/76146/comm /proc/76276/comm /proc/76293/comm /proc/76300/comm /proc/76352/comm /proc/76353/comm /proc/76363/comm /proc/76536/comm /proc/77667/comm /proc/77690/comm /proc/78/comm /proc/78123/comm /proc/78934/comm /proc/78978/comm /proc/79/comm /proc/79471/comm /proc/8/comm /proc/80/comm /proc/81/comm /proc/82/comm /proc/82794/comm /proc/82807/comm /proc/83421/comm /proc/83445/comm /proc/84/comm /proc/84482/comm /proc/85/comm /proc/86/comm /proc/864/comm /proc/87/comm /proc/87171/comm /proc/88/comm /proc/89413/comm /proc/89453/comm /proc/89619/comm /proc/89637/comm /proc/89643/comm /proc/89830/comm /proc/89831/comm /proc/89849/comm /proc/9/comm /proc/90/comm /proc/90022/comm /proc/9093/comm /proc/91/comm /proc/9110/comm /proc/9126/comm /proc/92/comm /proc/9208/comm /proc/92831/comm /proc/92832/comm /proc/92833/comm /proc/93/comm /proc/93160/comm /proc/93730/comm /proc/93754/comm /proc/93773/comm /proc/93796/comm /proc/94/comm /proc/94104/comm /proc/94216/comm /proc/94925/comm /proc/96/comm /proc/97/comm /proc/97745/comm /proc/98/comm /proc/9828/comm /proc/98626/comm /proc/99/comm /proc/self/comm /proc/thread-self/comm
+ '[' -n '' ']'
+ rm -f /var/run/libvirtd.pid
+ [[ -c /dev/kvm ]]
+ chmod 660 /dev/kvm
+ chown root:kvm /dev/kvm
+ CGROUPS=
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/blkio ']'
+ grep -w blkio /sys/fs/cgroup/cgroup.controllers
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/cpu ']'
+ grep -w cpu /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=cpu,
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/devices ']'
+ grep -w devices /sys/fs/cgroup/cgroup.controllers
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/freezer ']'
+ grep -w freezer /sys/fs/cgroup/cgroup.controllers
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/hugetlb ']'
+ grep -w hugetlb /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=hugetlb,
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/memory ']'
+ grep -w memory /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=memory,
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/net_cls ']'
+ grep -w net_cls /sys/fs/cgroup/cgroup.controllers
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/perf_event ']'
+ grep -w perf_event /sys/fs/cgroup/cgroup.controllers
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/rdma ']'
+ grep -w rdma /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=rdma,
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/misc ']'
+ grep -w misc /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=misc,
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/pids ']'
+ grep -w pids /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=pids,
+ cgcreate -g cpu,hugetlb,memory,rdma,misc,pids:/osh-libvirt
++ cat /proc/meminfo
++ grep HugePages_Total
++ tr -cd '[:digit:]'
+ hp_count=0
+ '[' 00 -gt 0 ']'
+ '[' -n 457eb676-33da-42ec-9a8c-9293d545c337 ']'
+ cgexec -g cpu,hugetlb,memory,rdma,misc,pids:/osh-libvirt systemd-run --scope --slice=system libvirtd --listen
++ mktemp --suffix .xml
+ tmpsecret=/tmp/tmp.aYKzC5IVs0.xml
+ '[' -n '' ']'
+ trap cleanup EXIT
+ TIMEOUT=60
+ [[ ! -f /var/run/libvirtd.pid ]]
+ [[ 60 -gt 0 ]]
+ let TIMEOUT-=1
+ sleep 1
Running as unit: run-r6a8be115d60c4345ac6742a68d970a0f.scope; invocation ID: 5a53ffff8c4f4a59b7adf74f39dec597
+ [[ ! -f /var/run/libvirtd.pid ]]
+ TIMEOUT=10
+ [[ ! -e /var/run/libvirt/libvirt-sock ]]
+ '[' -z '' ']'
+ '[' -n cinder ']'
++ awk '/key/{print $3}' /etc/ceph/ceph.client.cinder.keyring
+ CEPH_CINDER_KEYRING=AQCXP5dpYeWwHhAA9ptIzhw12GlxIbHfuXF/sQ==
+ '[' -n cinder ']'
+ create_virsh_libvirt_secret cinder 457eb676-33da-42ec-9a8c-9293d545c337 AQCXP5dpYeWwHhAA9ptIzhw12GlxIbHfuXF/sQ==
+ sec_user=cinder
+ sec_uuid=457eb676-33da-42ec-9a8c-9293d545c337
+ sec_ceph_keyring=AQCXP5dpYeWwHhAA9ptIzhw12GlxIbHfuXF/sQ==
+ cat
+ virsh secret-define --file /tmp/tmp.aYKzC5IVs0.xml
Secret 457eb676-33da-42ec-9a8c-9293d545c337 created

+ virsh secret-set-value --secret 457eb676-33da-42ec-9a8c-9293d545c337 --base64 AQCXP5dpYeWwHhAA9ptIzhw12GlxIbHfuXF/sQ==
error: Passing secret value as command-line argument is insecure!
Secret value set

+ '[' -n '' ']'
+ cleanup
+ rm -f /tmp/tmp.aYKzC5IVs0.xml
+ '[' -n '' ']'
++ cat /var/run/libvirtd.pid
+ LIBVIRTD_PID=186054
+ kill 186054
+ tail --pid=186054 -f /dev/null
+ cgexec -g cpu,hugetlb,memory,rdma,misc,pids:/osh-libvirt systemd-run --scope --slice=system libvirtd --listen
Running as unit: run-r4cc9117c4ed54682a1e4ec537784d751.scope; invocation ID: 9a96079ce70e4ea7a65b3cad84f398ee