+ wait_for_file /etc/pki/CA/cacert.pem
+ local file=/etc/pki/CA/cacert.pem
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ sleep 1
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ sleep 1
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ sleep 1
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ sleep 1
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ sleep 1
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ wait_for_file /etc/pki/qemu/ca-cert.pem
+ local file=/etc/pki/qemu/ca-cert.pem
+ '[' '!' -f /etc/pki/qemu/ca-cert.pem ']'
+ wait_for_file /etc/pki/libvirt/servercert.pem
+ local file=/etc/pki/libvirt/servercert.pem
+ '[' '!' -f /etc/pki/libvirt/servercert.pem ']'
+ wait_for_file /etc/pki/libvirt/clientcert.pem
+ local file=/etc/pki/libvirt/clientcert.pem
+ '[' '!' -f /etc/pki/libvirt/clientcert.pem ']'
+ wait_for_file /etc/pki/qemu/server-cert.pem
+ local file=/etc/pki/qemu/server-cert.pem
+ '[' '!' -f /etc/pki/qemu/server-cert.pem ']'
+ wait_for_file /etc/pki/qemu/client-cert.pem
+ local file=/etc/pki/qemu/client-cert.pem
+ '[' '!' -f /etc/pki/qemu/client-cert.pem ']'
+ wait_for_file /etc/pki/libvirt/private/serverkey.pem
+ local file=/etc/pki/libvirt/private/serverkey.pem
+ '[' '!' -f /etc/pki/libvirt/private/serverkey.pem ']'
+ wait_for_file /etc/pki/libvirt/private/clientkey.pem
+ local file=/etc/pki/libvirt/private/clientkey.pem
+ '[' '!' -f /etc/pki/libvirt/private/clientkey.pem ']'
+ wait_for_file /etc/pki/qemu/server-key.pem
+ local file=/etc/pki/qemu/server-key.pem
+ '[' '!' -f /etc/pki/qemu/server-key.pem ']'
+ wait_for_file /etc/pki/qemu/client-key.pem
+ local file=/etc/pki/qemu/client-key.pem
+ '[' '!' -f /etc/pki/qemu/client-key.pem ']'
+ wait_for_file /etc/pki/libvirt-vnc/ca-cert.pem
+ local file=/etc/pki/libvirt-vnc/ca-cert.pem
+ '[' '!' -f /etc/pki/libvirt-vnc/ca-cert.pem ']'
+ wait_for_file /etc/pki/libvirt-vnc/server-cert.pem
+ local file=/etc/pki/libvirt-vnc/server-cert.pem
+ '[' '!' -f /etc/pki/libvirt-vnc/server-cert.pem ']'
+ wait_for_file /etc/pki/libvirt-vnc/server-key.pem
+ local file=/etc/pki/libvirt-vnc/server-key.pem
+ '[' '!' -f /etc/pki/libvirt-vnc/server-key.pem ']'
++ grep -w libvirtd
++ cat /proc/1/comm /proc/10/comm /proc/100/comm /proc/102/comm /proc/103/comm /proc/10362/comm /proc/10390/comm /proc/10391/comm /proc/104/comm /proc/105/comm /proc/105075/comm /proc/106/comm /proc/106098/comm /proc/108/comm /proc/10874/comm /proc/10875/comm /proc/109/comm /proc/11/comm /proc/110/comm /proc/110685/comm /proc/110714/comm /proc/111/comm /proc/1111/comm /proc/111149/comm /proc/111162/comm /proc/111163/comm /proc/112/comm /proc/112387/comm /proc/112410/comm /proc/112469/comm /proc/112494/comm /proc/112856/comm /proc/112988/comm /proc/113/comm /proc/113249/comm /proc/113264/comm /proc/113645/comm /proc/113647/comm /proc/114/comm /proc/114133/comm /proc/114361/comm /proc/114383/comm /proc/114428/comm /proc/114519/comm /proc/114577/comm /proc/114583/comm /proc/114638/comm /proc/114639/comm /proc/114649/comm /proc/114777/comm /proc/115/comm /proc/116/comm /proc/116185/comm /proc/116209/comm /proc/116229/comm /proc/116271/comm /proc/117/comm /proc/118126/comm /proc/119051/comm /proc/119113/comm /proc/12/comm /proc/120068/comm /proc/120256/comm /proc/12269/comm /proc/12301/comm /proc/123142/comm /proc/12344/comm /proc/12384/comm /proc/12397/comm /proc/123999/comm /proc/125195/comm /proc/126068/comm /proc/12633/comm /proc/126524/comm /proc/126537/comm /proc/126538/comm /proc/12663/comm /proc/12721/comm /proc/12746/comm /proc/12766/comm /proc/128176/comm /proc/129278/comm /proc/129303/comm /proc/129344/comm /proc/129365/comm /proc/129949/comm /proc/13/comm /proc/130370/comm /proc/130615/comm /proc/132096/comm /proc/132120/comm /proc/132584/comm /proc/132882/comm /proc/133424/comm /proc/133430/comm /proc/134618/comm /proc/14/comm /proc/1442/comm /proc/147496/comm /proc/148379/comm /proc/148517/comm /proc/148575/comm /proc/149061/comm /proc/149086/comm /proc/149087/comm /proc/149712/comm /proc/15/comm /proc/150658/comm /proc/150659/comm /proc/151516/comm /proc/1562/comm /proc/1563/comm /proc/1564/comm /proc/1565/comm /proc/1569/comm /proc/158021/comm /proc/158022/comm /proc/158024/comm /proc/158025/comm /proc/158148/comm /proc/158718/comm /proc/158742/comm /proc/159089/comm /proc/159142/comm /proc/159155/comm /proc/159185/comm /proc/159186/comm /proc/159187/comm /proc/159188/comm /proc/159735/comm /proc/159760/comm /proc/16/comm /proc/160059/comm /proc/160070/comm /proc/160604/comm /proc/160923/comm /proc/160948/comm /proc/160962/comm /proc/161024/comm /proc/161173/comm /proc/161239/comm /proc/161248/comm /proc/161285/comm /proc/161309/comm /proc/161361/comm /proc/161382/comm /proc/161483/comm /proc/161505/comm /proc/161557/comm /proc/161580/comm /proc/161768/comm /proc/161834/comm /proc/162079/comm /proc/162085/comm /proc/162530/comm /proc/162664/comm /proc/162687/comm /proc/162982/comm /proc/162999/comm /proc/163005/comm /proc/163067/comm /proc/163068/comm /proc/163078/comm /proc/163149/comm /proc/1636/comm /proc/1640/comm /proc/164739/comm /proc/164785/comm /proc/1649/comm /proc/164948/comm /proc/165/comm /proc/165067/comm /proc/165097/comm /proc/165122/comm /proc/165148/comm /proc/165170/comm /proc/165220/comm /proc/165273/comm /proc/165337/comm /proc/165412/comm /proc/165717/comm /proc/165742/comm /proc/166/comm /proc/166017/comm /proc/166042/comm /proc/166346/comm /proc/166442/comm /proc/166464/comm /proc/167/comm /proc/168/comm /proc/169/comm /proc/169871/comm /proc/170/comm /proc/171/comm /proc/171601/comm /proc/172/comm /proc/173/comm /proc/174250/comm /proc/174346/comm /proc/174401/comm /proc/176/comm /proc/176711/comm /proc/176756/comm /proc/176769/comm /proc/176770/comm /proc/176776/comm /proc/176777/comm /proc/177860/comm /proc/177862/comm /proc/178/comm /proc/178033/comm /proc/178369/comm /proc/178371/comm /proc/178383/comm /proc/178385/comm /proc/178469/comm /proc/178685/comm /proc/178710/comm /proc/178716/comm /proc/178797/comm /proc/178814/comm /proc/178828/comm /proc/178971/comm /proc/178972/comm /proc/178982/comm /proc/179/comm /proc/179164/comm /proc/18/comm /proc/180521/comm /proc/180542/comm /proc/180562/comm /proc/180603/comm /proc/180646/comm /proc/180672/comm /proc/180752/comm /proc/180911/comm /proc/180940/comm /proc/181012/comm /proc/181045/comm /proc/181538/comm /proc/181575/comm /proc/181648/comm /proc/181654/comm /proc/182/comm /proc/18399/comm /proc/184/comm /proc/184852/comm /proc/185/comm /proc/185381/comm /proc/185520/comm /proc/185524/comm /proc/186/comm /proc/186696/comm /proc/186720/comm /proc/187/comm /proc/187230/comm /proc/187241/comm /proc/187290/comm /proc/18731/comm /proc/187319/comm /proc/187380/comm /proc/187409/comm /proc/187444/comm /proc/187447/comm /proc/187494/comm /proc/18750/comm /proc/187507/comm /proc/18771/comm /proc/187866/comm /proc/18799/comm /proc/188/comm /proc/18816/comm /proc/188749/comm /proc/189/comm /proc/19/comm /proc/190736/comm /proc/190737/comm /proc/190741/comm /proc/191/comm /proc/191014/comm /proc/191037/comm /proc/191038/comm /proc/191040/comm /proc/191176/comm /proc/191447/comm /proc/191466/comm /proc/191492/comm /proc/191493/comm /proc/191506/comm /proc/191519/comm /proc/191520/comm /proc/191795/comm /proc/191922/comm /proc/192/comm /proc/192170/comm /proc/192173/comm /proc/192177/comm /proc/192381/comm /proc/192417/comm /proc/192418/comm /proc/192419/comm /proc/192420/comm /proc/192506/comm /proc/192685/comm /proc/192746/comm /proc/192976/comm /proc/192977/comm /proc/192978/comm /proc/192979/comm /proc/192980/comm /proc/192981/comm /proc/193/comm /proc/193081/comm /proc/193085/comm /proc/193160/comm /proc/193162/comm /proc/193167/comm /proc/193170/comm /proc/193191/comm /proc/193194/comm /proc/193195/comm /proc/193196/comm /proc/193197/comm /proc/193198/comm /proc/193199/comm /proc/193200/comm /proc/193201/comm /proc/193202/comm /proc/194/comm /proc/195/comm /proc/2/comm /proc/20/comm /proc/201/comm /proc/21/comm /proc/210/comm /proc/21752/comm /proc/21824/comm /proc/21825/comm /proc/21840/comm /proc/22/comm /proc/220/comm /proc/221/comm /proc/226/comm /proc/24/comm /proc/25/comm /proc/25105/comm /proc/25383/comm /proc/25400/comm /proc/25425/comm /proc/25437/comm /proc/25941/comm /proc/26/comm /proc/268/comm /proc/27/comm /proc/28/comm /proc/28331/comm /proc/289/comm /proc/290/comm /proc/291/comm /proc/29903/comm /proc/3/comm /proc/30/comm /proc/30174/comm /proc/30192/comm /proc/30216/comm /proc/30228/comm /proc/31/comm /proc/311/comm /proc/312/comm /proc/316/comm /proc/317/comm /proc/318/comm /proc/319/comm /proc/32/comm /proc/320/comm /proc/321/comm /proc/322/comm /proc/323/comm /proc/324/comm /proc/325/comm /proc/33/comm /proc/34/comm /proc/34533/comm /proc/34801/comm /proc/34819/comm /proc/34844/comm /proc/34856/comm /proc/36/comm /proc/365/comm /proc/37/comm /proc/38/comm /proc/383/comm /proc/38934/comm /proc/39/comm /proc/39132/comm /proc/39134/comm /proc/39230/comm /proc/39247/comm /proc/39275/comm /proc/39322/comm /proc/39337/comm /proc/395/comm /proc/399/comm /proc/4/comm /proc/40/comm /proc/41806/comm /proc/41838/comm /proc/41852/comm /proc/41864/comm /proc/41880/comm /proc/41894/comm /proc/41950/comm /proc/41952/comm /proc/41974/comm /proc/41986/comm /proc/42/comm /proc/42046/comm /proc/42058/comm /proc/42094/comm /proc/42096/comm /proc/42213/comm /proc/42293/comm /proc/42452/comm /proc/42476/comm /proc/42504/comm /proc/43/comm /proc/43183/comm /proc/43196/comm /proc/43239/comm /proc/43241/comm /proc/43431/comm /proc/43680/comm /proc/44/comm /proc/44058/comm /proc/44530/comm /proc/44559/comm /proc/44590/comm /proc/44948/comm /proc/44972/comm /proc/44986/comm /proc/45/comm /proc/45009/comm /proc/45041/comm /proc/45066/comm /proc/453/comm /proc/45422/comm /proc/45447/comm /proc/45552/comm /proc/45890/comm /proc/45919/comm /proc/45945/comm /proc/45968/comm /proc/45982/comm /proc/46/comm /proc/46005/comm /proc/46122/comm /proc/46164/comm /proc/46211/comm /proc/48/comm /proc/48009/comm /proc/48041/comm /proc/48072/comm /proc/48134/comm /proc/48158/comm /proc/48395/comm /proc/48408/comm /proc/48489/comm /proc/48560/comm /proc/48881/comm /proc/48907/comm /proc/48983/comm /proc/49/comm /proc/49006/comm /proc/49050/comm /proc/49173/comm /proc/49378/comm /proc/49402/comm /proc/49742/comm /proc/49936/comm /proc/49961/comm /proc/5/comm /proc/50/comm /proc/50246/comm /proc/50269/comm /proc/50426/comm /proc/50478/comm /proc/50575/comm /proc/50604/comm /proc/50643/comm /proc/50719/comm /proc/51/comm /proc/51673/comm /proc/52/comm /proc/522/comm /proc/52566/comm /proc/52590/comm /proc/52703/comm /proc/52727/comm /proc/52790/comm /proc/52938/comm /proc/53153/comm /proc/53245/comm /proc/54/comm /proc/55/comm /proc/56/comm /proc/56955/comm /proc/56979/comm /proc/57/comm /proc/57585/comm /proc/57615/comm /proc/57640/comm /proc/57670/comm /proc/57687/comm /proc/57713/comm /proc/57853/comm /proc/57876/comm /proc/58/comm /proc/58022/comm /proc/58073/comm /proc/58117/comm /proc/58216/comm /proc/6/comm /proc/60/comm /proc/61/comm /proc/614/comm /proc/617/comm /proc/61925/comm /proc/61958/comm /proc/62/comm /proc/620/comm /proc/62057/comm /proc/62084/comm /proc/62106/comm /proc/62136/comm /proc/62147/comm /proc/62167/comm /proc/62477/comm /proc/626/comm /proc/62647/comm /proc/62673/comm /proc/62698/comm /proc/627/comm /proc/62723/comm /proc/62912/comm /proc/62913/comm /proc/62937/comm /proc/62938/comm /proc/63/comm /proc/63247/comm /proc/63376/comm /proc/63512/comm /proc/63651/comm /proc/63678/comm /proc/63708/comm /proc/63737/comm /proc/63748/comm /proc/63780/comm /proc/64/comm /proc/64159/comm /proc/64191/comm /proc/64274/comm /proc/643/comm /proc/64319/comm /proc/64371/comm /proc/64398/comm /proc/644/comm /proc/64432/comm /proc/64668/comm /proc/64691/comm /proc/64746/comm /proc/64764/comm /proc/64765/comm /proc/64766/comm /proc/64767/comm /proc/64768/comm /proc/65144/comm /proc/65168/comm /proc/65238/comm /proc/65340/comm /proc/65512/comm /proc/65542/comm /proc/65990/comm /proc/66/comm /proc/66037/comm /proc/66090/comm /proc/66269/comm /proc/66293/comm /proc/66377/comm /proc/66426/comm /proc/66657/comm /proc/66708/comm /proc/66737/comm /proc/66778/comm /proc/66894/comm /proc/66936/comm /proc/67/comm /proc/67268/comm /proc/67313/comm /proc/67335/comm /proc/67393/comm /proc/67445/comm /proc/67498/comm /proc/67517/comm /proc/67776/comm /proc/67799/comm /proc/68/comm /proc/68296/comm /proc/68313/comm /proc/68319/comm /proc/68366/comm /proc/68367/comm /proc/68377/comm /proc/68643/comm /proc/69/comm /proc/69993/comm /proc/70/comm /proc/70017/comm /proc/71303/comm /proc/717/comm /proc/72/comm /proc/720/comm /proc/721/comm /proc/73/comm /proc/73213/comm /proc/73254/comm /proc/73255/comm /proc/73256/comm /proc/73257/comm /proc/73259/comm /proc/73260/comm /proc/73262/comm /proc/73264/comm /proc/73267/comm /proc/73268/comm /proc/73270/comm /proc/73271/comm /proc/73272/comm /proc/73273/comm /proc/734/comm /proc/73720/comm /proc/74/comm /proc/75/comm /proc/76/comm /proc/78/comm /proc/79/comm /proc/79347/comm /proc/79370/comm /proc/79461/comm /proc/79479/comm /proc/79485/comm /proc/79618/comm /proc/79619/comm /proc/79629/comm /proc/79784/comm /proc/8/comm /proc/80/comm /proc/80837/comm /proc/80861/comm /proc/81/comm /proc/81004/comm /proc/82/comm /proc/82070/comm /proc/84/comm /proc/85/comm /proc/86/comm /proc/86376/comm /proc/86389/comm /proc/87/comm /proc/87128/comm /proc/87153/comm /proc/88/comm /proc/883/comm /proc/88450/comm /proc/9/comm /proc/90/comm /proc/9024/comm /proc/91/comm /proc/92/comm /proc/9254/comm /proc/9271/comm /proc/9287/comm /proc/93/comm /proc/93575/comm /proc/93598/comm /proc/9372/comm /proc/93729/comm /proc/93748/comm /proc/93761/comm /proc/93877/comm /proc/93878/comm /proc/93888/comm /proc/94/comm /proc/94133/comm /proc/96/comm /proc/97/comm /proc/97279/comm /proc/97302/comm /proc/97323/comm /proc/97366/comm /proc/97630/comm /proc/97745/comm /proc/98/comm /proc/98458/comm /proc/99/comm /proc/9993/comm /proc/self/comm /proc/thread-self/comm
+ '[' -n '' ']'
+ rm -f /var/run/libvirtd.pid
+ [[ -c /dev/kvm ]]
+ chmod 660 /dev/kvm
+ chown root:kvm /dev/kvm
+ CGROUPS=
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/blkio ']'
+ grep -w blkio /sys/fs/cgroup/cgroup.controllers
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/cpu ']'
+ grep -w cpu /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=cpu,
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/devices ']'
+ grep -w devices /sys/fs/cgroup/cgroup.controllers
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/freezer ']'
+ grep -w freezer /sys/fs/cgroup/cgroup.controllers
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/hugetlb ']'
+ grep -w hugetlb /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=hugetlb,
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/memory ']'
+ grep -w memory /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=memory,
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/net_cls ']'
+ grep -w net_cls /sys/fs/cgroup/cgroup.controllers
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/perf_event ']'
+ grep -w perf_event /sys/fs/cgroup/cgroup.controllers
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/rdma ']'
+ grep -w rdma /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=rdma,
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/misc ']'
+ grep -w misc /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=misc,
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/pids ']'
+ grep -w pids /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=pids,
+ cgcreate -g cpu,hugetlb,memory,rdma,misc,pids:/osh-libvirt
++ cat /proc/meminfo
++ grep HugePages_Total
++ tr -cd '[:digit:]'
+ hp_count=0
+ '[' 00 -gt 0 ']'
+ '[' -n 457eb676-33da-42ec-9a8c-9293d545c337 ']'
+ cgexec -g cpu,hugetlb,memory,rdma,misc,pids:/osh-libvirt systemd-run --scope --slice=system libvirtd --listen
++ mktemp --suffix .xml
+ tmpsecret=/tmp/tmp.1t0mgFllgD.xml
+ '[' -n '' ']'
+ trap cleanup EXIT
+ TIMEOUT=60
+ [[ ! -f /var/run/libvirtd.pid ]]
+ [[ 60 -gt 0 ]]
+ let TIMEOUT-=1
+ sleep 1
Running as unit: run-reacb6a1fe5194412838f52f96eaf3d9e.scope; invocation ID: 297e1d013c5b4f68817322690d219696
+ [[ ! -f /var/run/libvirtd.pid ]]
+ TIMEOUT=10
+ [[ ! -e /var/run/libvirt/libvirt-sock ]]
+ '[' -z '' ']'
+ '[' -n cinder ']'
++ awk '/key/{print $3}' /etc/ceph/ceph.client.cinder.keyring
+ CEPH_CINDER_KEYRING=AQAjYXJqdi3GCRAAENxIsFaM7ONLWHREC/Vp+Q==
+ '[' -n cinder ']'
+ create_virsh_libvirt_secret cinder 457eb676-33da-42ec-9a8c-9293d545c337 AQAjYXJqdi3GCRAAENxIsFaM7ONLWHREC/Vp+Q==
+ sec_user=cinder
+ sec_uuid=457eb676-33da-42ec-9a8c-9293d545c337
+ sec_ceph_keyring=AQAjYXJqdi3GCRAAENxIsFaM7ONLWHREC/Vp+Q==
+ cat
+ virsh secret-define --file /tmp/tmp.1t0mgFllgD.xml
Secret 457eb676-33da-42ec-9a8c-9293d545c337 created

+ virsh secret-set-value --secret 457eb676-33da-42ec-9a8c-9293d545c337 --base64 AQAjYXJqdi3GCRAAENxIsFaM7ONLWHREC/Vp+Q==
error: Passing secret value as command-line argument is insecure!
Secret value set

+ '[' -n '' ']'
+ '[' -n '' ']'
+ cleanup
+ rm -f /tmp/tmp.1t0mgFllgD.xml
+ '[' -n '' ']'
++ cat /var/run/libvirtd.pid
+ LIBVIRTD_PID=193227
+ kill 193227
+ tail --pid=193227 -f /dev/null
+ cgexec -g cpu,hugetlb,memory,rdma,misc,pids:/osh-libvirt systemd-run --scope --slice=system libvirtd --listen
Running as unit: run-r4fd064c7ffcd406b8695202194b9362f.scope; invocation ID: 4baf8500e7c54e38b58a9b2314dd0315