+ wait_for_file /etc/pki/CA/cacert.pem
+ local file=/etc/pki/CA/cacert.pem
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ sleep 1
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ sleep 1
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ sleep 1
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ sleep 1
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ sleep 1
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ wait_for_file /etc/pki/qemu/ca-cert.pem
+ local file=/etc/pki/qemu/ca-cert.pem
+ '[' '!' -f /etc/pki/qemu/ca-cert.pem ']'
+ wait_for_file /etc/pki/libvirt/servercert.pem
+ local file=/etc/pki/libvirt/servercert.pem
+ '[' '!' -f /etc/pki/libvirt/servercert.pem ']'
+ wait_for_file /etc/pki/libvirt/clientcert.pem
+ local file=/etc/pki/libvirt/clientcert.pem
+ '[' '!' -f /etc/pki/libvirt/clientcert.pem ']'
+ wait_for_file /etc/pki/qemu/server-cert.pem
+ local file=/etc/pki/qemu/server-cert.pem
+ '[' '!' -f /etc/pki/qemu/server-cert.pem ']'
+ wait_for_file /etc/pki/qemu/client-cert.pem
+ local file=/etc/pki/qemu/client-cert.pem
+ '[' '!' -f /etc/pki/qemu/client-cert.pem ']'
+ wait_for_file /etc/pki/libvirt/private/serverkey.pem
+ local file=/etc/pki/libvirt/private/serverkey.pem
+ '[' '!' -f /etc/pki/libvirt/private/serverkey.pem ']'
+ wait_for_file /etc/pki/libvirt/private/clientkey.pem
+ local file=/etc/pki/libvirt/private/clientkey.pem
+ '[' '!' -f /etc/pki/libvirt/private/clientkey.pem ']'
+ wait_for_file /etc/pki/qemu/server-key.pem
+ local file=/etc/pki/qemu/server-key.pem
+ '[' '!' -f /etc/pki/qemu/server-key.pem ']'
+ wait_for_file /etc/pki/qemu/client-key.pem
+ local file=/etc/pki/qemu/client-key.pem
+ '[' '!' -f /etc/pki/qemu/client-key.pem ']'
+ wait_for_file /etc/pki/libvirt-vnc/ca-cert.pem
+ local file=/etc/pki/libvirt-vnc/ca-cert.pem
+ '[' '!' -f /etc/pki/libvirt-vnc/ca-cert.pem ']'
+ wait_for_file /etc/pki/libvirt-vnc/server-cert.pem
+ local file=/etc/pki/libvirt-vnc/server-cert.pem
+ '[' '!' -f /etc/pki/libvirt-vnc/server-cert.pem ']'
+ wait_for_file /etc/pki/libvirt-vnc/server-key.pem
+ local file=/etc/pki/libvirt-vnc/server-key.pem
+ '[' '!' -f /etc/pki/libvirt-vnc/server-key.pem ']'
++ grep -w libvirtd
++ cat /proc/1/comm /proc/10/comm /proc/100/comm /proc/100091/comm /proc/101326/comm /proc/102/comm /proc/103/comm /proc/10325/comm /proc/10349/comm /proc/104/comm /proc/104383/comm /proc/105/comm /proc/106/comm /proc/107664/comm /proc/108/comm /proc/10834/comm /proc/10835/comm /proc/1089/comm /proc/109/comm /proc/11/comm /proc/110/comm /proc/111/comm /proc/112/comm /proc/112443/comm /proc/112466/comm /proc/112964/comm /proc/112978/comm /proc/112979/comm /proc/113/comm /proc/114/comm /proc/114153/comm /proc/114181/comm /proc/114204/comm /proc/114248/comm /proc/114555/comm /proc/114804/comm /proc/114838/comm /proc/114840/comm /proc/115/comm /proc/115488/comm /proc/115898/comm /proc/116/comm /proc/116001/comm /proc/116009/comm /proc/116011/comm /proc/116217/comm /proc/116240/comm /proc/116351/comm /proc/116380/comm /proc/116386/comm /proc/116433/comm /proc/116434/comm /proc/116444/comm /proc/116579/comm /proc/117/comm /proc/118066/comm /proc/118093/comm /proc/118121/comm /proc/118158/comm /proc/119993/comm /proc/12/comm /proc/121272/comm /proc/12222/comm /proc/12251/comm /proc/12299/comm /proc/123046/comm /proc/123048/comm /proc/123060/comm /proc/12331/comm /proc/12343/comm /proc/124739/comm /proc/125745/comm /proc/12578/comm /proc/12610/comm /proc/12664/comm /proc/126708/comm /proc/12688/comm /proc/12708/comm /proc/128412/comm /proc/128425/comm /proc/128426/comm /proc/129781/comm /proc/129907/comm /proc/13/comm /proc/13042/comm /proc/131343/comm /proc/131367/comm /proc/131451/comm /proc/131474/comm /proc/131674/comm /proc/132006/comm /proc/132531/comm /proc/132766/comm /proc/133489/comm /proc/133524/comm /proc/134199/comm /proc/134223/comm /proc/14/comm /proc/1420/comm /proc/146145/comm /proc/147077/comm /proc/148099/comm /proc/149949/comm /proc/15/comm /proc/151576/comm /proc/151606/comm /proc/151607/comm /proc/152874/comm /proc/152875/comm /proc/1538/comm /proc/1539/comm /proc/1540/comm /proc/1541/comm /proc/1545/comm /proc/159989/comm /proc/159990/comm /proc/159992/comm /proc/159993/comm /proc/16/comm /proc/160133/comm /proc/160905/comm /proc/160929/comm /proc/1612/comm /proc/161323/comm /proc/161357/comm /proc/161371/comm /proc/161403/comm /proc/161404/comm /proc/161405/comm /proc/161407/comm /proc/1616/comm /proc/162337/comm /proc/162360/comm /proc/1625/comm /proc/162793/comm /proc/162814/comm /proc/163006/comm /proc/163300/comm /proc/163442/comm /proc/163570/comm /proc/163594/comm /proc/163971/comm /proc/163988/comm /proc/163994/comm /proc/164052/comm /proc/164053/comm /proc/164063/comm /proc/164220/comm /proc/165/comm /proc/165800/comm /proc/165848/comm /proc/165968/comm /proc/166/comm /proc/166023/comm /proc/166050/comm /proc/166125/comm /proc/166136/comm /proc/166162/comm /proc/166240/comm /proc/166263/comm /proc/166298/comm /proc/166332/comm /proc/166386/comm /proc/166422/comm /proc/166441/comm /proc/166793/comm /proc/166818/comm /proc/167/comm /proc/168/comm /proc/169/comm /proc/170/comm /proc/170698/comm /proc/171/comm /proc/171479/comm /proc/172/comm /proc/172181/comm /proc/172219/comm /proc/173/comm /proc/173409/comm /proc/174661/comm /proc/174683/comm /proc/174975/comm /proc/176/comm /proc/176248/comm /proc/176261/comm /proc/176717/comm /proc/176730/comm /proc/176743/comm /proc/176744/comm /proc/176932/comm /proc/176946/comm /proc/176947/comm /proc/177594/comm /proc/177613/comm /proc/177749/comm /proc/177771/comm /proc/177969/comm /proc/177970/comm /proc/177993/comm /proc/177995/comm /proc/178/comm /proc/178386/comm /proc/178391/comm /proc/178419/comm /proc/178650/comm /proc/178672/comm /proc/178814/comm /proc/178830/comm /proc/178836/comm /proc/178962/comm /proc/178963/comm /proc/178973/comm /proc/179/comm /proc/179041/comm /proc/18/comm /proc/180494/comm /proc/180530/comm /proc/180563/comm /proc/180600/comm /proc/180609/comm /proc/180667/comm /proc/180713/comm /proc/180717/comm /proc/180720/comm /proc/180781/comm /proc/181020/comm /proc/181045/comm /proc/181059/comm /proc/181088/comm /proc/181537/comm /proc/181550/comm /proc/181712/comm /proc/182/comm /proc/184/comm /proc/18471/comm /proc/18491/comm /proc/185070/comm /proc/185120/comm /proc/185132/comm /proc/185137/comm /proc/18515/comm /proc/18542/comm /proc/18558/comm /proc/185777/comm /proc/185805/comm /proc/185808/comm /proc/186/comm /proc/186864/comm /proc/187/comm /proc/188/comm /proc/188123/comm /proc/189/comm /proc/189999/comm /proc/19/comm /proc/190/comm /proc/190059/comm /proc/190160/comm /proc/190161/comm /proc/190162/comm /proc/190348/comm /proc/190366/comm /proc/190394/comm /proc/190395/comm /proc/190408/comm /proc/190421/comm /proc/190422/comm /proc/190794/comm /proc/190797/comm /proc/190800/comm /proc/191/comm /proc/191408/comm /proc/191465/comm /proc/191694/comm /proc/192016/comm /proc/192259/comm /proc/192592/comm /proc/193151/comm /proc/193298/comm /proc/193318/comm /proc/193552/comm /proc/193608/comm /proc/193898/comm /proc/193916/comm /proc/193917/comm /proc/193918/comm /proc/193919/comm /proc/193920/comm /proc/193921/comm /proc/194159/comm /proc/194201/comm /proc/194460/comm /proc/194661/comm /proc/194686/comm /proc/194773/comm /proc/194831/comm /proc/194948/comm /proc/194977/comm /proc/195004/comm /proc/195022/comm /proc/195028/comm /proc/195111/comm /proc/195112/comm /proc/195122/comm /proc/195204/comm /proc/195248/comm /proc/195264/comm /proc/195276/comm /proc/195305/comm /proc/195325/comm /proc/195362/comm /proc/195363/comm /proc/195364/comm /proc/195365/comm /proc/195366/comm /proc/2/comm /proc/20/comm /proc/200/comm /proc/202/comm /proc/203/comm /proc/204/comm /proc/21/comm /proc/21486/comm /proc/215/comm /proc/21539/comm /proc/21540/comm /proc/21553/comm /proc/219/comm /proc/22/comm /proc/221/comm /proc/226/comm /proc/24/comm /proc/248/comm /proc/24807/comm /proc/25/comm /proc/25069/comm /proc/25086/comm /proc/25113/comm /proc/25125/comm /proc/26/comm /proc/268/comm /proc/27/comm /proc/28/comm /proc/284/comm /proc/288/comm /proc/289/comm /proc/291/comm /proc/29303/comm /proc/29585/comm /proc/29602/comm /proc/29626/comm /proc/29639/comm /proc/3/comm /proc/30/comm /proc/31/comm /proc/310/comm /proc/311/comm /proc/315/comm /proc/316/comm /proc/317/comm /proc/318/comm /proc/319/comm /proc/32/comm /proc/320/comm /proc/321/comm /proc/322/comm /proc/323/comm /proc/33/comm /proc/33941/comm /proc/34/comm /proc/34225/comm /proc/34242/comm /proc/34267/comm /proc/34279/comm /proc/36/comm /proc/363/comm /proc/37/comm /proc/38/comm /proc/38646/comm /proc/38648/comm /proc/38763/comm /proc/38783/comm /proc/38831/comm /proc/38857/comm /proc/38871/comm /proc/39/comm /proc/396/comm /proc/399/comm /proc/4/comm /proc/40/comm /proc/41322/comm /proc/41334/comm /proc/41357/comm /proc/41382/comm /proc/41398/comm /proc/41420/comm /proc/41442/comm /proc/41479/comm /proc/41490/comm /proc/41495/comm /proc/41557/comm /proc/41579/comm /proc/41596/comm /proc/41615/comm /proc/41713/comm /proc/41785/comm /proc/41943/comm /proc/41967/comm /proc/41993/comm /proc/42/comm /proc/42671/comm /proc/42687/comm /proc/42720/comm /proc/42732/comm /proc/42966/comm /proc/43/comm /proc/43047/comm /proc/43200/comm /proc/43572/comm /proc/44/comm /proc/44023/comm /proc/44047/comm /proc/44072/comm /proc/44461/comm /proc/44487/comm /proc/44507/comm /proc/44531/comm /proc/44550/comm /proc/44600/comm /proc/44931/comm /proc/44955/comm /proc/45/comm /proc/45069/comm /proc/452/comm /proc/45445/comm /proc/45476/comm /proc/45500/comm /proc/45531/comm /proc/45533/comm /proc/45562/comm /proc/45678/comm /proc/45723/comm /proc/45770/comm /proc/46/comm /proc/47561/comm /proc/47596/comm /proc/47628/comm /proc/47678/comm /proc/47703/comm /proc/47925/comm /proc/47938/comm /proc/47996/comm /proc/48/comm /proc/48078/comm /proc/48649/comm /proc/48673/comm /proc/48748/comm /proc/48772/comm /proc/48818/comm /proc/48907/comm /proc/49/comm /proc/49121/comm /proc/49144/comm /proc/49264/comm /proc/49407/comm /proc/49431/comm /proc/49796/comm /proc/49819/comm /proc/49844/comm /proc/49925/comm /proc/5/comm /proc/50/comm /proc/50000/comm /proc/50099/comm /proc/50123/comm /proc/50234/comm /proc/51/comm /proc/51082/comm /proc/51978/comm /proc/52/comm /proc/520/comm /proc/52004/comm /proc/52163/comm /proc/52186/comm /proc/52254/comm /proc/52384/comm /proc/52586/comm /proc/52642/comm /proc/54/comm /proc/55/comm /proc/56/comm /proc/57/comm /proc/57083/comm /proc/57108/comm /proc/57750/comm /proc/57778/comm /proc/57787/comm /proc/57825/comm /proc/57841/comm /proc/57870/comm /proc/58/comm /proc/58029/comm /proc/58054/comm /proc/58168/comm /proc/58218/comm /proc/58254/comm /proc/58358/comm /proc/6/comm /proc/60/comm /proc/61/comm /proc/613/comm /proc/617/comm /proc/619/comm /proc/62/comm /proc/62626/comm /proc/627/comm /proc/62747/comm /proc/628/comm /proc/62876/comm /proc/62932/comm /proc/63/comm /proc/63018/comm /proc/63043/comm /proc/63064/comm /proc/63094/comm /proc/63101/comm /proc/63128/comm /proc/63485/comm /proc/63532/comm /proc/63612/comm /proc/63671/comm /proc/63672/comm /proc/63673/comm /proc/63674/comm /proc/63722/comm /proc/64/comm /proc/64225/comm /proc/64227/comm /proc/64245/comm /proc/64381/comm /proc/646/comm /proc/64696/comm /proc/647/comm /proc/64729/comm /proc/64791/comm /proc/64813/comm /proc/64837/comm /proc/64857/comm /proc/64906/comm /proc/64930/comm /proc/65146/comm /proc/65249/comm /proc/65281/comm /proc/65319/comm /proc/65342/comm /proc/65406/comm /proc/65545/comm /proc/65713/comm /proc/65743/comm /proc/65886/comm /proc/65902/comm /proc/65903/comm /proc/65904/comm /proc/65905/comm /proc/65906/comm /proc/66/comm /proc/66014/comm /proc/66037/comm /proc/66151/comm /proc/66229/comm /proc/66301/comm /proc/66676/comm /proc/66711/comm /proc/67/comm /proc/67011/comm /proc/67050/comm /proc/67306/comm /proc/67454/comm /proc/67477/comm /proc/67578/comm /proc/67653/comm /proc/67701/comm /proc/67732/comm /proc/67841/comm /proc/68/comm /proc/68023/comm /proc/68062/comm /proc/68107/comm /proc/68441/comm /proc/68496/comm /proc/68499/comm /proc/68616/comm /proc/68634/comm /proc/68701/comm /proc/68861/comm /proc/68886/comm /proc/69/comm /proc/69180/comm /proc/69197/comm /proc/69203/comm /proc/69289/comm /proc/69290/comm /proc/69300/comm /proc/69433/comm /proc/70/comm /proc/708/comm /proc/70994/comm /proc/71019/comm /proc/711/comm /proc/712/comm /proc/71664/comm /proc/72/comm /proc/725/comm /proc/73/comm /proc/74/comm /proc/74352/comm /proc/74387/comm /proc/74393/comm /proc/74394/comm /proc/74395/comm /proc/74396/comm /proc/74397/comm /proc/74398/comm /proc/74402/comm /proc/74403/comm /proc/74405/comm /proc/74407/comm /proc/74409/comm /proc/74410/comm /proc/74411/comm /proc/74412/comm /proc/75/comm /proc/76/comm /proc/78/comm /proc/79/comm /proc/8/comm /proc/80/comm /proc/80435/comm /proc/80460/comm /proc/80577/comm /proc/80594/comm /proc/80600/comm /proc/80716/comm /proc/80717/comm /proc/80727/comm /proc/80797/comm /proc/81/comm /proc/82/comm /proc/82013/comm /proc/82037/comm /proc/83781/comm /proc/84/comm /proc/85/comm /proc/86/comm /proc/86018/comm /proc/87/comm /proc/870/comm /proc/87514/comm /proc/87546/comm /proc/88/comm /proc/88337/comm /proc/88360/comm /proc/89198/comm /proc/9/comm /proc/90/comm /proc/91/comm /proc/91927/comm /proc/91928/comm /proc/91929/comm /proc/92/comm /proc/9221/comm /proc/9238/comm /proc/9254/comm /proc/93/comm /proc/93298/comm /proc/9337/comm /proc/94/comm /proc/95134/comm /proc/95294/comm /proc/95319/comm /proc/95579/comm /proc/95599/comm /proc/95605/comm /proc/95682/comm /proc/95683/comm /proc/95693/comm /proc/95853/comm /proc/96/comm /proc/97/comm /proc/98/comm /proc/98922/comm /proc/98946/comm /proc/98965/comm /proc/98998/comm /proc/99/comm /proc/99281/comm /proc/99406/comm /proc/9956/comm /proc/self/comm /proc/thread-self/comm
+ '[' -n '' ']'
+ rm -f /var/run/libvirtd.pid
+ [[ -c /dev/kvm ]]
+ chmod 660 /dev/kvm
+ chown root:kvm /dev/kvm
+ CGROUPS=
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/blkio ']'
+ grep -w blkio /sys/fs/cgroup/cgroup.controllers
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/cpu ']'
+ grep -w cpu /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=cpu,
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/devices ']'
+ grep -w devices /sys/fs/cgroup/cgroup.controllers
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/freezer ']'
+ grep -w freezer /sys/fs/cgroup/cgroup.controllers
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/hugetlb ']'
+ grep -w hugetlb /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=hugetlb,
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/memory ']'
+ grep -w memory /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=memory,
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/net_cls ']'
+ grep -w net_cls /sys/fs/cgroup/cgroup.controllers
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/perf_event ']'
+ grep -w perf_event /sys/fs/cgroup/cgroup.controllers
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/rdma ']'
+ grep -w rdma /sys/fs/cgroup/cgroup.controllers
+ CGROUPS+=rdma,
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
cpuset cpu io memory hugetlb pids rdma misc
+ '[' -d /sys/fs/cgroup/misc ']'
+ grep -w misc /sys/fs/cgroup/cgroup.controllers
+ CGROUPS+=misc,
cpuset cpu io memory hugetlb pids rdma misc
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
cpuset cpu io memory hugetlb pids rdma misc
+ '[' -d /sys/fs/cgroup/pids ']'
+ grep -w pids /sys/fs/cgroup/cgroup.controllers
+ CGROUPS+=pids,
+ cgcreate -g cpu,hugetlb,memory,rdma,misc,pids:/osh-libvirt
++ cat /proc/meminfo
++ grep HugePages_Total
++ tr -cd '[:digit:]'
+ hp_count=0
+ '[' 00 -gt 0 ']'
+ '[' -n 457eb676-33da-42ec-9a8c-9293d545c337 ']'
+ cgexec -g cpu,hugetlb,memory,rdma,misc,pids:/osh-libvirt systemd-run --scope --slice=system libvirtd --listen
++ mktemp --suffix .xml
+ tmpsecret=/tmp/tmp.7bt6ED9JjE.xml
+ '[' -n '' ']'
+ trap cleanup EXIT
+ TIMEOUT=60
+ [[ ! -f /var/run/libvirtd.pid ]]
+ [[ 60 -gt 0 ]]
+ let TIMEOUT-=1
+ sleep 1
Running as unit: run-r6b9e08bac715462fb27f0ef3c80b1e41.scope; invocation ID: 0681b660af3e4787aac8631e33670b71
+ [[ ! -f /var/run/libvirtd.pid ]]
+ TIMEOUT=10
+ [[ ! -e /var/run/libvirt/libvirt-sock ]]
+ '[' -z '' ']'
+ '[' -n cinder ']'
++ awk '/key/{print $3}' /etc/ceph/ceph.client.cinder.keyring
+ CEPH_CINDER_KEYRING=AQBZVMhq0d3mNRAA+HN3bYybG3Vso22084A+uA==
+ '[' -n cinder ']'
+ create_virsh_libvirt_secret cinder 457eb676-33da-42ec-9a8c-9293d545c337 AQBZVMhq0d3mNRAA+HN3bYybG3Vso22084A+uA==
+ sec_user=cinder
+ sec_uuid=457eb676-33da-42ec-9a8c-9293d545c337
+ sec_ceph_keyring=AQBZVMhq0d3mNRAA+HN3bYybG3Vso22084A+uA==
+ cat
+ virsh secret-define --file /tmp/tmp.7bt6ED9JjE.xml
Secret 457eb676-33da-42ec-9a8c-9293d545c337 created

+ virsh secret-set-value --secret 457eb676-33da-42ec-9a8c-9293d545c337 --base64 AQBZVMhq0d3mNRAA+HN3bYybG3Vso22084A+uA==
error: Passing secret value as command-line argument is insecure!
Secret value set

+ '[' -n '' ']'
+ '[' -n '' ']'
+ cleanup
+ rm -f /tmp/tmp.7bt6ED9JjE.xml
+ '[' -n '' ']'
++ cat /var/run/libvirtd.pid
+ LIBVIRTD_PID=195389
+ kill 195389
+ tail --pid=195389 -f /dev/null
+ cgexec -g cpu,hugetlb,memory,rdma,misc,pids:/osh-libvirt systemd-run --scope --slice=system libvirtd --listen
Running as unit: run-r14659305215a47d09c23197d12a2b32e.scope; invocation ID: 5d634f0f19ab4e19a254e87c6b7cb252