+ wait_for_file /etc/pki/CA/cacert.pem
+ local file=/etc/pki/CA/cacert.pem
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ sleep 1
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ sleep 1
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ sleep 1
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ sleep 1
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ sleep 1
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ wait_for_file /etc/pki/qemu/ca-cert.pem
+ local file=/etc/pki/qemu/ca-cert.pem
+ '[' '!' -f /etc/pki/qemu/ca-cert.pem ']'
+ wait_for_file /etc/pki/libvirt/servercert.pem
+ local file=/etc/pki/libvirt/servercert.pem
+ '[' '!' -f /etc/pki/libvirt/servercert.pem ']'
+ wait_for_file /etc/pki/libvirt/clientcert.pem
+ local file=/etc/pki/libvirt/clientcert.pem
+ '[' '!' -f /etc/pki/libvirt/clientcert.pem ']'
+ wait_for_file /etc/pki/qemu/server-cert.pem
+ local file=/etc/pki/qemu/server-cert.pem
+ '[' '!' -f /etc/pki/qemu/server-cert.pem ']'
+ wait_for_file /etc/pki/qemu/client-cert.pem
+ local file=/etc/pki/qemu/client-cert.pem
+ '[' '!' -f /etc/pki/qemu/client-cert.pem ']'
+ wait_for_file /etc/pki/libvirt/private/serverkey.pem
+ local file=/etc/pki/libvirt/private/serverkey.pem
+ '[' '!' -f /etc/pki/libvirt/private/serverkey.pem ']'
+ wait_for_file /etc/pki/libvirt/private/clientkey.pem
+ local file=/etc/pki/libvirt/private/clientkey.pem
+ '[' '!' -f /etc/pki/libvirt/private/clientkey.pem ']'
+ wait_for_file /etc/pki/qemu/server-key.pem
+ local file=/etc/pki/qemu/server-key.pem
+ '[' '!' -f /etc/pki/qemu/server-key.pem ']'
+ wait_for_file /etc/pki/qemu/client-key.pem
+ local file=/etc/pki/qemu/client-key.pem
+ '[' '!' -f /etc/pki/qemu/client-key.pem ']'
+ wait_for_file /etc/pki/libvirt-vnc/ca-cert.pem
+ local file=/etc/pki/libvirt-vnc/ca-cert.pem
+ '[' '!' -f /etc/pki/libvirt-vnc/ca-cert.pem ']'
+ wait_for_file /etc/pki/libvirt-vnc/server-cert.pem
+ local file=/etc/pki/libvirt-vnc/server-cert.pem
+ '[' '!' -f /etc/pki/libvirt-vnc/server-cert.pem ']'
+ wait_for_file /etc/pki/libvirt-vnc/server-key.pem
+ local file=/etc/pki/libvirt-vnc/server-key.pem
+ '[' '!' -f /etc/pki/libvirt-vnc/server-key.pem ']'
++ grep -w libvirtd
++ cat /proc/1/comm /proc/10/comm /proc/100/comm /proc/10167/comm /proc/102/comm /proc/102542/comm /proc/103/comm /proc/104/comm /proc/105/comm /proc/106/comm /proc/10674/comm /proc/10675/comm /proc/108/comm /proc/108621/comm /proc/108646/comm /proc/108769/comm /proc/108800/comm /proc/108902/comm /proc/109/comm /proc/109015/comm /proc/11/comm /proc/110/comm /proc/110134/comm /proc/111/comm /proc/112/comm /proc/113/comm /proc/113798/comm /proc/114/comm /proc/115/comm /proc/116/comm /proc/117/comm /proc/117076/comm /proc/117100/comm /proc/117455/comm /proc/117483/comm /proc/117484/comm /proc/1192/comm /proc/119265/comm /proc/119289/comm /proc/119321/comm /proc/119345/comm /proc/119962/comm /proc/12/comm /proc/120098/comm /proc/120100/comm /proc/120102/comm /proc/12116/comm /proc/12147/comm /proc/12197/comm /proc/121972/comm /proc/122151/comm /proc/122174/comm /proc/12228/comm /proc/12246/comm /proc/122501/comm /proc/122518/comm /proc/122524/comm /proc/122593/comm /proc/122594/comm /proc/122604/comm /proc/122661/comm /proc/12478/comm /proc/12498/comm /proc/12525/comm /proc/12584/comm /proc/12607/comm /proc/1297/comm /proc/1298/comm /proc/1299/comm /proc/13/comm /proc/1300/comm /proc/134341/comm /proc/134365/comm /proc/134402/comm /proc/134429/comm /proc/1382/comm /proc/1386/comm /proc/139668/comm /proc/14/comm /proc/141988/comm /proc/1453/comm /proc/145420/comm /proc/1457/comm /proc/1466/comm /proc/147076/comm /proc/147088/comm /proc/147089/comm /proc/147843/comm /proc/147876/comm /proc/147878/comm /proc/147910/comm /proc/148748/comm /proc/148977/comm /proc/149330/comm /proc/149785/comm /proc/15/comm /proc/150025/comm /proc/150538/comm /proc/150539/comm /proc/150653/comm /proc/151368/comm /proc/151460/comm /proc/152946/comm /proc/153066/comm /proc/156462/comm /proc/156668/comm /proc/157170/comm /proc/157359/comm /proc/157385/comm /proc/157386/comm /proc/158539/comm /proc/158540/comm /proc/16/comm /proc/165690/comm /proc/165691/comm /proc/165693/comm /proc/165694/comm /proc/165888/comm /proc/166/comm /proc/166552/comm /proc/166575/comm /proc/166659/comm /proc/167/comm /proc/167133/comm /proc/167167/comm /proc/167228/comm /proc/167261/comm /proc/167262/comm /proc/167263/comm /proc/167265/comm /proc/168/comm /proc/168365/comm /proc/168389/comm /proc/168744/comm /proc/168769/comm /proc/168893/comm /proc/169/comm /proc/169741/comm /proc/169957/comm /proc/169981/comm /proc/170/comm /proc/170073/comm /proc/170090/comm /proc/170096/comm /proc/170212/comm /proc/170213/comm /proc/170223/comm /proc/170299/comm /proc/171/comm /proc/171803/comm /proc/171940/comm /proc/172/comm /proc/172008/comm /proc/172060/comm /proc/172195/comm /proc/172200/comm /proc/172228/comm /proc/172255/comm /proc/172286/comm /proc/172293/comm /proc/172297/comm /proc/172343/comm /proc/172389/comm /proc/172396/comm /proc/172515/comm /proc/173/comm /proc/173205/comm /proc/173395/comm /proc/173419/comm /proc/174/comm /proc/175776/comm /proc/176/comm /proc/176101/comm /proc/176438/comm /proc/177261/comm /proc/178/comm /proc/178304/comm /proc/178893/comm /proc/179/comm /proc/179055/comm /proc/179089/comm /proc/179309/comm /proc/179754/comm /proc/179828/comm /proc/18/comm /proc/181/comm /proc/182456/comm /proc/183/comm /proc/183962/comm /proc/184486/comm /proc/184520/comm /proc/184521/comm /proc/184655/comm /proc/184674/comm /proc/184675/comm /proc/185277/comm /proc/185301/comm /proc/185475/comm /proc/185599/comm /proc/185600/comm /proc/185648/comm /proc/185653/comm /proc/185912/comm /proc/186/comm /proc/186123/comm /proc/186180/comm /proc/186186/comm /proc/186188/comm /proc/186420/comm /proc/186445/comm /proc/186617/comm /proc/186635/comm /proc/186641/comm /proc/186701/comm /proc/186702/comm /proc/186712/comm /proc/186871/comm /proc/187/comm /proc/188/comm /proc/189/comm /proc/189769/comm /proc/189793/comm /proc/19/comm /proc/190135/comm /proc/190161/comm /proc/191/comm /proc/191010/comm /proc/191034/comm /proc/19112/comm /proc/191154/comm /proc/191217/comm /proc/19132/comm /proc/191391/comm /proc/191415/comm /proc/19154/comm /proc/191620/comm /proc/191643/comm /proc/191772/comm /proc/191796/comm /proc/19180/comm /proc/19198/comm /proc/192/comm /proc/193/comm /proc/194/comm /proc/194896/comm /proc/194961/comm /proc/196192/comm /proc/197/comm /proc/2/comm /proc/20/comm /proc/201/comm /proc/202447/comm /proc/202576/comm /proc/202597/comm /proc/202607/comm /proc/202628/comm /proc/202631/comm /proc/202693/comm /proc/203004/comm /proc/203024/comm /proc/203135/comm /proc/203304/comm /proc/203326/comm /proc/204501/comm /proc/204530/comm /proc/204799/comm /proc/205675/comm /proc/205704/comm /proc/205726/comm /proc/205734/comm /proc/207218/comm /proc/207333/comm /proc/207378/comm /proc/207379/comm /proc/207537/comm /proc/207538/comm /proc/207539/comm /proc/207740/comm /proc/207835/comm /proc/207854/comm /proc/207915/comm /proc/207916/comm /proc/207929/comm /proc/207941/comm /proc/207942/comm /proc/208048/comm /proc/208218/comm /proc/208221/comm /proc/208222/comm /proc/208329/comm /proc/208810/comm /proc/208811/comm /proc/208812/comm /proc/208876/comm /proc/209212/comm /proc/209361/comm /proc/209763/comm /proc/21/comm /proc/210762/comm /proc/210779/comm /proc/210800/comm /proc/210864/comm /proc/211111/comm /proc/211117/comm /proc/211574/comm /proc/211680/comm /proc/211834/comm /proc/211852/comm /proc/211853/comm /proc/211854/comm /proc/211855/comm /proc/211856/comm /proc/211857/comm /proc/212058/comm /proc/21214/comm /proc/212335/comm /proc/21276/comm /proc/21277/comm /proc/212814/comm /proc/212829/comm /proc/212870/comm /proc/212876/comm /proc/212877/comm /proc/21294/comm /proc/213018/comm /proc/213495/comm /proc/213502/comm /proc/213529/comm /proc/213549/comm /proc/213553/comm /proc/213577/comm /proc/213676/comm /proc/213742/comm /proc/213859/comm /proc/213864/comm /proc/213865/comm /proc/213868/comm /proc/213869/comm /proc/213871/comm /proc/213905/comm /proc/213920/comm /proc/213922/comm /proc/213941/comm /proc/213948/comm /proc/213949/comm /proc/213950/comm /proc/213951/comm /proc/213952/comm /proc/213953/comm /proc/213973/comm /proc/213974/comm /proc/213975/comm /proc/217/comm /proc/22/comm /proc/220/comm /proc/221/comm /proc/226/comm /proc/24/comm /proc/24071/comm /proc/24336/comm /proc/24354/comm /proc/24378/comm /proc/24390/comm /proc/248/comm /proc/25/comm /proc/26/comm /proc/268/comm /proc/27/comm /proc/28/comm /proc/28511/comm /proc/28781/comm /proc/28836/comm /proc/28861/comm /proc/28873/comm /proc/289/comm /proc/292/comm /proc/293/comm /proc/294/comm /proc/3/comm /proc/30/comm /proc/31/comm /proc/313/comm /proc/314/comm /proc/318/comm /proc/32/comm /proc/33/comm /proc/33167/comm /proc/33433/comm /proc/33453/comm /proc/33477/comm /proc/33489/comm /proc/34/comm /proc/34025/comm /proc/349/comm /proc/355/comm /proc/36/comm /proc/360/comm /proc/36498/comm /proc/36500/comm /proc/37/comm /proc/379/comm /proc/38/comm /proc/386/comm /proc/38891/comm /proc/38914/comm /proc/38947/comm /proc/38949/comm /proc/38956/comm /proc/38964/comm /proc/39/comm /proc/39041/comm /proc/39045/comm /proc/39064/comm /proc/39066/comm /proc/39180/comm /proc/392/comm /proc/39211/comm /proc/39362/comm /proc/39482/comm /proc/39505/comm /proc/39530/comm /proc/396/comm /proc/397/comm /proc/399/comm /proc/4/comm /proc/40/comm /proc/40257/comm /proc/40275/comm /proc/40300/comm /proc/40320/comm /proc/40541/comm /proc/40765/comm /proc/41189/comm /proc/41600/comm /proc/41623/comm /proc/42/comm /proc/42014/comm /proc/42045/comm /proc/42047/comm /proc/42075/comm /proc/42107/comm /proc/42125/comm /proc/42508/comm /proc/42533/comm /proc/42586/comm /proc/426/comm /proc/42705/comm /proc/43/comm /proc/43011/comm /proc/43035/comm /proc/43049/comm /proc/43072/comm /proc/43086/comm /proc/43117/comm /proc/43236/comm /proc/43279/comm /proc/43325/comm /proc/44/comm /proc/45/comm /proc/453/comm /proc/45492/comm /proc/45534/comm /proc/45602/comm /proc/45627/comm /proc/45885/comm /proc/45915/comm /proc/45980/comm /proc/46/comm /proc/46041/comm /proc/46388/comm /proc/46412/comm /proc/46514/comm /proc/46537/comm /proc/46855/comm /proc/46879/comm /proc/47119/comm /proc/47145/comm /proc/47605/comm /proc/47628/comm /proc/47654/comm /proc/47755/comm /proc/47878/comm /proc/47971/comm /proc/47995/comm /proc/48/comm /proc/48086/comm /proc/49/comm /proc/5/comm /proc/50/comm /proc/50387/comm /proc/504/comm /proc/50411/comm /proc/50539/comm /proc/50562/comm /proc/50595/comm /proc/50725/comm /proc/50899/comm /proc/50958/comm /proc/51/comm /proc/51038/comm /proc/52/comm /proc/522/comm /proc/54/comm /proc/55/comm /proc/55076/comm /proc/55098/comm /proc/55895/comm /proc/55919/comm /proc/55939/comm /proc/55963/comm /proc/55977/comm /proc/56/comm /proc/56003/comm /proc/56121/comm /proc/56144/comm /proc/56288/comm /proc/56319/comm /proc/56359/comm /proc/56529/comm /proc/57/comm /proc/58/comm /proc/6/comm /proc/60/comm /proc/60372/comm /proc/60631/comm /proc/60683/comm /proc/60786/comm /proc/60810/comm /proc/60824/comm /proc/60849/comm /proc/60873/comm /proc/60896/comm /proc/61/comm /proc/61213/comm /proc/614/comm /proc/61424/comm /proc/617/comm /proc/61932/comm /proc/61959/comm /proc/62/comm /proc/620/comm /proc/62100/comm /proc/62211/comm /proc/62235/comm /proc/62236/comm /proc/62268/comm /proc/62269/comm /proc/62288/comm /proc/623/comm /proc/624/comm /proc/62582/comm /proc/62607/comm /proc/62742/comm /proc/62759/comm /proc/62799/comm /proc/62859/comm /proc/62860/comm /proc/62872/comm /proc/63/comm /proc/63088/comm /proc/63125/comm /proc/63250/comm /proc/63277/comm /proc/63603/comm /proc/63627/comm /proc/63703/comm /proc/63884/comm /proc/63927/comm /proc/64/comm /proc/64168/comm /proc/64195/comm /proc/64402/comm /proc/64533/comm /proc/647/comm /proc/64765/comm /proc/64780/comm /proc/64781/comm /proc/64782/comm /proc/64783/comm /proc/64784/comm /proc/64985/comm /proc/65008/comm /proc/65103/comm /proc/652/comm /proc/65233/comm /proc/65268/comm /proc/65318/comm /proc/65465/comm /proc/65596/comm /proc/65717/comm /proc/65760/comm /proc/66/comm /proc/66123/comm /proc/66367/comm /proc/66398/comm /proc/66533/comm /proc/66557/comm /proc/66588/comm /proc/66660/comm /proc/66730/comm /proc/66794/comm /proc/66852/comm /proc/67/comm /proc/67119/comm /proc/67351/comm /proc/67368/comm /proc/67374/comm /proc/67434/comm /proc/67435/comm /proc/67445/comm /proc/67585/comm /proc/68/comm /proc/68941/comm /proc/68963/comm /proc/69/comm /proc/70/comm /proc/704/comm /proc/707/comm /proc/708/comm /proc/72/comm /proc/721/comm /proc/72941/comm /proc/72980/comm /proc/72981/comm /proc/72982/comm /proc/72983/comm /proc/72986/comm /proc/72987/comm /proc/72989/comm /proc/72992/comm /proc/72994/comm /proc/72995/comm /proc/72996/comm /proc/72997/comm /proc/72998/comm /proc/72999/comm /proc/73/comm /proc/74/comm /proc/75/comm /proc/76/comm /proc/78/comm /proc/78481/comm /proc/78504/comm /proc/78679/comm /proc/78696/comm /proc/78702/comm /proc/78755/comm /proc/78756/comm /proc/78766/comm /proc/78916/comm /proc/79/comm /proc/8/comm /proc/80/comm /proc/80006/comm /proc/80041/comm /proc/81/comm /proc/82/comm /proc/84/comm /proc/85/comm /proc/85907/comm /proc/85920/comm /proc/86/comm /proc/866/comm /proc/87/comm /proc/87211/comm /proc/87235/comm /proc/88/comm /proc/88414/comm /proc/9/comm /proc/90/comm /proc/9064/comm /proc/9081/comm /proc/9097/comm /proc/91/comm /proc/9180/comm /proc/92/comm /proc/92355/comm /proc/93/comm /proc/94/comm /proc/94110/comm /proc/94133/comm /proc/94562/comm /proc/94579/comm /proc/94585/comm /proc/94731/comm /proc/94732/comm /proc/94744/comm /proc/95260/comm /proc/96/comm /proc/96564/comm /proc/97/comm /proc/97312/comm /proc/9797/comm /proc/98/comm /proc/99/comm /proc/self/comm /proc/thread-self/comm
+ '[' -n '' ']'
+ rm -f /var/run/libvirtd.pid
+ [[ -c /dev/kvm ]]
+ chmod 660 /dev/kvm
+ chown root:kvm /dev/kvm
+ CGROUPS=
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/blkio ']'
+ grep -w blkio /sys/fs/cgroup/cgroup.controllers
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/cpu ']'
+ grep -w cpu /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=cpu,
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/devices ']'
+ grep -w devices /sys/fs/cgroup/cgroup.controllers
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/freezer ']'
+ grep -w freezer /sys/fs/cgroup/cgroup.controllers
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/hugetlb ']'
+ grep -w hugetlb /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=hugetlb,
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/memory ']'
+ grep -w memory /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=memory,
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/net_cls ']'
+ grep -w net_cls /sys/fs/cgroup/cgroup.controllers
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/perf_event ']'
+ grep -w perf_event /sys/fs/cgroup/cgroup.controllers
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/rdma ']'
+ grep -w rdma /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=rdma,
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/misc ']'
+ grep -w misc /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=misc,
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/pids ']'
+ grep -w pids /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=pids,
+ cgcreate -g cpu,hugetlb,memory,rdma,misc,pids:/osh-libvirt
++ cat /proc/meminfo
++ grep HugePages_Total
++ tr -cd '[:digit:]'
+ hp_count=0
+ '[' 00 -gt 0 ']'
+ '[' -n 457eb676-33da-42ec-9a8c-9293d545c337 ']'
+ cgexec -g cpu,hugetlb,memory,rdma,misc,pids:/osh-libvirt systemd-run --scope --slice=system libvirtd --listen
++ mktemp --suffix .xml
+ tmpsecret=/tmp/tmp.Qlsl39aN2x.xml
+ '[' -n '' ']'
+ trap cleanup EXIT
+ TIMEOUT=60
+ [[ ! -f /var/run/libvirtd.pid ]]
+ [[ 60 -gt 0 ]]
+ let TIMEOUT-=1
+ sleep 1
Running as unit: run-rb54a8d9ce0b240aa9cbab6897c93d4da.scope; invocation ID: 44c14790fbce48a69fb067111cf4bd0c
+ [[ ! -f /var/run/libvirtd.pid ]]
+ TIMEOUT=10
+ [[ ! -e /var/run/libvirt/libvirt-sock ]]
+ '[' -z '' ']'
+ '[' -n cinder ']'
++ awk '/key/{print $3}' /etc/ceph/ceph.client.cinder.keyring
+ CEPH_CINDER_KEYRING=AQD6xgJqbHnJAxAAXjE5imNzKTlFtWhqV9Ux1g==
+ '[' -n cinder ']'
+ create_virsh_libvirt_secret cinder 457eb676-33da-42ec-9a8c-9293d545c337 AQD6xgJqbHnJAxAAXjE5imNzKTlFtWhqV9Ux1g==
+ sec_user=cinder
+ sec_uuid=457eb676-33da-42ec-9a8c-9293d545c337
+ sec_ceph_keyring=AQD6xgJqbHnJAxAAXjE5imNzKTlFtWhqV9Ux1g==
+ cat
+ virsh secret-define --file /tmp/tmp.Qlsl39aN2x.xml
Secret 457eb676-33da-42ec-9a8c-9293d545c337 created

+ virsh secret-set-value --secret 457eb676-33da-42ec-9a8c-9293d545c337 --base64 AQD6xgJqbHnJAxAAXjE5imNzKTlFtWhqV9Ux1g==
error: Passing secret value as command-line argument is insecure!
Secret value set

+ '[' -n '' ']'
+ '[' -n '' ']'
+ cleanup
+ rm -f /tmp/tmp.Qlsl39aN2x.xml
+ '[' -n '' ']'
++ cat /var/run/libvirtd.pid
+ LIBVIRTD_PID=213999
+ kill 213999
+ tail --pid=213999 -f /dev/null
+ cgexec -g cpu,hugetlb,memory,rdma,misc,pids:/osh-libvirt systemd-run --scope --slice=system libvirtd --listen
Running as unit: run-r724b05389f534d279fd71e6a5f558cb3.scope; invocation ID: 0b8265003adb44d2954d3854cc3ae7f7