+ wait_for_file /etc/pki/CA/cacert.pem
+ local file=/etc/pki/CA/cacert.pem
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ sleep 1
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ sleep 1
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ sleep 1
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ sleep 1
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ sleep 1
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ wait_for_file /etc/pki/qemu/ca-cert.pem
+ local file=/etc/pki/qemu/ca-cert.pem
+ '[' '!' -f /etc/pki/qemu/ca-cert.pem ']'
+ wait_for_file /etc/pki/libvirt/servercert.pem
+ local file=/etc/pki/libvirt/servercert.pem
+ '[' '!' -f /etc/pki/libvirt/servercert.pem ']'
+ wait_for_file /etc/pki/libvirt/clientcert.pem
+ local file=/etc/pki/libvirt/clientcert.pem
+ '[' '!' -f /etc/pki/libvirt/clientcert.pem ']'
+ wait_for_file /etc/pki/qemu/server-cert.pem
+ local file=/etc/pki/qemu/server-cert.pem
+ '[' '!' -f /etc/pki/qemu/server-cert.pem ']'
+ wait_for_file /etc/pki/qemu/client-cert.pem
+ local file=/etc/pki/qemu/client-cert.pem
+ '[' '!' -f /etc/pki/qemu/client-cert.pem ']'
+ wait_for_file /etc/pki/libvirt/private/serverkey.pem
+ local file=/etc/pki/libvirt/private/serverkey.pem
+ '[' '!' -f /etc/pki/libvirt/private/serverkey.pem ']'
+ wait_for_file /etc/pki/libvirt/private/clientkey.pem
+ local file=/etc/pki/libvirt/private/clientkey.pem
+ '[' '!' -f /etc/pki/libvirt/private/clientkey.pem ']'
+ wait_for_file /etc/pki/qemu/server-key.pem
+ local file=/etc/pki/qemu/server-key.pem
+ '[' '!' -f /etc/pki/qemu/server-key.pem ']'
+ wait_for_file /etc/pki/qemu/client-key.pem
+ local file=/etc/pki/qemu/client-key.pem
+ '[' '!' -f /etc/pki/qemu/client-key.pem ']'
+ wait_for_file /etc/pki/libvirt-vnc/ca-cert.pem
+ local file=/etc/pki/libvirt-vnc/ca-cert.pem
+ '[' '!' -f /etc/pki/libvirt-vnc/ca-cert.pem ']'
+ wait_for_file /etc/pki/libvirt-vnc/server-cert.pem
+ local file=/etc/pki/libvirt-vnc/server-cert.pem
+ '[' '!' -f /etc/pki/libvirt-vnc/server-cert.pem ']'
+ wait_for_file /etc/pki/libvirt-vnc/server-key.pem
+ local file=/etc/pki/libvirt-vnc/server-key.pem
+ '[' '!' -f /etc/pki/libvirt-vnc/server-key.pem ']'
++ grep -w libvirtd
++ cat /proc/1/comm /proc/10/comm /proc/100/comm /proc/101063/comm /proc/10178/comm /proc/102/comm /proc/103/comm /proc/103476/comm /proc/103499/comm /proc/103912/comm /proc/103925/comm /proc/103926/comm /proc/104/comm /proc/105/comm /proc/106/comm /proc/107162/comm /proc/107187/comm /proc/107281/comm /proc/107306/comm /proc/107541/comm /proc/107639/comm /proc/107641/comm /proc/108/comm /proc/108972/comm /proc/109/comm /proc/109128/comm /proc/109152/comm /proc/10937/comm /proc/109373/comm /proc/10938/comm /proc/109389/comm /proc/109395/comm /proc/109456/comm /proc/109457/comm /proc/109467/comm /proc/109670/comm /proc/11/comm /proc/110/comm /proc/110894/comm /proc/110923/comm /proc/110955/comm /proc/110991/comm /proc/111/comm /proc/112/comm /proc/113/comm /proc/113815/comm /proc/114/comm /proc/114995/comm /proc/115/comm /proc/116/comm /proc/117/comm /proc/117455/comm /proc/118578/comm /proc/1189/comm /proc/118963/comm /proc/119439/comm /proc/12/comm /proc/120550/comm /proc/121000/comm /proc/121013/comm /proc/121014/comm /proc/122594/comm /proc/12373/comm /proc/124001/comm /proc/124034/comm /proc/124038/comm /proc/12404/comm /proc/124065/comm /proc/12442/comm /proc/124665/comm /proc/12484/comm /proc/12496/comm /proc/125098/comm /proc/125271/comm /proc/126604/comm /proc/126629/comm /proc/12734/comm /proc/12765/comm /proc/12766/comm /proc/127948/comm /proc/12821/comm /proc/12846/comm /proc/12865/comm /proc/1294/comm /proc/1295/comm /proc/1296/comm /proc/1297/comm /proc/13/comm /proc/130481/comm /proc/132028/comm /proc/132058/comm /proc/132059/comm /proc/134715/comm /proc/134980/comm /proc/134981/comm /proc/1389/comm /proc/1393/comm /proc/14/comm /proc/142010/comm /proc/142011/comm /proc/142013/comm /proc/142014/comm /proc/142016/comm /proc/142218/comm /proc/142227/comm /proc/142813/comm /proc/142836/comm /proc/143208/comm /proc/143248/comm /proc/143261/comm /proc/143296/comm /proc/143297/comm /proc/143298/comm /proc/143299/comm /proc/143302/comm /proc/144568/comm /proc/144600/comm /proc/1460/comm /proc/1464/comm /proc/1473/comm /proc/15/comm /proc/150017/comm /proc/153006/comm /proc/153136/comm /proc/156825/comm /proc/157265/comm /proc/157316/comm /proc/157472/comm /proc/157496/comm /proc/157683/comm /proc/157700/comm /proc/157706/comm /proc/157791/comm /proc/157792/comm /proc/157802/comm /proc/157976/comm /proc/159528/comm /proc/159566/comm /proc/159652/comm /proc/159716/comm /proc/159743/comm /proc/159824/comm /proc/159860/comm /proc/159907/comm /proc/159955/comm /proc/16/comm /proc/160000/comm /proc/160031/comm /proc/160038/comm /proc/160216/comm /proc/160249/comm /proc/160533/comm /proc/160561/comm /proc/160807/comm /proc/161024/comm /proc/165442/comm /proc/165918/comm /proc/166/comm /proc/166233/comm /proc/167/comm /proc/167223/comm /proc/167502/comm /proc/168/comm /proc/168395/comm /proc/168485/comm /proc/168516/comm /proc/168575/comm /proc/169/comm /proc/170/comm /proc/170192/comm /proc/170193/comm /proc/170200/comm /proc/170203/comm /proc/170225/comm /proc/170630/comm /proc/170643/comm /proc/170644/comm /proc/170757/comm /proc/170820/comm /proc/170833/comm /proc/170834/comm /proc/171/comm /proc/171553/comm /proc/171620/comm /proc/171693/comm /proc/171694/comm /proc/171695/comm /proc/171982/comm /proc/171983/comm /proc/172/comm /proc/172011/comm /proc/172013/comm /proc/172446/comm /proc/172625/comm /proc/172648/comm /proc/172872/comm /proc/172888/comm /proc/172894/comm /proc/172959/comm /proc/172960/comm /proc/172970/comm /proc/173/comm /proc/173063/comm /proc/174/comm /proc/174352/comm /proc/174410/comm /proc/174429/comm /proc/174469/comm /proc/174520/comm /proc/174551/comm /proc/174569/comm /proc/174626/comm /proc/174818/comm /proc/174861/comm /proc/174909/comm /proc/175/comm /proc/175006/comm /proc/175008/comm /proc/175051/comm /proc/175638/comm /proc/175651/comm /proc/176/comm /proc/178/comm /proc/178461/comm /proc/179/comm /proc/179108/comm /proc/18/comm /proc/180285/comm /proc/181477/comm /proc/181483/comm /proc/181693/comm /proc/182/comm /proc/182903/comm /proc/182904/comm /proc/183004/comm /proc/183259/comm /proc/183260/comm /proc/183262/comm /proc/183529/comm /proc/183541/comm /proc/183569/comm /proc/183570/comm /proc/183598/comm /proc/183613/comm /proc/183614/comm /proc/183880/comm /proc/183883/comm /proc/183887/comm /proc/184/comm /proc/184473/comm /proc/184938/comm /proc/185/comm /proc/185120/comm /proc/185382/comm /proc/186/comm /proc/186135/comm /proc/186156/comm /proc/186329/comm /proc/186332/comm /proc/186334/comm /proc/186385/comm /proc/186622/comm /proc/186638/comm /proc/186983/comm /proc/187/comm /proc/187166/comm /proc/187193/comm /proc/187194/comm /proc/187195/comm /proc/187196/comm /proc/187197/comm /proc/187198/comm /proc/187299/comm /proc/187740/comm /proc/187783/comm /proc/187831/comm /proc/187856/comm /proc/187897/comm /proc/187955/comm /proc/187981/comm /proc/188/comm /proc/188123/comm /proc/188124/comm /proc/188244/comm /proc/188262/comm /proc/188268/comm /proc/188330/comm /proc/188331/comm /proc/188339/comm /proc/188340/comm /proc/188343/comm /proc/188346/comm /proc/188348/comm /proc/188353/comm /proc/188354/comm /proc/188356/comm /proc/188365/comm /proc/188369/comm /proc/188392/comm /proc/188393/comm /proc/188394/comm /proc/189/comm /proc/19/comm /proc/190/comm /proc/191/comm /proc/192/comm /proc/193/comm /proc/194/comm /proc/197/comm /proc/19753/comm /proc/19771/comm /proc/19793/comm /proc/19820/comm /proc/19837/comm /proc/2/comm /proc/20/comm /proc/200/comm /proc/21/comm /proc/210/comm /proc/21659/comm /proc/21668/comm /proc/21669/comm /proc/21685/comm /proc/217/comm /proc/22/comm /proc/220/comm /proc/221/comm /proc/226/comm /proc/24/comm /proc/24433/comm /proc/24692/comm /proc/248/comm /proc/24967/comm /proc/24984/comm /proc/25/comm /proc/25007/comm /proc/25020/comm /proc/26/comm /proc/27/comm /proc/28/comm /proc/285/comm /proc/290/comm /proc/292/comm /proc/29418/comm /proc/29686/comm /proc/29703/comm /proc/29728/comm /proc/29743/comm /proc/3/comm /proc/30/comm /proc/31/comm /proc/311/comm /proc/312/comm /proc/316/comm /proc/32/comm /proc/325/comm /proc/33/comm /proc/34/comm /proc/34188/comm /proc/344/comm /proc/34472/comm /proc/34489/comm /proc/34514/comm /proc/34526/comm /proc/35030/comm /proc/352/comm /proc/353/comm /proc/36/comm /proc/360/comm /proc/36089/comm /proc/36091/comm /proc/367/comm /proc/37/comm /proc/38/comm /proc/380/comm /proc/39/comm /proc/390/comm /proc/396/comm /proc/39865/comm /proc/39875/comm /proc/399/comm /proc/39911/comm /proc/39915/comm /proc/39954/comm /proc/39960/comm /proc/39979/comm /proc/4/comm /proc/40/comm /proc/40007/comm /proc/40024/comm /proc/40038/comm /proc/40104/comm /proc/40124/comm /proc/40147/comm /proc/40160/comm /proc/40263/comm /proc/403/comm /proc/40322/comm /proc/40426/comm /proc/40451/comm /proc/40478/comm /proc/41217/comm /proc/41227/comm /proc/41263/comm /proc/41275/comm /proc/41493/comm /proc/41717/comm /proc/42/comm /proc/42106/comm /proc/42573/comm /proc/42596/comm /proc/42638/comm /proc/42962/comm /proc/42985/comm /proc/43/comm /proc/43006/comm /proc/43030/comm /proc/43049/comm /proc/43103/comm /proc/43432/comm /proc/43456/comm /proc/43617/comm /proc/43738/comm /proc/43916/comm /proc/43939/comm /proc/43954/comm /proc/43985/comm /proc/44/comm /proc/44003/comm /proc/44029/comm /proc/44143/comm /proc/44188/comm /proc/44234/comm /proc/45/comm /proc/454/comm /proc/456/comm /proc/46/comm /proc/46190/comm /proc/46224/comm /proc/46292/comm /proc/46319/comm /proc/46396/comm /proc/46420/comm /proc/46637/comm /proc/46650/comm /proc/46699/comm /proc/46775/comm /proc/47127/comm /proc/47150/comm /proc/47228/comm /proc/47253/comm /proc/47297/comm /proc/47422/comm /proc/47594/comm /proc/47618/comm /proc/47739/comm /proc/48/comm /proc/48100/comm /proc/48136/comm /proc/48408/comm /proc/48497/comm /proc/48520/comm /proc/48618/comm /proc/48673/comm /proc/48770/comm /proc/48799/comm /proc/48865/comm /proc/48914/comm /proc/49/comm /proc/5/comm /proc/50/comm /proc/50716/comm /proc/50738/comm /proc/50814/comm /proc/50838/comm /proc/50878/comm /proc/50990/comm /proc/51/comm /proc/51181/comm /proc/51260/comm /proc/51351/comm /proc/52/comm /proc/524/comm /proc/54/comm /proc/55/comm /proc/55107/comm /proc/55130/comm /proc/55767/comm /proc/55790/comm /proc/55839/comm /proc/55861/comm /proc/55876/comm /proc/55909/comm /proc/56/comm /proc/56046/comm /proc/56071/comm /proc/56110/comm /proc/56148/comm /proc/56185/comm /proc/56296/comm /proc/57/comm /proc/58/comm /proc/59698/comm /proc/59765/comm /proc/59828/comm /proc/59879/comm /proc/59980/comm /proc/6/comm /proc/60/comm /proc/60008/comm /proc/60038/comm /proc/60061/comm /proc/60076/comm /proc/60100/comm /proc/60443/comm /proc/60906/comm /proc/60933/comm /proc/60998/comm /proc/61/comm /proc/61208/comm /proc/61209/comm /proc/61284/comm /proc/61285/comm /proc/61289/comm /proc/61333/comm /proc/61434/comm /proc/61456/comm /proc/61557/comm /proc/61581/comm /proc/617/comm /proc/61838/comm /proc/61866/comm /proc/61906/comm /proc/61931/comm /proc/61945/comm /proc/61969/comm /proc/62/comm /proc/621/comm /proc/623/comm /proc/62455/comm /proc/62508/comm /proc/62531/comm /proc/626/comm /proc/62910/comm /proc/62934/comm /proc/63/comm /proc/630/comm /proc/63065/comm /proc/63087/comm /proc/63088/comm /proc/63089/comm /proc/63090/comm /proc/63091/comm /proc/63255/comm /proc/63279/comm /proc/63368/comm /proc/63391/comm /proc/63528/comm /proc/63640/comm /proc/64/comm /proc/64000/comm /proc/64051/comm /proc/64149/comm /proc/64171/comm /proc/64232/comm /proc/64233/comm /proc/64277/comm /proc/64308/comm /proc/64345/comm /proc/64364/comm /proc/64538/comm /proc/64574/comm /proc/64625/comm /proc/64676/comm /proc/648/comm /proc/64936/comm /proc/650/comm /proc/65048/comm /proc/65218/comm /proc/65246/comm /proc/65290/comm /proc/65368/comm /proc/65387/comm /proc/65636/comm /proc/65658/comm /proc/65983/comm /proc/66/comm /proc/66000/comm /proc/66006/comm /proc/66133/comm /proc/66134/comm /proc/66144/comm /proc/66199/comm /proc/67/comm /proc/67901/comm /proc/67926/comm /proc/68/comm /proc/69/comm /proc/70/comm /proc/703/comm /proc/706/comm /proc/707/comm /proc/71118/comm /proc/71159/comm /proc/71160/comm /proc/71161/comm /proc/71162/comm /proc/71163/comm /proc/71166/comm /proc/71167/comm /proc/71169/comm /proc/71170/comm /proc/71173/comm /proc/71175/comm /proc/71176/comm /proc/71177/comm /proc/71178/comm /proc/72/comm /proc/720/comm /proc/73/comm /proc/74/comm /proc/75/comm /proc/76/comm /proc/77325/comm /proc/77365/comm /proc/77468/comm /proc/77485/comm /proc/77491/comm /proc/77549/comm /proc/77550/comm /proc/77560/comm /proc/77648/comm /proc/78/comm /proc/78774/comm /proc/78798/comm /proc/79/comm /proc/8/comm /proc/80/comm /proc/80047/comm /proc/80048/comm /proc/80767/comm /proc/81/comm /proc/81814/comm /proc/82/comm /proc/84/comm /proc/84029/comm /proc/84059/comm /proc/84743/comm /proc/84766/comm /proc/85/comm /proc/85560/comm /proc/86/comm /proc/865/comm /proc/87/comm /proc/88/comm /proc/88414/comm /proc/88415/comm /proc/9/comm /proc/90/comm /proc/90659/comm /proc/90683/comm /proc/9069/comm /proc/9086/comm /proc/90866/comm /proc/90884/comm /proc/90890/comm /proc/91/comm /proc/9102/comm /proc/91076/comm /proc/91077/comm /proc/91087/comm /proc/91249/comm /proc/9186/comm /proc/92/comm /proc/93/comm /proc/94/comm /proc/95115/comm /proc/95138/comm /proc/95159/comm /proc/95195/comm /proc/95501/comm /proc/95565/comm /proc/96/comm /proc/96287/comm /proc/97/comm /proc/97106/comm /proc/97108/comm /proc/97186/comm /proc/97819/comm /proc/98/comm /proc/9803/comm /proc/98612/comm /proc/99/comm /proc/self/comm /proc/thread-self/comm
+ '[' -n '' ']'
+ rm -f /var/run/libvirtd.pid
+ [[ -c /dev/kvm ]]
+ chmod 660 /dev/kvm
+ chown root:kvm /dev/kvm
+ CGROUPS=
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/blkio ']'
+ grep -w blkio /sys/fs/cgroup/cgroup.controllers
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/cpu ']'
+ grep -w cpu /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=cpu,
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/devices ']'
+ grep -w devices /sys/fs/cgroup/cgroup.controllers
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/freezer ']'
+ grep -w freezer /sys/fs/cgroup/cgroup.controllers
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/hugetlb ']'
+ grep -w hugetlb /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=hugetlb,
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/memory ']'
+ grep -w memory /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=memory,
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/net_cls ']'
+ grep -w net_cls /sys/fs/cgroup/cgroup.controllers
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/perf_event ']'
+ grep -w perf_event /sys/fs/cgroup/cgroup.controllers
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/rdma ']'
+ grep -w rdma /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=rdma,
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/misc ']'
+ grep -w misc /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=misc,
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/pids ']'
+ grep -w pids /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=pids,
+ cgcreate -g cpu,hugetlb,memory,rdma,misc,pids:/osh-libvirt
++ cat /proc/meminfo
++ grep HugePages_Total
++ tr -cd '[:digit:]'
+ hp_count=0
+ '[' 00 -gt 0 ']'
+ '[' -n 457eb676-33da-42ec-9a8c-9293d545c337 ']'
+ cgexec -g cpu,hugetlb,memory,rdma,misc,pids:/osh-libvirt systemd-run --scope --slice=system libvirtd --listen
++ mktemp --suffix .xml
+ tmpsecret=/tmp/tmp.Xosw46l9el.xml
+ '[' -n '' ']'
+ trap cleanup EXIT
+ TIMEOUT=60
+ [[ ! -f /var/run/libvirtd.pid ]]
+ [[ 60 -gt 0 ]]
+ let TIMEOUT-=1
+ sleep 1
Running as unit: run-rba62254fad224ec4a20a29b6bd682720.scope; invocation ID: 71e7605fe6934238bddc530784e9d78b
+ [[ ! -f /var/run/libvirtd.pid ]]
+ TIMEOUT=10
+ [[ ! -e /var/run/libvirt/libvirt-sock ]]
+ '[' -z '' ']'
+ '[' -n cinder ']'
++ awk '/key/{print $3}' /etc/ceph/ceph.client.cinder.keyring
+ CEPH_CINDER_KEYRING=AQDam/ppXqLxBhAABVtTy2DwnuKkwzgCtQlZ1Q==
+ '[' -n cinder ']'
+ create_virsh_libvirt_secret cinder 457eb676-33da-42ec-9a8c-9293d545c337 AQDam/ppXqLxBhAABVtTy2DwnuKkwzgCtQlZ1Q==
+ sec_user=cinder
+ sec_uuid=457eb676-33da-42ec-9a8c-9293d545c337
+ sec_ceph_keyring=AQDam/ppXqLxBhAABVtTy2DwnuKkwzgCtQlZ1Q==
+ cat
+ virsh secret-define --file /tmp/tmp.Xosw46l9el.xml
Secret 457eb676-33da-42ec-9a8c-9293d545c337 created

+ virsh secret-set-value --secret 457eb676-33da-42ec-9a8c-9293d545c337 --base64 AQDam/ppXqLxBhAABVtTy2DwnuKkwzgCtQlZ1Q==
error: Passing secret value as command-line argument is insecure!
Secret value set

+ '[' -n '' ']'
+ '[' -n '' ']'
+ cleanup
+ rm -f /tmp/tmp.Xosw46l9el.xml
+ '[' -n '' ']'
++ cat /var/run/libvirtd.pid
+ LIBVIRTD_PID=188436
+ kill 188436
+ tail --pid=188436 -f /dev/null
+ cgexec -g cpu,hugetlb,memory,rdma,misc,pids:/osh-libvirt systemd-run --scope --slice=system libvirtd --listen
Running as unit: run-rb755b7cb26a046bea5af8d15f4a790ef.scope; invocation ID: 8d0cfad0e0f5464f9c9f7f4ca976ed9f