+ wait_for_file /etc/pki/CA/cacert.pem
+ local file=/etc/pki/CA/cacert.pem
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ sleep 1
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ sleep 1
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ sleep 1
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ sleep 1
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ sleep 1
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ wait_for_file /etc/pki/qemu/ca-cert.pem
+ local file=/etc/pki/qemu/ca-cert.pem
+ '[' '!' -f /etc/pki/qemu/ca-cert.pem ']'
+ wait_for_file /etc/pki/libvirt/servercert.pem
+ local file=/etc/pki/libvirt/servercert.pem
+ '[' '!' -f /etc/pki/libvirt/servercert.pem ']'
+ wait_for_file /etc/pki/libvirt/clientcert.pem
+ local file=/etc/pki/libvirt/clientcert.pem
+ '[' '!' -f /etc/pki/libvirt/clientcert.pem ']'
+ wait_for_file /etc/pki/qemu/server-cert.pem
+ local file=/etc/pki/qemu/server-cert.pem
+ '[' '!' -f /etc/pki/qemu/server-cert.pem ']'
+ wait_for_file /etc/pki/qemu/client-cert.pem
+ local file=/etc/pki/qemu/client-cert.pem
+ '[' '!' -f /etc/pki/qemu/client-cert.pem ']'
+ wait_for_file /etc/pki/libvirt/private/serverkey.pem
+ local file=/etc/pki/libvirt/private/serverkey.pem
+ '[' '!' -f /etc/pki/libvirt/private/serverkey.pem ']'
+ wait_for_file /etc/pki/libvirt/private/clientkey.pem
+ local file=/etc/pki/libvirt/private/clientkey.pem
+ '[' '!' -f /etc/pki/libvirt/private/clientkey.pem ']'
+ wait_for_file /etc/pki/qemu/server-key.pem
+ local file=/etc/pki/qemu/server-key.pem
+ '[' '!' -f /etc/pki/qemu/server-key.pem ']'
+ wait_for_file /etc/pki/qemu/client-key.pem
+ local file=/etc/pki/qemu/client-key.pem
+ '[' '!' -f /etc/pki/qemu/client-key.pem ']'
+ wait_for_file /etc/pki/libvirt-vnc/ca-cert.pem
+ local file=/etc/pki/libvirt-vnc/ca-cert.pem
+ '[' '!' -f /etc/pki/libvirt-vnc/ca-cert.pem ']'
+ wait_for_file /etc/pki/libvirt-vnc/server-cert.pem
+ local file=/etc/pki/libvirt-vnc/server-cert.pem
+ '[' '!' -f /etc/pki/libvirt-vnc/server-cert.pem ']'
+ wait_for_file /etc/pki/libvirt-vnc/server-key.pem
+ local file=/etc/pki/libvirt-vnc/server-key.pem
+ '[' '!' -f /etc/pki/libvirt-vnc/server-key.pem ']'
++ grep -w libvirtd
++ cat /proc/1/comm /proc/10/comm /proc/100/comm /proc/100760/comm /proc/100763/comm /proc/102/comm /proc/103/comm /proc/10309/comm /proc/103216/comm /proc/104/comm /proc/104730/comm /proc/104754/comm /proc/105/comm /proc/105653/comm /proc/106/comm /proc/108/comm /proc/10816/comm /proc/10817/comm /proc/1086/comm /proc/109/comm /proc/109885/comm /proc/109909/comm /proc/11/comm /proc/110/comm /proc/110230/comm /proc/110322/comm /proc/110323/comm /proc/111/comm /proc/111397/comm /proc/111416/comm /proc/111436/comm /proc/111461/comm /proc/111933/comm /proc/112/comm /proc/112251/comm /proc/112253/comm /proc/112738/comm /proc/112873/comm /proc/112876/comm /proc/113/comm /proc/113135/comm /proc/113395/comm /proc/113421/comm /proc/113604/comm /proc/113620/comm /proc/113626/comm /proc/113673/comm /proc/113674/comm /proc/113684/comm /proc/113839/comm /proc/114/comm /proc/115/comm /proc/115177/comm /proc/115200/comm /proc/115262/comm /proc/115292/comm /proc/116/comm /proc/117/comm /proc/11745/comm /proc/117457/comm /proc/12/comm /proc/121407/comm /proc/12204/comm /proc/12236/comm /proc/122467/comm /proc/122468/comm /proc/122671/comm /proc/12276/comm /proc/12317/comm /proc/12330/comm /proc/123450/comm /proc/124546/comm /proc/124979/comm /proc/124991/comm /proc/124992/comm /proc/12568/comm /proc/12599/comm /proc/126388/comm /proc/12655/comm /proc/12681/comm /proc/12700/comm /proc/128163/comm /proc/128186/comm /proc/128208/comm /proc/128234/comm /proc/128861/comm /proc/129264/comm /proc/129430/comm /proc/13/comm /proc/130107/comm /proc/130164/comm /proc/130734/comm /proc/130775/comm /proc/14/comm /proc/1417/comm /proc/144865/comm /proc/146234/comm /proc/147050/comm /proc/147217/comm /proc/147974/comm /proc/147990/comm /proc/147991/comm /proc/149107/comm /proc/149108/comm /proc/15/comm /proc/1522/comm /proc/1523/comm /proc/1524/comm /proc/1525/comm /proc/1529/comm /proc/156213/comm /proc/156214/comm /proc/156218/comm /proc/156222/comm /proc/156346/comm /proc/156968/comm /proc/156993/comm /proc/157358/comm /proc/157434/comm /proc/157468/comm /proc/157481/comm /proc/157513/comm /proc/157514/comm /proc/157516/comm /proc/157517/comm /proc/158584/comm /proc/158607/comm /proc/158972/comm /proc/158996/comm /proc/159209/comm /proc/1596/comm /proc/159738/comm /proc/159924/comm /proc/159956/comm /proc/16/comm /proc/1600/comm /proc/160111/comm /proc/160165/comm /proc/160182/comm /proc/160188/comm /proc/160270/comm /proc/160271/comm /proc/160281/comm /proc/160473/comm /proc/1609/comm /proc/162023/comm /proc/162052/comm /proc/162176/comm /proc/162236/comm /proc/162265/comm /proc/162288/comm /proc/162316/comm /proc/162425/comm /proc/162450/comm /proc/162468/comm /proc/162495/comm /proc/162687/comm /proc/162712/comm /proc/162737/comm /proc/162986/comm /proc/163010/comm /proc/163437/comm /proc/16518/comm /proc/166/comm /proc/167/comm /proc/167419/comm /proc/168/comm /proc/168497/comm /proc/168596/comm /proc/169/comm /proc/169277/comm /proc/169385/comm /proc/169387/comm /proc/169393/comm /proc/169423/comm /proc/169777/comm /proc/170/comm /proc/170592/comm /proc/170757/comm /proc/170912/comm /proc/171/comm /proc/172/comm /proc/173/comm /proc/173098/comm /proc/173258/comm /proc/173259/comm /proc/173263/comm /proc/173620/comm /proc/173738/comm /proc/173739/comm /proc/173809/comm /proc/173822/comm /proc/173823/comm /proc/174/comm /proc/174559/comm /proc/174585/comm /proc/174935/comm /proc/174937/comm /proc/174941/comm /proc/174942/comm /proc/175/comm /proc/175473/comm /proc/175475/comm /proc/175608/comm /proc/175631/comm /proc/175806/comm /proc/175823/comm /proc/175829/comm /proc/175925/comm /proc/175926/comm /proc/175936/comm /proc/176/comm /proc/176014/comm /proc/177361/comm /proc/177374/comm /proc/177439/comm /proc/177462/comm /proc/177535/comm /proc/177543/comm /proc/177575/comm /proc/177617/comm /proc/177623/comm /proc/177656/comm /proc/177942/comm /proc/177994/comm /proc/178038/comm /proc/178088/comm /proc/178517/comm /proc/178531/comm /proc/178693/comm /proc/179/comm /proc/179031/comm /proc/18/comm /proc/180/comm /proc/182871/comm /proc/183/comm /proc/183525/comm /proc/183539/comm /proc/183540/comm /proc/183839/comm /proc/184947/comm /proc/185/comm /proc/185963/comm /proc/185966/comm /proc/187/comm /proc/18764/comm /proc/187764/comm /proc/187765/comm /proc/187766/comm /proc/18784/comm /proc/187962/comm /proc/187964/comm /proc/187996/comm /proc/187997/comm /proc/188/comm /proc/188009/comm /proc/188025/comm /proc/188026/comm /proc/18807/comm /proc/18833/comm /proc/188363/comm /proc/188366/comm /proc/188369/comm /proc/188413/comm /proc/18849/comm /proc/188760/comm /proc/189/comm /proc/189245/comm /proc/189789/comm /proc/19/comm /proc/190/comm /proc/190085/comm /proc/190356/comm /proc/190670/comm /proc/190690/comm /proc/190867/comm /proc/191/comm /proc/191102/comm /proc/191126/comm /proc/191139/comm /proc/191362/comm /proc/191405/comm /proc/191868/comm /proc/192/comm /proc/192362/comm /proc/192381/comm /proc/192402/comm /proc/192406/comm /proc/192409/comm /proc/192410/comm /proc/192412/comm /proc/192413/comm /proc/192423/comm /proc/192580/comm /proc/193/comm /proc/193008/comm /proc/193047/comm /proc/193073/comm /proc/193196/comm /proc/193247/comm /proc/193274/comm /proc/193465/comm /proc/193481/comm /proc/193489/comm /proc/193570/comm /proc/193578/comm /proc/193605/comm /proc/193608/comm /proc/193609/comm /proc/193610/comm /proc/193619/comm /proc/193620/comm /proc/193621/comm /proc/193623/comm /proc/194/comm /proc/195/comm /proc/196/comm /proc/2/comm /proc/20/comm /proc/21/comm /proc/216/comm /proc/21774/comm /proc/21842/comm /proc/21843/comm /proc/21864/comm /proc/219/comm /proc/22/comm /proc/220/comm /proc/225/comm /proc/24/comm /proc/247/comm /proc/25/comm /proc/25103/comm /proc/25381/comm /proc/25398/comm /proc/25423/comm /proc/25435/comm /proc/26/comm /proc/26200/comm /proc/264/comm /proc/27/comm /proc/28/comm /proc/282/comm /proc/284/comm /proc/285/comm /proc/29604/comm /proc/29868/comm /proc/29887/comm /proc/29911/comm /proc/29924/comm /proc/3/comm /proc/30/comm /proc/30689/comm /proc/308/comm /proc/309/comm /proc/31/comm /proc/313/comm /proc/314/comm /proc/32/comm /proc/33/comm /proc/34/comm /proc/340/comm /proc/34125/comm /proc/34406/comm /proc/34422/comm /proc/34446/comm /proc/34458/comm /proc/345/comm /proc/351/comm /proc/356/comm /proc/36/comm /proc/37/comm /proc/37629/comm /proc/37631/comm /proc/38/comm /proc/384/comm /proc/385/comm /proc/39/comm /proc/391/comm /proc/395/comm /proc/396/comm /proc/397/comm /proc/399/comm /proc/39992/comm /proc/4/comm /proc/40/comm /proc/40001/comm /proc/40037/comm /proc/40048/comm /proc/40076/comm /proc/40100/comm /proc/40121/comm /proc/40144/comm /proc/40165/comm /proc/40184/comm /proc/40224/comm /proc/40243/comm /proc/40279/comm /proc/40299/comm /proc/40401/comm /proc/40462/comm /proc/40622/comm /proc/40646/comm /proc/40677/comm /proc/41377/comm /proc/41403/comm /proc/41418/comm /proc/41449/comm /proc/41708/comm /proc/41872/comm /proc/42/comm /proc/42245/comm /proc/42690/comm /proc/42714/comm /proc/42748/comm /proc/43/comm /proc/43152/comm /proc/43183/comm /proc/43186/comm /proc/43214/comm /proc/43246/comm /proc/43265/comm /proc/43626/comm /proc/43649/comm /proc/43827/comm /proc/44/comm /proc/44235/comm /proc/44260/comm /proc/44275/comm /proc/44304/comm /proc/44326/comm /proc/44349/comm /proc/44422/comm /proc/44464/comm /proc/44508/comm /proc/45/comm /proc/453/comm /proc/46/comm /proc/46646/comm /proc/46673/comm /proc/46734/comm /proc/46758/comm /proc/46987/comm /proc/47002/comm /proc/47038/comm /proc/47156/comm /proc/47475/comm /proc/47500/comm /proc/47575/comm /proc/47599/comm /proc/47646/comm /proc/47916/comm /proc/47931/comm /proc/47959/comm /proc/48/comm /proc/48100/comm /proc/48333/comm /proc/48357/comm /proc/48756/comm /proc/48779/comm /proc/48838/comm /proc/48917/comm /proc/48976/comm /proc/49/comm /proc/49040/comm /proc/49133/comm /proc/49196/comm /proc/49301/comm /proc/5/comm /proc/50/comm /proc/50323/comm /proc/50902/comm /proc/51/comm /proc/51161/comm /proc/51186/comm /proc/51364/comm /proc/51386/comm /proc/51441/comm /proc/51564/comm /proc/517/comm /proc/51767/comm /proc/51872/comm /proc/52/comm /proc/54/comm /proc/55/comm /proc/55568/comm /proc/55593/comm /proc/56/comm /proc/56231/comm /proc/56257/comm /proc/56295/comm /proc/56319/comm /proc/56334/comm /proc/56359/comm /proc/56516/comm /proc/56541/comm /proc/56580/comm /proc/56614/comm /proc/56655/comm /proc/56815/comm /proc/57/comm /proc/58/comm /proc/6/comm /proc/60/comm /proc/60630/comm /proc/60700/comm /proc/60736/comm /proc/60815/comm /proc/60839/comm /proc/60855/comm /proc/60883/comm /proc/60898/comm /proc/60928/comm /proc/61/comm /proc/610/comm /proc/61210/comm /proc/614/comm /proc/616/comm /proc/61646/comm /proc/61683/comm /proc/61721/comm /proc/619/comm /proc/61938/comm /proc/61939/comm /proc/61944/comm /proc/61945/comm /proc/62/comm /proc/62091/comm /proc/622/comm /proc/62375/comm /proc/62400/comm /proc/62413/comm /proc/62438/comm /proc/62692/comm /proc/62717/comm /proc/62747/comm /proc/62775/comm /proc/62789/comm /proc/62816/comm /proc/63/comm /proc/63160/comm /proc/63186/comm /proc/63534/comm /proc/63642/comm /proc/63666/comm /proc/63720/comm /proc/639/comm /proc/64/comm /proc/642/comm /proc/64211/comm /proc/64235/comm /proc/64457/comm /proc/64474/comm /proc/64475/comm /proc/64476/comm /proc/64477/comm /proc/64478/comm /proc/64649/comm /proc/64674/comm /proc/64976/comm /proc/65030/comm /proc/65359/comm /proc/65385/comm /proc/65563/comm /proc/65598/comm /proc/65615/comm /proc/65677/comm /proc/65735/comm /proc/65782/comm /proc/66/comm /proc/66192/comm /proc/66291/comm /proc/66376/comm /proc/66588/comm /proc/66730/comm /proc/66867/comm /proc/66919/comm /proc/66948/comm /proc/66973/comm /proc/67/comm /proc/67003/comm /proc/67074/comm /proc/67094/comm /proc/67540/comm /proc/67557/comm /proc/67563/comm /proc/67678/comm /proc/67679/comm /proc/67689/comm /proc/67777/comm /proc/68/comm /proc/69/comm /proc/69129/comm /proc/69161/comm /proc/70/comm /proc/700/comm /proc/703/comm /proc/704/comm /proc/718/comm /proc/72/comm /proc/72798/comm /proc/72839/comm /proc/72840/comm /proc/72841/comm /proc/72842/comm /proc/72845/comm /proc/72846/comm /proc/72849/comm /proc/72852/comm /proc/72853/comm /proc/72854/comm /proc/72855/comm /proc/72856/comm /proc/72857/comm /proc/72858/comm /proc/73/comm /proc/74/comm /proc/75/comm /proc/76/comm /proc/78/comm /proc/78269/comm /proc/78423/comm /proc/78445/comm /proc/78623/comm /proc/78640/comm /proc/78646/comm /proc/78693/comm /proc/78694/comm /proc/78704/comm /proc/78836/comm /proc/79/comm /proc/8/comm /proc/80/comm /proc/80094/comm /proc/80118/comm /proc/81/comm /proc/81341/comm /proc/82/comm /proc/83640/comm /proc/83641/comm /proc/83642/comm /proc/84/comm /proc/85/comm /proc/85242/comm /proc/85254/comm /proc/85991/comm /proc/86/comm /proc/86015/comm /proc/863/comm /proc/87/comm /proc/87094/comm /proc/88/comm /proc/90/comm /proc/90232/comm /proc/91/comm /proc/92/comm /proc/9205/comm /proc/9222/comm /proc/9238/comm /proc/92685/comm /proc/92711/comm /proc/92955/comm /proc/92971/comm /proc/92977/comm /proc/93/comm /proc/93047/comm /proc/93048/comm /proc/93066/comm /proc/9322/comm /proc/93238/comm /proc/94/comm /proc/96/comm /proc/96539/comm /proc/96561/comm /proc/96605/comm /proc/96648/comm /proc/96989/comm /proc/97/comm /proc/97125/comm /proc/97810/comm /proc/98/comm /proc/99/comm /proc/9939/comm /proc/self/comm /proc/thread-self/comm
+ '[' -n '' ']'
+ rm -f /var/run/libvirtd.pid
+ [[ -c /dev/kvm ]]
+ chmod 660 /dev/kvm
+ chown root:kvm /dev/kvm
+ CGROUPS=
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/blkio ']'
+ grep -w blkio /sys/fs/cgroup/cgroup.controllers
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/cpu ']'
+ grep -w cpu /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=cpu,
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/devices ']'
+ grep -w devices /sys/fs/cgroup/cgroup.controllers
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/freezer ']'
+ grep -w freezer /sys/fs/cgroup/cgroup.controllers
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/hugetlb ']'
+ grep -w hugetlb /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=hugetlb,
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/memory ']'
+ grep -w memory /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=memory,
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/net_cls ']'
+ grep -w net_cls /sys/fs/cgroup/cgroup.controllers
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/perf_event ']'
+ grep -w perf_event /sys/fs/cgroup/cgroup.controllers
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/rdma ']'
+ grep -w rdma /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=rdma,
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/misc ']'
+ grep -w misc /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=misc,
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/pids ']'
+ grep -w pids /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=pids,
+ cgcreate -g cpu,hugetlb,memory,rdma,misc,pids:/osh-libvirt
++ cat /proc/meminfo
++ grep HugePages_Total
++ tr -cd '[:digit:]'
+ hp_count=0
+ '[' 00 -gt 0 ']'
+ '[' -n 457eb676-33da-42ec-9a8c-9293d545c337 ']'
+ cgexec -g cpu,hugetlb,memory,rdma,misc,pids:/osh-libvirt systemd-run --scope --slice=system libvirtd --listen
++ mktemp --suffix .xml
+ tmpsecret=/tmp/tmp.xSZLDg5X5K.xml
+ '[' -n '' ']'
+ trap cleanup EXIT
+ TIMEOUT=60
+ [[ ! -f /var/run/libvirtd.pid ]]
+ [[ 60 -gt 0 ]]
+ let TIMEOUT-=1
+ sleep 1
Running as unit: run-r4ab75074b8d94f25ae163f0ee0bba5e5.scope; invocation ID: d4f366b3342544a0b9e8a79d90191cbd
+ [[ ! -f /var/run/libvirtd.pid ]]
+ TIMEOUT=10
+ [[ ! -e /var/run/libvirt/libvirt-sock ]]
+ '[' -z '' ']'
+ '[' -n cinder ']'
++ awk '/key/{print $3}' /etc/ceph/ceph.client.cinder.keyring
+ CEPH_CINDER_KEYRING=AQDpcx9q5Na9GxAAkZZw0gm/6EwpDTFJubtv/g==
+ '[' -n cinder ']'
+ create_virsh_libvirt_secret cinder 457eb676-33da-42ec-9a8c-9293d545c337 AQDpcx9q5Na9GxAAkZZw0gm/6EwpDTFJubtv/g==
+ sec_user=cinder
+ sec_uuid=457eb676-33da-42ec-9a8c-9293d545c337
+ sec_ceph_keyring=AQDpcx9q5Na9GxAAkZZw0gm/6EwpDTFJubtv/g==
+ cat
+ virsh secret-define --file /tmp/tmp.xSZLDg5X5K.xml
Secret 457eb676-33da-42ec-9a8c-9293d545c337 created

+ virsh secret-set-value --secret 457eb676-33da-42ec-9a8c-9293d545c337 --base64 AQDpcx9q5Na9GxAAkZZw0gm/6EwpDTFJubtv/g==
error: Passing secret value as command-line argument is insecure!
Secret value set

+ '[' -n '' ']'
+ '[' -n '' ']'
+ cleanup
+ rm -f /tmp/tmp.xSZLDg5X5K.xml
+ '[' -n '' ']'
++ cat /var/run/libvirtd.pid
+ LIBVIRTD_PID=193690
+ kill 193690
+ tail --pid=193690 -f /dev/null
+ cgexec -g cpu,hugetlb,memory,rdma,misc,pids:/osh-libvirt systemd-run --scope --slice=system libvirtd --listen
Running as unit: run-r0de24d8b57744bbf956f7e39dfc6cd27.scope; invocation ID: b9e84e105ac04cfc93676de57159e948