+ wait_for_file /etc/pki/CA/cacert.pem
+ local file=/etc/pki/CA/cacert.pem
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ sleep 1
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ sleep 1
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ sleep 1
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ sleep 1
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ sleep 1
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ wait_for_file /etc/pki/qemu/ca-cert.pem
+ local file=/etc/pki/qemu/ca-cert.pem
+ '[' '!' -f /etc/pki/qemu/ca-cert.pem ']'
+ wait_for_file /etc/pki/libvirt/servercert.pem
+ local file=/etc/pki/libvirt/servercert.pem
+ '[' '!' -f /etc/pki/libvirt/servercert.pem ']'
+ wait_for_file /etc/pki/libvirt/clientcert.pem
+ local file=/etc/pki/libvirt/clientcert.pem
+ '[' '!' -f /etc/pki/libvirt/clientcert.pem ']'
+ wait_for_file /etc/pki/qemu/server-cert.pem
+ local file=/etc/pki/qemu/server-cert.pem
+ '[' '!' -f /etc/pki/qemu/server-cert.pem ']'
+ wait_for_file /etc/pki/qemu/client-cert.pem
+ local file=/etc/pki/qemu/client-cert.pem
+ '[' '!' -f /etc/pki/qemu/client-cert.pem ']'
+ wait_for_file /etc/pki/libvirt/private/serverkey.pem
+ local file=/etc/pki/libvirt/private/serverkey.pem
+ '[' '!' -f /etc/pki/libvirt/private/serverkey.pem ']'
+ wait_for_file /etc/pki/libvirt/private/clientkey.pem
+ local file=/etc/pki/libvirt/private/clientkey.pem
+ '[' '!' -f /etc/pki/libvirt/private/clientkey.pem ']'
+ wait_for_file /etc/pki/qemu/server-key.pem
+ local file=/etc/pki/qemu/server-key.pem
+ '[' '!' -f /etc/pki/qemu/server-key.pem ']'
+ wait_for_file /etc/pki/qemu/client-key.pem
+ local file=/etc/pki/qemu/client-key.pem
+ '[' '!' -f /etc/pki/qemu/client-key.pem ']'
+ wait_for_file /etc/pki/libvirt-vnc/ca-cert.pem
+ local file=/etc/pki/libvirt-vnc/ca-cert.pem
+ '[' '!' -f /etc/pki/libvirt-vnc/ca-cert.pem ']'
+ wait_for_file /etc/pki/libvirt-vnc/server-cert.pem
+ local file=/etc/pki/libvirt-vnc/server-cert.pem
+ '[' '!' -f /etc/pki/libvirt-vnc/server-cert.pem ']'
+ wait_for_file /etc/pki/libvirt-vnc/server-key.pem
+ local file=/etc/pki/libvirt-vnc/server-key.pem
+ '[' '!' -f /etc/pki/libvirt-vnc/server-key.pem ']'
++ grep -w libvirtd
++ cat /proc/1/comm /proc/10/comm /proc/100/comm /proc/102/comm /proc/103/comm /proc/10317/comm /proc/103201/comm /proc/104/comm /proc/105/comm /proc/106/comm /proc/108/comm /proc/10829/comm /proc/10830/comm /proc/109/comm /proc/1095/comm /proc/109879/comm /proc/109902/comm /proc/11/comm /proc/110/comm /proc/110223/comm /proc/110246/comm /proc/110247/comm /proc/111/comm /proc/111259/comm /proc/111435/comm /proc/111460/comm /proc/111480/comm /proc/111503/comm /proc/111902/comm /proc/111921/comm /proc/111954/comm /proc/112/comm /proc/112085/comm /proc/112087/comm /proc/112950/comm /proc/113/comm /proc/113475/comm /proc/113502/comm /proc/113619/comm /proc/113635/comm /proc/113641/comm /proc/113693/comm /proc/113694/comm /proc/113704/comm /proc/113912/comm /proc/114/comm /proc/115/comm /proc/115262/comm /proc/115288/comm /proc/115503/comm /proc/115528/comm /proc/115902/comm /proc/116/comm /proc/117/comm /proc/117227/comm /proc/117268/comm /proc/117872/comm /proc/12/comm /proc/120252/comm /proc/121584/comm /proc/121635/comm /proc/121711/comm /proc/12214/comm /proc/12246/comm /proc/122740/comm /proc/12283/comm /proc/12325/comm /proc/12338/comm /proc/123594/comm /proc/125235/comm /proc/125250/comm /proc/125251/comm /proc/12576/comm /proc/12597/comm /proc/12628/comm /proc/12679/comm /proc/126840/comm /proc/12697/comm /proc/128315/comm /proc/128339/comm /proc/128348/comm /proc/128376/comm /proc/128604/comm /proc/129043/comm /proc/129432/comm /proc/129678/comm /proc/13/comm /proc/130362/comm /proc/131050/comm /proc/131073/comm /proc/131623/comm /proc/131897/comm /proc/14/comm /proc/1426/comm /proc/146377/comm /proc/146678/comm /proc/147608/comm /proc/147609/comm /proc/148181/comm /proc/148206/comm /proc/148207/comm /proc/149699/comm /proc/149700/comm /proc/15/comm /proc/1531/comm /proc/1532/comm /proc/1533/comm /proc/1534/comm /proc/1538/comm /proc/156694/comm /proc/156695/comm /proc/156697/comm /proc/156698/comm /proc/156975/comm /proc/157744/comm /proc/157768/comm /proc/158058/comm /proc/158101/comm /proc/158134/comm /proc/158147/comm /proc/158180/comm /proc/158181/comm /proc/158182/comm /proc/158183/comm /proc/158728/comm /proc/158751/comm /proc/159575/comm /proc/159576/comm /proc/159842/comm /proc/159877/comm /proc/159915/comm /proc/159948/comm /proc/159984/comm /proc/159985/comm /proc/159986/comm /proc/159997/comm /proc/16/comm /proc/160089/comm /proc/160110/comm /proc/160149/comm /proc/160169/comm /proc/160235/comm /proc/160249/comm /proc/1605/comm /proc/160508/comm /proc/160537/comm /proc/160588/comm /proc/160620/comm /proc/160818/comm /proc/1609/comm /proc/161001/comm /proc/161008/comm /proc/161768/comm /proc/161791/comm /proc/1618/comm /proc/161881/comm /proc/161898/comm /proc/161904/comm /proc/162036/comm /proc/162037/comm /proc/162047/comm /proc/162164/comm /proc/163917/comm /proc/163974/comm /proc/164140/comm /proc/164208/comm /proc/164260/comm /proc/164307/comm /proc/164335/comm /proc/164459/comm /proc/164485/comm /proc/164521/comm /proc/164573/comm /proc/164582/comm /proc/164661/comm /proc/164750/comm /proc/164889/comm /proc/164913/comm /proc/167/comm /proc/168/comm /proc/169/comm /proc/169564/comm /proc/169854/comm /proc/169918/comm /proc/170/comm /proc/170732/comm /proc/170802/comm /proc/170805/comm /proc/171/comm /proc/172/comm /proc/172093/comm /proc/172098/comm /proc/173/comm /proc/173165/comm /proc/173410/comm /proc/173415/comm /proc/173416/comm /proc/174/comm /proc/174986/comm /proc/175/comm /proc/175615/comm /proc/175648/comm /proc/175656/comm /proc/175657/comm /proc/175664/comm /proc/175665/comm /proc/176/comm /proc/176111/comm /proc/176154/comm /proc/176509/comm /proc/176544/comm /proc/176545/comm /proc/176562/comm /proc/176664/comm /proc/176667/comm /proc/176765/comm /proc/176767/comm /proc/177/comm /proc/177072/comm /proc/177500/comm /proc/177523/comm /proc/177639/comm /proc/177658/comm /proc/177664/comm /proc/177732/comm /proc/177733/comm /proc/177744/comm /proc/178070/comm /proc/178616/comm /proc/179/comm /proc/179365/comm /proc/179389/comm /proc/179451/comm /proc/179452/comm /proc/179497/comm /proc/179546/comm /proc/179611/comm /proc/179658/comm /proc/179723/comm /proc/179774/comm /proc/179797/comm /proc/179888/comm /proc/179915/comm /proc/18/comm /proc/180/comm /proc/180428/comm /proc/180441/comm /proc/180502/comm /proc/180525/comm /proc/182/comm /proc/183431/comm /proc/183436/comm /proc/183440/comm /proc/183902/comm /proc/184/comm /proc/184116/comm /proc/184148/comm /proc/184152/comm /proc/184153/comm /proc/185/comm /proc/185846/comm /proc/185869/comm /proc/186/comm /proc/186405/comm /proc/186440/comm /proc/186540/comm /proc/186556/comm /proc/186641/comm /proc/186652/comm /proc/187/comm /proc/187324/comm /proc/187334/comm /proc/18758/comm /proc/18776/comm /proc/188/comm /proc/18802/comm /proc/18830/comm /proc/18846/comm /proc/189/comm /proc/189080/comm /proc/189315/comm /proc/189316/comm /proc/189318/comm /proc/189412/comm /proc/189684/comm /proc/189715/comm /proc/189716/comm /proc/189729/comm /proc/189741/comm /proc/189742/comm /proc/19/comm /proc/190/comm /proc/190230/comm /proc/190792/comm /proc/191/comm /proc/191192/comm /proc/191320/comm /proc/191367/comm /proc/191393/comm /proc/191600/comm /proc/191602/comm /proc/191609/comm /proc/191611/comm /proc/191690/comm /proc/191706/comm /proc/191707/comm /proc/191708/comm /proc/192/comm /proc/193/comm /proc/194/comm /proc/197/comm /proc/2/comm /proc/20/comm /proc/209/comm /proc/21/comm /proc/217/comm /proc/21797/comm /proc/21867/comm /proc/21868/comm /proc/21881/comm /proc/22/comm /proc/220/comm /proc/221/comm /proc/226/comm /proc/24/comm /proc/248/comm /proc/25/comm /proc/25120/comm /proc/25381/comm /proc/25399/comm /proc/25425/comm /proc/25438/comm /proc/26/comm /proc/269/comm /proc/27/comm /proc/28/comm /proc/290/comm /proc/293/comm /proc/294/comm /proc/295/comm /proc/296/comm /proc/297/comm /proc/29701/comm /proc/29980/comm /proc/29998/comm /proc/3/comm /proc/30/comm /proc/30024/comm /proc/30036/comm /proc/31/comm /proc/316/comm /proc/317/comm /proc/32/comm /proc/33/comm /proc/34/comm /proc/34529/comm /proc/34809/comm /proc/34826/comm /proc/34852/comm /proc/34864/comm /proc/354/comm /proc/36/comm /proc/361/comm /proc/369/comm /proc/37/comm /proc/37560/comm /proc/38/comm /proc/38053/comm /proc/38055/comm /proc/381/comm /proc/39/comm /proc/396/comm /proc/4/comm /proc/40/comm /proc/400/comm /proc/40399/comm /proc/40431/comm /proc/40435/comm /proc/40453/comm /proc/40471/comm /proc/40489/comm /proc/40529/comm /proc/40530/comm /proc/40559/comm /proc/40573/comm /proc/40632/comm /proc/40650/comm /proc/40676/comm /proc/40699/comm /proc/40800/comm /proc/40859/comm /proc/41001/comm /proc/41023/comm /proc/41049/comm /proc/41732/comm /proc/41750/comm /proc/41785/comm /proc/41793/comm /proc/42/comm /proc/42050/comm /proc/42255/comm /proc/42629/comm /proc/43/comm /proc/43078/comm /proc/43101/comm /proc/43130/comm /proc/43483/comm /proc/43508/comm /proc/43524/comm /proc/43547/comm /proc/43579/comm /proc/43610/comm /proc/43950/comm /proc/43974/comm /proc/44/comm /proc/44187/comm /proc/44434/comm /proc/44461/comm /proc/44496/comm /proc/44519/comm /proc/44535/comm /proc/44559/comm /proc/44673/comm /proc/44719/comm /proc/44772/comm /proc/45/comm /proc/454/comm /proc/455/comm /proc/46/comm /proc/46834/comm /proc/46870/comm /proc/46959/comm /proc/46982/comm /proc/47160/comm /proc/47174/comm /proc/47186/comm /proc/47269/comm /proc/47335/comm /proc/47670/comm /proc/47694/comm /proc/47774/comm /proc/47797/comm /proc/47843/comm /proc/48/comm /proc/48176/comm /proc/482/comm /proc/48345/comm /proc/48368/comm /proc/48492/comm /proc/48619/comm /proc/48644/comm /proc/49/comm /proc/49072/comm /proc/49095/comm /proc/49120/comm /proc/49204/comm /proc/49351/comm /proc/49449/comm /proc/49473/comm /proc/49559/comm /proc/5/comm /proc/50/comm /proc/50597/comm /proc/51/comm /proc/51102/comm /proc/51394/comm /proc/51418/comm /proc/51545/comm /proc/51569/comm /proc/51660/comm /proc/51794/comm /proc/51984/comm /proc/52/comm /proc/52065/comm /proc/523/comm /proc/54/comm /proc/55/comm /proc/55985/comm /proc/56/comm /proc/56009/comm /proc/56669/comm /proc/56692/comm /proc/56707/comm /proc/56731/comm /proc/56752/comm /proc/56776/comm /proc/56871/comm /proc/56894/comm /proc/56991/comm /proc/57/comm /proc/57035/comm /proc/57094/comm /proc/57208/comm /proc/577/comm /proc/58/comm /proc/6/comm /proc/60/comm /proc/61/comm /proc/61272/comm /proc/61296/comm /proc/61312/comm /proc/61333/comm /proc/61354/comm /proc/61387/comm /proc/61560/comm /proc/61584/comm /proc/61601/comm /proc/617/comm /proc/61884/comm /proc/61910/comm /proc/62/comm /proc/620/comm /proc/62035/comm /proc/62088/comm /proc/62122/comm /proc/62136/comm /proc/62137/comm /proc/62139/comm /proc/62140/comm /proc/62152/comm /proc/623/comm /proc/63/comm /proc/630/comm /proc/63043/comm /proc/63068/comm /proc/631/comm /proc/63137/comm /proc/63166/comm /proc/63181/comm /proc/63207/comm /proc/63267/comm /proc/63352/comm /proc/63400/comm /proc/63677/comm /proc/63701/comm /proc/63834/comm /proc/63858/comm /proc/64/comm /proc/64099/comm /proc/64328/comm /proc/64352/comm /proc/64605/comm /proc/64628/comm /proc/647/comm /proc/64710/comm /proc/64724/comm /proc/64725/comm /proc/64726/comm /proc/64727/comm /proc/64728/comm /proc/64952/comm /proc/650/comm /proc/65027/comm /proc/65051/comm /proc/65075/comm /proc/65165/comm /proc/65604/comm /proc/65643/comm /proc/65869/comm /proc/65892/comm /proc/65952/comm /proc/66/comm /proc/66039/comm /proc/66108/comm /proc/66148/comm /proc/66187/comm /proc/66272/comm /proc/66316/comm /proc/66547/comm /proc/66581/comm /proc/66876/comm /proc/66924/comm /proc/66943/comm /proc/66997/comm /proc/67/comm /proc/67097/comm /proc/67131/comm /proc/67149/comm /proc/67354/comm /proc/67377/comm /proc/67957/comm /proc/67973/comm /proc/67979/comm /proc/68/comm /proc/68037/comm /proc/68038/comm /proc/68048/comm /proc/68180/comm /proc/69/comm /proc/69580/comm /proc/69605/comm /proc/70/comm /proc/706/comm /proc/709/comm /proc/710/comm /proc/71630/comm /proc/72/comm /proc/723/comm /proc/73/comm /proc/73053/comm /proc/73096/comm /proc/73097/comm /proc/73098/comm /proc/73099/comm /proc/73101/comm /proc/73102/comm /proc/73103/comm /proc/73106/comm /proc/73110/comm /proc/73111/comm /proc/73112/comm /proc/73113/comm /proc/73114/comm /proc/73115/comm /proc/74/comm /proc/75/comm /proc/76/comm /proc/78/comm /proc/78700/comm /proc/78744/comm /proc/78769/comm /proc/79/comm /proc/79044/comm /proc/79060/comm /proc/79066/comm /proc/79124/comm /proc/79125/comm /proc/79135/comm /proc/79267/comm /proc/8/comm /proc/80/comm /proc/80178/comm /proc/80204/comm /proc/81/comm /proc/82/comm /proc/82236/comm /proc/84/comm /proc/84007/comm /proc/84510/comm /proc/85/comm /proc/85624/comm /proc/85637/comm /proc/86/comm /proc/86445/comm /proc/86470/comm /proc/87/comm /proc/870/comm /proc/87180/comm /proc/88/comm /proc/89787/comm /proc/9/comm /proc/90/comm /proc/91/comm /proc/92/comm /proc/9216/comm /proc/9233/comm /proc/9249/comm /proc/92625/comm /proc/92649/comm /proc/92865/comm /proc/92887/comm /proc/92899/comm /proc/93/comm /proc/93038/comm /proc/93039/comm /proc/93049/comm /proc/9331/comm /proc/93323/comm /proc/94/comm /proc/96/comm /proc/96521/comm /proc/96544/comm /proc/96566/comm /proc/96589/comm /proc/97/comm /proc/97075/comm /proc/97179/comm /proc/97903/comm /proc/98/comm /proc/98945/comm /proc/99/comm /proc/99097/comm /proc/9948/comm /proc/self/comm /proc/thread-self/comm
+ '[' -n '' ']'
+ rm -f /var/run/libvirtd.pid
+ [[ -c /dev/kvm ]]
+ chmod 660 /dev/kvm
+ chown root:kvm /dev/kvm
+ CGROUPS=
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/blkio ']'
+ grep -w blkio /sys/fs/cgroup/cgroup.controllers
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/cpu ']'
+ grep -w cpu /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=cpu,
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/devices ']'
+ grep -w devices /sys/fs/cgroup/cgroup.controllers
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/freezer ']'
+ grep -w freezer /sys/fs/cgroup/cgroup.controllers
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/hugetlb ']'
+ grep -w hugetlb /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=hugetlb,
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/memory ']'
+ grep -w memory /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=memory,
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/net_cls ']'
+ grep -w net_cls /sys/fs/cgroup/cgroup.controllers
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/perf_event ']'
+ grep -w perf_event /sys/fs/cgroup/cgroup.controllers
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/rdma ']'
+ grep -w rdma /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=rdma,
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/misc ']'
+ grep -w misc /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=misc,
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/pids ']'
+ grep -w pids /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=pids,
+ cgcreate -g cpu,hugetlb,memory,rdma,misc,pids:/osh-libvirt
++ cat /proc/meminfo
++ grep HugePages_Total
++ tr -cd '[:digit:]'
+ hp_count=0
+ '[' 00 -gt 0 ']'
+ '[' -n 457eb676-33da-42ec-9a8c-9293d545c337 ']'
+ cgexec -g cpu,hugetlb,memory,rdma,misc,pids:/osh-libvirt systemd-run --scope --slice=system libvirtd --listen
++ mktemp --suffix .xml
+ tmpsecret=/tmp/tmp.NkEBnXEjMv.xml
+ '[' -n '' ']'
+ trap cleanup EXIT
+ TIMEOUT=60
+ [[ ! -f /var/run/libvirtd.pid ]]
+ [[ 60 -gt 0 ]]
+ let TIMEOUT-=1
+ sleep 1
Running as unit: run-r954a497621dc4495bfbb84f3c38839de.scope; invocation ID: f28c1783599d4dc6a780a792a4735fca
+ [[ ! -f /var/run/libvirtd.pid ]]
+ TIMEOUT=10
+ [[ ! -e /var/run/libvirt/libvirt-sock ]]
+ '[' -z '' ']'
+ '[' -n cinder ']'
++ awk '/key/{print $3}' /etc/ceph/ceph.client.cinder.keyring
+ CEPH_CINDER_KEYRING=AQDyRCdq0KYYJRAA3lUorvTSPwJuNO4LHCPZAw==
+ '[' -n cinder ']'
+ create_virsh_libvirt_secret cinder 457eb676-33da-42ec-9a8c-9293d545c337 AQDyRCdq0KYYJRAA3lUorvTSPwJuNO4LHCPZAw==
+ sec_user=cinder
+ sec_uuid=457eb676-33da-42ec-9a8c-9293d545c337
+ sec_ceph_keyring=AQDyRCdq0KYYJRAA3lUorvTSPwJuNO4LHCPZAw==
+ cat
+ virsh secret-define --file /tmp/tmp.NkEBnXEjMv.xml
Secret 457eb676-33da-42ec-9a8c-9293d545c337 created

+ virsh secret-set-value --secret 457eb676-33da-42ec-9a8c-9293d545c337 --base64 AQDyRCdq0KYYJRAA3lUorvTSPwJuNO4LHCPZAw==
error: Passing secret value as command-line argument is insecure!
Secret value set

+ '[' -n '' ']'
+ '[' -n '' ']'
+ cleanup
+ rm -f /tmp/tmp.NkEBnXEjMv.xml
+ '[' -n '' ']'
++ cat /var/run/libvirtd.pid
+ LIBVIRTD_PID=191728
+ kill 191728
+ tail --pid=191728 -f /dev/null
+ cgexec -g cpu,hugetlb,memory,rdma,misc,pids:/osh-libvirt systemd-run --scope --slice=system libvirtd --listen
Running as unit: run-r60a5882e62f144a1a026e6041e732d10.scope; invocation ID: f7fd2200384c40b991d00667b20e476d