+ wait_for_file /etc/pki/CA/cacert.pem
+ local file=/etc/pki/CA/cacert.pem
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ sleep 1
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ sleep 1
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ sleep 1
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ sleep 1
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ sleep 1
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ wait_for_file /etc/pki/qemu/ca-cert.pem
+ local file=/etc/pki/qemu/ca-cert.pem
+ '[' '!' -f /etc/pki/qemu/ca-cert.pem ']'
+ wait_for_file /etc/pki/libvirt/servercert.pem
+ local file=/etc/pki/libvirt/servercert.pem
+ '[' '!' -f /etc/pki/libvirt/servercert.pem ']'
+ wait_for_file /etc/pki/libvirt/clientcert.pem
+ local file=/etc/pki/libvirt/clientcert.pem
+ '[' '!' -f /etc/pki/libvirt/clientcert.pem ']'
+ wait_for_file /etc/pki/qemu/server-cert.pem
+ local file=/etc/pki/qemu/server-cert.pem
+ '[' '!' -f /etc/pki/qemu/server-cert.pem ']'
+ wait_for_file /etc/pki/qemu/client-cert.pem
+ local file=/etc/pki/qemu/client-cert.pem
+ '[' '!' -f /etc/pki/qemu/client-cert.pem ']'
+ wait_for_file /etc/pki/libvirt/private/serverkey.pem
+ local file=/etc/pki/libvirt/private/serverkey.pem
+ '[' '!' -f /etc/pki/libvirt/private/serverkey.pem ']'
+ wait_for_file /etc/pki/libvirt/private/clientkey.pem
+ local file=/etc/pki/libvirt/private/clientkey.pem
+ '[' '!' -f /etc/pki/libvirt/private/clientkey.pem ']'
+ wait_for_file /etc/pki/qemu/server-key.pem
+ local file=/etc/pki/qemu/server-key.pem
+ '[' '!' -f /etc/pki/qemu/server-key.pem ']'
+ wait_for_file /etc/pki/qemu/client-key.pem
+ local file=/etc/pki/qemu/client-key.pem
+ '[' '!' -f /etc/pki/qemu/client-key.pem ']'
+ wait_for_file /etc/pki/libvirt-vnc/ca-cert.pem
+ local file=/etc/pki/libvirt-vnc/ca-cert.pem
+ '[' '!' -f /etc/pki/libvirt-vnc/ca-cert.pem ']'
+ wait_for_file /etc/pki/libvirt-vnc/server-cert.pem
+ local file=/etc/pki/libvirt-vnc/server-cert.pem
+ '[' '!' -f /etc/pki/libvirt-vnc/server-cert.pem ']'
+ wait_for_file /etc/pki/libvirt-vnc/server-key.pem
+ local file=/etc/pki/libvirt-vnc/server-key.pem
+ '[' '!' -f /etc/pki/libvirt-vnc/server-key.pem ']'
++ grep -w libvirtd
++ cat /proc/1/comm /proc/10/comm /proc/100/comm /proc/100012/comm /proc/100035/comm /proc/100288/comm /proc/100359/comm /proc/101139/comm /proc/102/comm /proc/102659/comm /proc/102930/comm /proc/103/comm /proc/104/comm /proc/105/comm /proc/106/comm /proc/10669/comm /proc/10686/comm /proc/106989/comm /proc/10702/comm /proc/10786/comm /proc/108/comm /proc/109/comm /proc/11/comm /proc/110/comm /proc/1102/comm /proc/111/comm /proc/112/comm /proc/113/comm /proc/113750/comm /proc/113774/comm /proc/113883/comm /proc/114/comm /proc/11403/comm /proc/114087/comm /proc/114106/comm /proc/114107/comm /proc/115/comm /proc/115226/comm /proc/115250/comm /proc/115266/comm /proc/115297/comm /proc/115479/comm /proc/115746/comm /proc/115844/comm /proc/115850/comm /proc/115932/comm /proc/115934/comm /proc/116/comm /proc/116965/comm /proc/117/comm /proc/117195/comm /proc/117219/comm /proc/117381/comm /proc/117397/comm /proc/117403/comm /proc/117466/comm /proc/117467/comm /proc/117477/comm /proc/11772/comm /proc/117797/comm /proc/11798/comm /proc/119055/comm /proc/119078/comm /proc/119091/comm /proc/119116/comm /proc/119473/comm /proc/12/comm /proc/121032/comm /proc/122757/comm /proc/12284/comm /proc/12285/comm /proc/122885/comm /proc/122897/comm /proc/123778/comm /proc/125478/comm /proc/125481/comm /proc/125730/comm /proc/126572/comm /proc/127490/comm /proc/128756/comm /proc/129175/comm /proc/129188/comm /proc/129189/comm /proc/13/comm /proc/130671/comm /proc/132095/comm /proc/132118/comm /proc/132139/comm /proc/132181/comm /proc/132819/comm /proc/133215/comm /proc/133449/comm /proc/134232/comm /proc/134251/comm /proc/134995/comm /proc/13663/comm /proc/136907/comm /proc/13692/comm /proc/137033/comm /proc/13749/comm /proc/13778/comm /proc/13796/comm /proc/14/comm /proc/14029/comm /proc/14059/comm /proc/14117/comm /proc/14142/comm /proc/14161/comm /proc/1435/comm /proc/146831/comm /proc/146837/comm /proc/147854/comm /proc/15/comm /proc/150395/comm /proc/151543/comm /proc/151926/comm /proc/151954/comm /proc/151976/comm /proc/151977/comm /proc/153452/comm /proc/153453/comm /proc/16/comm /proc/160659/comm /proc/160660/comm /proc/160662/comm /proc/160663/comm /proc/160666/comm /proc/160845/comm /proc/160857/comm /proc/161500/comm /proc/161523/comm /proc/161600/comm /proc/161884/comm /proc/161964/comm /proc/161997/comm /proc/162010/comm /proc/162042/comm /proc/162043/comm /proc/162044/comm /proc/162045/comm /proc/163075/comm /proc/163103/comm /proc/163263/comm /proc/163475/comm /proc/163501/comm /proc/163837/comm /proc/164322/comm /proc/164346/comm /proc/164531/comm /proc/164618/comm /proc/164624/comm /proc/164771/comm /proc/164772/comm /proc/164782/comm /proc/164871/comm /proc/166538/comm /proc/166586/comm /proc/166716/comm /proc/166798/comm /proc/166823/comm /proc/166854/comm /proc/166888/comm /proc/166945/comm /proc/166991/comm /proc/167/comm /proc/167094/comm /proc/167133/comm /proc/167215/comm /proc/167249/comm /proc/167274/comm /proc/167554/comm /proc/167579/comm /proc/168/comm /proc/169/comm /proc/170/comm /proc/170848/comm /proc/171/comm /proc/172/comm /proc/172163/comm /proc/172172/comm /proc/172946/comm /proc/172960/comm /proc/173/comm /proc/173044/comm /proc/174/comm /proc/174246/comm /proc/175/comm /proc/175361/comm /proc/175431/comm /proc/177052/comm /proc/177332/comm /proc/177340/comm /proc/177518/comm /proc/177531/comm /proc/177532/comm /proc/177545/comm /proc/177546/comm /proc/177547/comm /proc/177554/comm /proc/177739/comm /proc/177752/comm /proc/177753/comm /proc/178/comm /proc/178220/comm /proc/178221/comm /proc/178222/comm /proc/178361/comm /proc/178380/comm /proc/178415/comm /proc/178440/comm /proc/178504/comm /proc/178649/comm /proc/178650/comm /proc/178751/comm /proc/178753/comm /proc/179435/comm /proc/179458/comm /proc/179582/comm /proc/179647/comm /proc/179654/comm /proc/179757/comm /proc/179758/comm /proc/179768/comm /proc/179902/comm /proc/18/comm /proc/180/comm /proc/181/comm /proc/181328/comm /proc/181360/comm /proc/181396/comm /proc/181452/comm /proc/181500/comm /proc/181535/comm /proc/181536/comm /proc/181579/comm /proc/181621/comm /proc/181659/comm /proc/181911/comm /proc/181936/comm /proc/181967/comm /proc/182005/comm /proc/182125/comm /proc/182151/comm /proc/182635/comm /proc/182663/comm /proc/182675/comm /proc/182757/comm /proc/183/comm /proc/184/comm /proc/185563/comm /proc/186/comm /proc/186192/comm /proc/186196/comm /proc/186600/comm /proc/187/comm /proc/187002/comm /proc/187006/comm /proc/187336/comm /proc/187510/comm /proc/187513/comm /proc/188/comm /proc/188766/comm /proc/189/comm /proc/189397/comm /proc/19/comm /proc/190/comm /proc/190433/comm /proc/190681/comm /proc/190682/comm /proc/190683/comm /proc/190880/comm /proc/190898/comm /proc/190925/comm /proc/190926/comm /proc/190939/comm /proc/190952/comm /proc/190953/comm /proc/191/comm /proc/191228/comm /proc/191231/comm /proc/191234/comm /proc/191551/comm /proc/191809/comm /proc/192258/comm /proc/192407/comm /proc/192709/comm /proc/192853/comm /proc/193295/comm /proc/193315/comm /proc/193352/comm /proc/193621/comm /proc/193632/comm /proc/193969/comm /proc/194107/comm /proc/194169/comm /proc/194203/comm /proc/194204/comm /proc/194205/comm /proc/194206/comm /proc/194207/comm /proc/194208/comm /proc/194262/comm /proc/194767/comm /proc/194827/comm /proc/194852/comm /proc/194874/comm /proc/194933/comm /proc/194978/comm /proc/195041/comm /proc/195065/comm /proc/195241/comm /proc/195260/comm /proc/195280/comm /proc/195286/comm /proc/195337/comm /proc/195340/comm /proc/195363/comm /proc/195364/comm /proc/195366/comm /proc/195367/comm /proc/2/comm /proc/20/comm /proc/20129/comm /proc/20149/comm /proc/20170/comm /proc/20197/comm /proc/20216/comm /proc/203/comm /proc/204/comm /proc/205/comm /proc/208/comm /proc/21/comm /proc/216/comm /proc/22/comm /proc/220/comm /proc/221/comm /proc/226/comm /proc/23148/comm /proc/23204/comm /proc/23205/comm /proc/23218/comm /proc/24/comm /proc/248/comm /proc/25/comm /proc/26/comm /proc/26464/comm /proc/266/comm /proc/26739/comm /proc/26756/comm /proc/26781/comm /proc/26793/comm /proc/27/comm /proc/28/comm /proc/2837/comm /proc/285/comm /proc/286/comm /proc/287/comm /proc/2980/comm /proc/2981/comm /proc/2982/comm /proc/2983/comm /proc/2987/comm /proc/3/comm /proc/30/comm /proc/3054/comm /proc/3058/comm /proc/3067/comm /proc/308/comm /proc/309/comm /proc/31/comm /proc/31136/comm /proc/313/comm /proc/314/comm /proc/31413/comm /proc/31430/comm /proc/31455/comm /proc/31468/comm /proc/315/comm /proc/316/comm /proc/317/comm /proc/319/comm /proc/31966/comm /proc/32/comm /proc/320/comm /proc/321/comm /proc/322/comm /proc/33/comm /proc/34/comm /proc/35762/comm /proc/36/comm /proc/36028/comm /proc/36045/comm /proc/36070/comm /proc/36082/comm /proc/361/comm /proc/37/comm /proc/38/comm /proc/39/comm /proc/393/comm /proc/397/comm /proc/4/comm /proc/40/comm /proc/40617/comm /proc/40619/comm /proc/40725/comm /proc/40747/comm /proc/40792/comm /proc/40819/comm /proc/40835/comm /proc/42/comm /proc/43/comm /proc/43300/comm /proc/43338/comm /proc/43352/comm /proc/43359/comm /proc/43360/comm /proc/43377/comm /proc/43447/comm /proc/43449/comm /proc/43472/comm /proc/43479/comm /proc/43550/comm /proc/43567/comm /proc/43587/comm /proc/43605/comm /proc/43718/comm /proc/43780/comm /proc/43920/comm /proc/43945/comm /proc/43970/comm /proc/44/comm /proc/44658/comm /proc/44679/comm /proc/44703/comm /proc/44720/comm /proc/44958/comm /proc/45/comm /proc/45187/comm /proc/45273/comm /proc/45278/comm /proc/453/comm /proc/45568/comm /proc/46/comm /proc/46011/comm /proc/46036/comm /proc/46061/comm /proc/46405/comm /proc/46430/comm /proc/46457/comm /proc/46470/comm /proc/46495/comm /proc/46543/comm /proc/46903/comm /proc/46926/comm /proc/46969/comm /proc/47132/comm /proc/47411/comm /proc/47434/comm /proc/47456/comm /proc/47477/comm /proc/47500/comm /proc/47517/comm /proc/47628/comm /proc/47675/comm /proc/47722/comm /proc/48/comm /proc/49/comm /proc/49544/comm /proc/49579/comm /proc/49653/comm /proc/49675/comm /proc/49900/comm /proc/49912/comm /proc/49977/comm /proc/5/comm /proc/50/comm /proc/50052/comm /proc/50569/comm /proc/50595/comm /proc/50664/comm /proc/50689/comm /proc/50743/comm /proc/50918/comm /proc/51/comm /proc/51011/comm /proc/51035/comm /proc/51174/comm /proc/51319/comm /proc/51347/comm /proc/51727/comm /proc/51751/comm /proc/51780/comm /proc/51859/comm /proc/519/comm /proc/51938/comm /proc/52/comm /proc/52036/comm /proc/52060/comm /proc/52170/comm /proc/53009/comm /proc/53879/comm /proc/53903/comm /proc/54/comm /proc/54082/comm /proc/54105/comm /proc/54160/comm /proc/54307/comm /proc/54499/comm /proc/54566/comm /proc/55/comm /proc/56/comm /proc/57/comm /proc/58/comm /proc/58887/comm /proc/58911/comm /proc/59507/comm /proc/59538/comm /proc/59540/comm /proc/59574/comm /proc/59590/comm /proc/59621/comm /proc/59640/comm /proc/59773/comm /proc/59797/comm /proc/59834/comm /proc/59880/comm /proc/59922/comm /proc/6/comm /proc/60/comm /proc/60058/comm /proc/61/comm /proc/610/comm /proc/614/comm /proc/616/comm /proc/62/comm /proc/625/comm /proc/626/comm /proc/63/comm /proc/64/comm /proc/64007/comm /proc/642/comm /proc/64331/comm /proc/64377/comm /proc/64494/comm /proc/64523/comm /proc/64543/comm /proc/64566/comm /proc/64586/comm /proc/646/comm /proc/64606/comm /proc/64886/comm /proc/65369/comm /proc/65390/comm /proc/65416/comm /proc/65719/comm /proc/65819/comm /proc/65821/comm /proc/65822/comm /proc/65825/comm /proc/65827/comm /proc/66/comm /proc/66050/comm /proc/66081/comm /proc/66146/comm /proc/66220/comm /proc/66247/comm /proc/66304/comm /proc/66305/comm /proc/66620/comm /proc/66647/comm /proc/66673/comm /proc/66697/comm /proc/66717/comm /proc/66748/comm /proc/67/comm /proc/67072/comm /proc/67095/comm /proc/67150/comm /proc/67589/comm /proc/67615/comm /proc/67745/comm /proc/67769/comm /proc/67858/comm /proc/67879/comm /proc/67880/comm /proc/67881/comm /proc/67882/comm /proc/67883/comm /proc/68/comm /proc/68202/comm /proc/68250/comm /proc/68372/comm /proc/68396/comm /proc/68420/comm /proc/68747/comm /proc/68798/comm /proc/69/comm /proc/69066/comm /proc/69168/comm /proc/69211/comm /proc/69234/comm /proc/69344/comm /proc/69381/comm /proc/69569/comm /proc/69626/comm /proc/69677/comm /proc/69799/comm /proc/69976/comm /proc/70/comm /proc/701/comm /proc/70162/comm /proc/70202/comm /proc/70303/comm /proc/70347/comm /proc/70377/comm /proc/704/comm /proc/705/comm /proc/70557/comm /proc/70580/comm /proc/70896/comm /proc/70913/comm /proc/70919/comm /proc/71045/comm /proc/71046/comm /proc/71056/comm /proc/71124/comm /proc/718/comm /proc/72/comm /proc/72600/comm /proc/72624/comm /proc/73/comm /proc/73340/comm /proc/74/comm /proc/75/comm /proc/76/comm /proc/76026/comm /proc/76071/comm /proc/76072/comm /proc/76073/comm /proc/76074/comm /proc/76076/comm /proc/76079/comm /proc/76080/comm /proc/76083/comm /proc/76085/comm /proc/76086/comm /proc/76087/comm /proc/76088/comm /proc/76089/comm /proc/76090/comm /proc/78/comm /proc/79/comm /proc/8/comm /proc/80/comm /proc/81/comm /proc/82/comm /proc/82030/comm /proc/82054/comm /proc/82158/comm /proc/82175/comm /proc/82181/comm /proc/82305/comm /proc/82306/comm /proc/82316/comm /proc/82383/comm /proc/83586/comm /proc/83610/comm /proc/84/comm /proc/84852/comm /proc/85/comm /proc/86/comm /proc/863/comm /proc/87/comm /proc/88/comm /proc/88565/comm /proc/88949/comm /proc/88968/comm /proc/89803/comm /proc/89828/comm /proc/90/comm /proc/90824/comm /proc/91/comm /proc/92/comm /proc/93/comm /proc/93392/comm /proc/94/comm /proc/96/comm /proc/96656/comm /proc/96680/comm /proc/96803/comm /proc/96950/comm /proc/96967/comm /proc/96973/comm /proc/97/comm /proc/97068/comm /proc/97069/comm /proc/97079/comm /proc/97236/comm /proc/98/comm /proc/99/comm /proc/99844/comm /proc/99879/comm /proc/self/comm /proc/thread-self/comm
+ '[' -n '' ']'
+ rm -f /var/run/libvirtd.pid
+ [[ -c /dev/kvm ]]
+ chmod 660 /dev/kvm
+ chown root:kvm /dev/kvm
+ CGROUPS=
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/blkio ']'
+ grep -w blkio /sys/fs/cgroup/cgroup.controllers
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/cpu ']'
+ grep -w cpu /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=cpu,
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/devices ']'
+ grep -w devices /sys/fs/cgroup/cgroup.controllers
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/freezer ']'
+ grep -w freezer /sys/fs/cgroup/cgroup.controllers
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/hugetlb ']'
+ grep -w hugetlb /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=hugetlb,
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/memory ']'
+ grep -w memory /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=memory,
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/net_cls ']'
+ grep -w net_cls /sys/fs/cgroup/cgroup.controllers
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/perf_event ']'
+ grep -w perf_event /sys/fs/cgroup/cgroup.controllers
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/rdma ']'
+ grep -w rdma /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=rdma,
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/misc ']'
+ grep -w misc /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=misc,
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/pids ']'
+ grep -w pids /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=pids,
+ cgcreate -g cpu,hugetlb,memory,rdma,misc,pids:/osh-libvirt
++ cat /proc/meminfo
++ grep HugePages_Total
++ tr -cd '[:digit:]'
+ hp_count=0
+ '[' 00 -gt 0 ']'
+ '[' -n 457eb676-33da-42ec-9a8c-9293d545c337 ']'
+ cgexec -g cpu,hugetlb,memory,rdma,misc,pids:/osh-libvirt systemd-run --scope --slice=system libvirtd --listen
++ mktemp --suffix .xml
+ tmpsecret=/tmp/tmp.Wmz54ekQZB.xml
+ '[' -n '' ']'
+ trap cleanup EXIT
+ TIMEOUT=60
+ [[ ! -f /var/run/libvirtd.pid ]]
+ [[ 60 -gt 0 ]]
+ let TIMEOUT-=1
+ sleep 1
Running as unit: run-r826709987b284e32861327c4fff8fce8.scope; invocation ID: 2258691152d74637866dce44556e2c9d
+ [[ ! -f /var/run/libvirtd.pid ]]
+ TIMEOUT=10
+ [[ ! -e /var/run/libvirt/libvirt-sock ]]
+ '[' -z '' ']'
+ '[' -n cinder ']'
++ awk '/key/{print $3}' /etc/ceph/ceph.client.cinder.keyring
+ CEPH_CINDER_KEYRING=AQD6fNdq7JdHMxAAcqno+WEopBjDeZ0nBwWQzA==
+ '[' -n cinder ']'
+ create_virsh_libvirt_secret cinder 457eb676-33da-42ec-9a8c-9293d545c337 AQD6fNdq7JdHMxAAcqno+WEopBjDeZ0nBwWQzA==
+ sec_user=cinder
+ sec_uuid=457eb676-33da-42ec-9a8c-9293d545c337
+ sec_ceph_keyring=AQD6fNdq7JdHMxAAcqno+WEopBjDeZ0nBwWQzA==
+ cat
+ virsh secret-define --file /tmp/tmp.Wmz54ekQZB.xml
Secret 457eb676-33da-42ec-9a8c-9293d545c337 created

+ virsh secret-set-value --secret 457eb676-33da-42ec-9a8c-9293d545c337 --base64 AQD6fNdq7JdHMxAAcqno+WEopBjDeZ0nBwWQzA==
error: Passing secret value as command-line argument is insecure!
Secret value set

+ '[' -n '' ']'
+ '[' -n '' ']'
+ cleanup
+ rm -f /tmp/tmp.Wmz54ekQZB.xml
+ '[' -n '' ']'
++ cat /var/run/libvirtd.pid
+ LIBVIRTD_PID=195410
+ kill 195410
+ tail --pid=195410 -f /dev/null
+ cgexec -g cpu,hugetlb,memory,rdma,misc,pids:/osh-libvirt systemd-run --scope --slice=system libvirtd --listen
Running as unit: run-r034fc61b2ae449cd856376638a333550.scope; invocation ID: d3055cfcbbe64ce78f064a310ff259c2