+ wait_for_file /etc/pki/CA/cacert.pem
+ local file=/etc/pki/CA/cacert.pem
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ sleep 1
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ sleep 1
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ sleep 1
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ sleep 1
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ sleep 1
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ wait_for_file /etc/pki/qemu/ca-cert.pem
+ local file=/etc/pki/qemu/ca-cert.pem
+ '[' '!' -f /etc/pki/qemu/ca-cert.pem ']'
+ wait_for_file /etc/pki/libvirt/servercert.pem
+ local file=/etc/pki/libvirt/servercert.pem
+ '[' '!' -f /etc/pki/libvirt/servercert.pem ']'
+ wait_for_file /etc/pki/libvirt/clientcert.pem
+ local file=/etc/pki/libvirt/clientcert.pem
+ '[' '!' -f /etc/pki/libvirt/clientcert.pem ']'
+ wait_for_file /etc/pki/qemu/server-cert.pem
+ local file=/etc/pki/qemu/server-cert.pem
+ '[' '!' -f /etc/pki/qemu/server-cert.pem ']'
+ wait_for_file /etc/pki/qemu/client-cert.pem
+ local file=/etc/pki/qemu/client-cert.pem
+ '[' '!' -f /etc/pki/qemu/client-cert.pem ']'
+ wait_for_file /etc/pki/libvirt/private/serverkey.pem
+ local file=/etc/pki/libvirt/private/serverkey.pem
+ '[' '!' -f /etc/pki/libvirt/private/serverkey.pem ']'
+ wait_for_file /etc/pki/libvirt/private/clientkey.pem
+ local file=/etc/pki/libvirt/private/clientkey.pem
+ '[' '!' -f /etc/pki/libvirt/private/clientkey.pem ']'
+ wait_for_file /etc/pki/qemu/server-key.pem
+ local file=/etc/pki/qemu/server-key.pem
+ '[' '!' -f /etc/pki/qemu/server-key.pem ']'
+ wait_for_file /etc/pki/qemu/client-key.pem
+ local file=/etc/pki/qemu/client-key.pem
+ '[' '!' -f /etc/pki/qemu/client-key.pem ']'
+ wait_for_file /etc/pki/libvirt-vnc/ca-cert.pem
+ local file=/etc/pki/libvirt-vnc/ca-cert.pem
+ '[' '!' -f /etc/pki/libvirt-vnc/ca-cert.pem ']'
+ wait_for_file /etc/pki/libvirt-vnc/server-cert.pem
+ local file=/etc/pki/libvirt-vnc/server-cert.pem
+ '[' '!' -f /etc/pki/libvirt-vnc/server-cert.pem ']'
+ wait_for_file /etc/pki/libvirt-vnc/server-key.pem
+ local file=/etc/pki/libvirt-vnc/server-key.pem
+ '[' '!' -f /etc/pki/libvirt-vnc/server-key.pem ']'
++ grep -w libvirtd
++ cat /proc/1/comm /proc/10/comm /proc/100/comm /proc/101076/comm /proc/101099/comm /proc/101239/comm /proc/101263/comm /proc/10183/comm /proc/101896/comm /proc/101913/comm /proc/102/comm /proc/102006/comm /proc/103/comm /proc/104/comm /proc/104560/comm /proc/105/comm /proc/105728/comm /proc/106/comm /proc/106839/comm /proc/10690/comm /proc/10691/comm /proc/107568/comm /proc/107573/comm /proc/108/comm /proc/108620/comm /proc/109/comm /proc/11/comm /proc/110/comm /proc/111/comm /proc/112/comm /proc/113/comm /proc/113436/comm /proc/113460/comm /proc/113793/comm /proc/113806/comm /proc/113807/comm /proc/114/comm /proc/114771/comm /proc/114942/comm /proc/114967/comm /proc/115/comm /proc/115038/comm /proc/115063/comm /proc/115281/comm /proc/115488/comm /proc/115490/comm /proc/116/comm /proc/116178/comm /proc/116618/comm /proc/116870/comm /proc/116931/comm /proc/116955/comm /proc/117/comm /proc/117139/comm /proc/117156/comm /proc/117162/comm /proc/117230/comm /proc/117231/comm /proc/117241/comm /proc/117308/comm /proc/1186/comm /proc/118772/comm /proc/118796/comm /proc/118815/comm /proc/118848/comm /proc/119384/comm /proc/12/comm /proc/12120/comm /proc/121317/comm /proc/12151/comm /proc/12187/comm /proc/121999/comm /proc/12231/comm /proc/12243/comm /proc/12481/comm /proc/12511/comm /proc/125556/comm /proc/125584/comm /proc/12566/comm /proc/12590/comm /proc/12610/comm /proc/126563/comm /proc/127424/comm /proc/128540/comm /proc/128649/comm /proc/1291/comm /proc/129138/comm /proc/129153/comm /proc/129154/comm /proc/1292/comm /proc/1293/comm /proc/1294/comm /proc/13/comm /proc/1388/comm /proc/1392/comm /proc/14/comm /proc/141446/comm /proc/14196/comm /proc/142528/comm /proc/142550/comm /proc/142571/comm /proc/142595/comm /proc/143107/comm /proc/143587/comm /proc/143827/comm /proc/144543/comm /proc/145125/comm /proc/145148/comm /proc/146493/comm /proc/1465/comm /proc/146517/comm /proc/1469/comm /proc/147544/comm /proc/1478/comm /proc/148872/comm /proc/148875/comm /proc/149749/comm /proc/149857/comm /proc/149973/comm /proc/15/comm /proc/150596/comm /proc/150611/comm /proc/150612/comm /proc/151833/comm /proc/151834/comm /proc/158891/comm /proc/158892/comm /proc/158894/comm /proc/158895/comm /proc/159082/comm /proc/159794/comm /proc/159818/comm /proc/16/comm /proc/160078/comm /proc/160205/comm /proc/160239/comm /proc/160252/comm /proc/160284/comm /proc/160285/comm /proc/160286/comm /proc/160287/comm /proc/161528/comm /proc/161556/comm /proc/161847/comm /proc/161870/comm /proc/162130/comm /proc/162288/comm /proc/162375/comm /proc/162900/comm /proc/162925/comm /proc/163028/comm /proc/163045/comm /proc/163051/comm /proc/163109/comm /proc/163110/comm /proc/163120/comm /proc/163357/comm /proc/164837/comm /proc/164930/comm /proc/165/comm /proc/165022/comm /proc/165077/comm /proc/165130/comm /proc/165162/comm /proc/165206/comm /proc/165236/comm /proc/165359/comm /proc/165408/comm /proc/165449/comm /proc/165479/comm /proc/165597/comm /proc/165620/comm /proc/165635/comm /proc/165647/comm /proc/165800/comm /proc/165823/comm /proc/166/comm /proc/166418/comm /proc/167/comm /proc/168/comm /proc/169/comm /proc/170/comm /proc/171/comm /proc/171288/comm /proc/171479/comm /proc/172/comm /proc/172194/comm /proc/172700/comm /proc/172756/comm /proc/173/comm /proc/173080/comm /proc/173558/comm /proc/173573/comm /proc/173829/comm /proc/173836/comm /proc/173861/comm /proc/175360/comm /proc/175731/comm /proc/175753/comm /proc/175754/comm /proc/175862/comm /proc/175882/comm /proc/175883/comm /proc/176/comm /proc/176437/comm /proc/176541/comm /proc/176690/comm /proc/176697/comm /proc/176914/comm /proc/177031/comm /proc/177032/comm /proc/177157/comm /proc/177159/comm /proc/177698/comm /proc/177721/comm /proc/177826/comm /proc/177900/comm /proc/177909/comm /proc/178012/comm /proc/178013/comm /proc/178023/comm /proc/178108/comm /proc/179/comm /proc/179398/comm /proc/179419/comm /proc/179456/comm /proc/179491/comm /proc/179569/comm /proc/179594/comm /proc/179795/comm /proc/179812/comm /proc/179851/comm /proc/179857/comm /proc/179889/comm /proc/179901/comm /proc/179981/comm /proc/18/comm /proc/180/comm /proc/180038/comm /proc/180443/comm /proc/180623/comm /proc/180642/comm /proc/180655/comm /proc/180858/comm /proc/180864/comm /proc/183/comm /proc/183633/comm /proc/184176/comm /proc/184263/comm /proc/184282/comm /proc/185/comm /proc/185535/comm /proc/185536/comm /proc/186/comm /proc/186926/comm /proc/187/comm /proc/188/comm /proc/188521/comm /proc/188785/comm /proc/188786/comm /proc/188787/comm /proc/188976/comm /proc/188982/comm /proc/189/comm /proc/189008/comm /proc/189009/comm /proc/189023/comm /proc/189046/comm /proc/189047/comm /proc/189206/comm /proc/189209/comm /proc/189212/comm /proc/189864/comm /proc/19/comm /proc/190/comm /proc/190296/comm /proc/190458/comm /proc/190766/comm /proc/191386/comm /proc/191422/comm /proc/191535/comm /proc/191562/comm /proc/191834/comm /proc/191909/comm /proc/192/comm /proc/192340/comm /proc/192343/comm /proc/192359/comm /proc/192360/comm /proc/192361/comm /proc/192362/comm /proc/192363/comm /proc/192364/comm /proc/192680/comm /proc/193/comm /proc/193065/comm /proc/193252/comm /proc/193283/comm /proc/193524/comm /proc/193547/comm /proc/193590/comm /proc/193746/comm /proc/193769/comm /proc/193791/comm /proc/19380/comm /proc/193812/comm /proc/193878/comm /proc/193921/comm /proc/193938/comm /proc/193944/comm /proc/194/comm /proc/194004/comm /proc/194053/comm /proc/194078/comm /proc/19410/comm /proc/194209/comm /proc/194210/comm /proc/194220/comm /proc/194285/comm /proc/194329/comm /proc/194342/comm /proc/194343/comm /proc/194344/comm /proc/194345/comm /proc/194363/comm /proc/194378/comm /proc/194384/comm /proc/194385/comm /proc/194386/comm /proc/19444/comm /proc/19469/comm /proc/19483/comm /proc/195/comm /proc/198/comm /proc/2/comm /proc/20/comm /proc/21/comm /proc/21508/comm /proc/21511/comm /proc/21512/comm /proc/21530/comm /proc/216/comm /proc/219/comm /proc/22/comm /proc/220/comm /proc/225/comm /proc/24/comm /proc/24334/comm /proc/24607/comm /proc/24623/comm /proc/24646/comm /proc/24659/comm /proc/247/comm /proc/25/comm /proc/26/comm /proc/267/comm /proc/27/comm /proc/28/comm /proc/287/comm /proc/290/comm /proc/29037/comm /proc/292/comm /proc/293/comm /proc/29313/comm /proc/29331/comm /proc/29354/comm /proc/29368/comm /proc/3/comm /proc/30/comm /proc/31/comm /proc/312/comm /proc/313/comm /proc/317/comm /proc/32/comm /proc/33/comm /proc/33624/comm /proc/33902/comm /proc/33920/comm /proc/33944/comm /proc/33957/comm /proc/34/comm /proc/344/comm /proc/345/comm /proc/353/comm /proc/35528/comm /proc/35530/comm /proc/36/comm /proc/360/comm /proc/367/comm /proc/37/comm /proc/373/comm /proc/38/comm /proc/381/comm /proc/389/comm /proc/39/comm /proc/39334/comm /proc/39371/comm /proc/39380/comm /proc/39390/comm /proc/394/comm /proc/39421/comm /proc/39435/comm /proc/39479/comm /proc/39486/comm /proc/39500/comm /proc/39510/comm /proc/39569/comm /proc/39595/comm /proc/39622/comm /proc/39641/comm /proc/39748/comm /proc/39800/comm /proc/399/comm /proc/39942/comm /proc/39965/comm /proc/39992/comm /proc/4/comm /proc/40/comm /proc/401/comm /proc/405/comm /proc/40795/comm /proc/40819/comm /proc/40840/comm /proc/40863/comm /proc/41043/comm /proc/41203/comm /proc/41411/comm /proc/41564/comm /proc/41583/comm /proc/42/comm /proc/42038/comm /proc/42067/comm /proc/42131/comm /proc/42428/comm /proc/42452/comm /proc/42524/comm /proc/42550/comm /proc/42597/comm /proc/42661/comm /proc/42906/comm /proc/42929/comm /proc/43/comm /proc/43079/comm /proc/43393/comm /proc/43416/comm /proc/43437/comm /proc/43461/comm /proc/43476/comm /proc/43499/comm /proc/43613/comm /proc/43657/comm /proc/43721/comm /proc/44/comm /proc/45/comm /proc/455/comm /proc/45878/comm /proc/45903/comm /proc/45999/comm /proc/46/comm /proc/46021/comm /proc/46243/comm /proc/46256/comm /proc/46294/comm /proc/46368/comm /proc/46718/comm /proc/46750/comm /proc/46816/comm /proc/46839/comm /proc/46891/comm /proc/47010/comm /proc/47185/comm /proc/47209/comm /proc/47359/comm /proc/47520/comm /proc/47546/comm /proc/47926/comm /proc/47949/comm /proc/47976/comm /proc/48/comm /proc/48056/comm /proc/48276/comm /proc/48397/comm /proc/48422/comm /proc/48509/comm /proc/49/comm /proc/49497/comm /proc/5/comm /proc/50/comm /proc/50356/comm /proc/50379/comm /proc/50597/comm /proc/50620/comm /proc/50660/comm /proc/50769/comm /proc/50956/comm /proc/51/comm /proc/51093/comm /proc/52/comm /proc/524/comm /proc/54/comm /proc/55/comm /proc/56/comm /proc/57/comm /proc/57781/comm /proc/57805/comm /proc/58/comm /proc/58514/comm /proc/58545/comm /proc/58576/comm /proc/58600/comm /proc/58616/comm /proc/58639/comm /proc/58765/comm /proc/58788/comm /proc/58896/comm /proc/58934/comm /proc/59013/comm /proc/59117/comm /proc/6/comm /proc/60/comm /proc/60268/comm /proc/60269/comm /proc/60270/comm /proc/61/comm /proc/615/comm /proc/618/comm /proc/62/comm /proc/621/comm /proc/624/comm /proc/625/comm /proc/63/comm /proc/63482/comm /proc/63610/comm /proc/63634/comm /proc/63661/comm /proc/63679/comm /proc/63730/comm /proc/63753/comm /proc/63768/comm /proc/63799/comm /proc/63931/comm /proc/64/comm /proc/64178/comm /proc/64203/comm /proc/64248/comm /proc/64338/comm /proc/64339/comm /proc/64341/comm /proc/64342/comm /proc/64357/comm /proc/645/comm /proc/64760/comm /proc/649/comm /proc/64927/comm /proc/64928/comm /proc/65051/comm /proc/65219/comm /proc/65698/comm /proc/65728/comm /proc/65807/comm /proc/65834/comm /proc/65845/comm /proc/65869/comm /proc/65986/comm /proc/66/comm /proc/66008/comm /proc/66064/comm /proc/66087/comm /proc/66365/comm /proc/66389/comm /proc/66466/comm /proc/66490/comm /proc/66825/comm /proc/66986/comm /proc/67/comm /proc/67009/comm /proc/67483/comm /proc/67507/comm /proc/67781/comm /proc/67826/comm /proc/67850/comm /proc/68/comm /proc/68012/comm /proc/68077/comm /proc/68092/comm /proc/68093/comm /proc/68094/comm /proc/68095/comm /proc/68096/comm /proc/68140/comm /proc/68237/comm /proc/68575/comm /proc/68610/comm /proc/68973/comm /proc/69/comm /proc/69183/comm /proc/69290/comm /proc/69314/comm /proc/69420/comm /proc/69749/comm /proc/69790/comm /proc/69832/comm /proc/69863/comm /proc/69892/comm /proc/699/comm /proc/70/comm /proc/70131/comm /proc/70173/comm /proc/702/comm /proc/70218/comm /proc/703/comm /proc/70737/comm /proc/70755/comm /proc/70780/comm /proc/70797/comm /proc/70803/comm /proc/70894/comm /proc/70895/comm /proc/70905/comm /proc/71056/comm /proc/717/comm /proc/72/comm /proc/72346/comm /proc/72371/comm /proc/73/comm /proc/74/comm /proc/75/comm /proc/75749/comm /proc/75770/comm /proc/75771/comm /proc/75772/comm /proc/75773/comm /proc/75774/comm /proc/75776/comm /proc/75778/comm /proc/75781/comm /proc/75782/comm /proc/75784/comm /proc/75785/comm /proc/75787/comm /proc/75788/comm /proc/75789/comm /proc/76/comm /proc/78/comm /proc/79/comm /proc/8/comm /proc/80/comm /proc/81/comm /proc/81615/comm /proc/81638/comm /proc/81835/comm /proc/81851/comm /proc/81862/comm /proc/81917/comm /proc/81918/comm /proc/81928/comm /proc/82/comm /proc/82118/comm /proc/83137/comm /proc/83162/comm /proc/84/comm /proc/84573/comm /proc/85/comm /proc/86/comm /proc/86140/comm /proc/862/comm /proc/86941/comm /proc/86942/comm /proc/87/comm /proc/88/comm /proc/88536/comm /proc/88553/comm /proc/89374/comm /proc/89397/comm /proc/90/comm /proc/90381/comm /proc/9075/comm /proc/9092/comm /proc/91/comm /proc/9108/comm /proc/9193/comm /proc/92/comm /proc/93/comm /proc/94/comm /proc/96/comm /proc/96239/comm /proc/96262/comm /proc/96427/comm /proc/96447/comm /proc/96453/comm /proc/96616/comm /proc/96617/comm /proc/96636/comm /proc/97/comm /proc/97039/comm /proc/98/comm /proc/9810/comm /proc/99/comm /proc/99834/comm /proc/self/comm /proc/thread-self/comm
+ '[' -n '' ']'
+ rm -f /var/run/libvirtd.pid
+ [[ -c /dev/kvm ]]
+ chmod 660 /dev/kvm
+ chown root:kvm /dev/kvm
+ CGROUPS=
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/blkio ']'
+ grep -w blkio /sys/fs/cgroup/cgroup.controllers
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/cpu ']'
+ grep -w cpu /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=cpu,
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/devices ']'
+ grep -w devices /sys/fs/cgroup/cgroup.controllers
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/freezer ']'
+ grep -w freezer /sys/fs/cgroup/cgroup.controllers
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/hugetlb ']'
+ grep -w hugetlb /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=hugetlb,
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/memory ']'
+ grep -w memory /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=memory,
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/net_cls ']'
+ grep -w net_cls /sys/fs/cgroup/cgroup.controllers
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/perf_event ']'
+ grep -w perf_event /sys/fs/cgroup/cgroup.controllers
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/rdma ']'
+ grep -w rdma /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=rdma,
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/misc ']'
+ grep -w misc /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=misc,
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/pids ']'
+ grep -w pids /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=pids,
+ cgcreate -g cpu,hugetlb,memory,rdma,misc,pids:/osh-libvirt
++ cat /proc/meminfo
++ grep HugePages_Total
++ tr -cd '[:digit:]'
+ hp_count=0
+ '[' 00 -gt 0 ']'
+ '[' -n 457eb676-33da-42ec-9a8c-9293d545c337 ']'
+ cgexec -g cpu,hugetlb,memory,rdma,misc,pids:/osh-libvirt systemd-run --scope --slice=system libvirtd --listen
++ mktemp --suffix .xml
+ tmpsecret=/tmp/tmp.zyOWC8g1Rd.xml
+ '[' -n '' ']'
+ trap cleanup EXIT
+ TIMEOUT=60
+ [[ ! -f /var/run/libvirtd.pid ]]
+ [[ 60 -gt 0 ]]
+ let TIMEOUT-=1
+ sleep 1
Running as unit: run-r0790462c26e74044b13e4fb129c65f20.scope; invocation ID: 5c5a6db4cacf43fb9618d9d86d8bd4d2
+ [[ ! -f /var/run/libvirtd.pid ]]
+ TIMEOUT=10
+ [[ ! -e /var/run/libvirt/libvirt-sock ]]
+ '[' -z '' ']'
+ '[' -n cinder ']'
++ awk '/key/{print $3}' /etc/ceph/ceph.client.cinder.keyring
+ CEPH_CINDER_KEYRING=AQDnMsxp4jczEhAAN9R9j6F38ffBBIXAJi9+4A==
+ '[' -n cinder ']'
+ create_virsh_libvirt_secret cinder 457eb676-33da-42ec-9a8c-9293d545c337 AQDnMsxp4jczEhAAN9R9j6F38ffBBIXAJi9+4A==
+ sec_user=cinder
+ sec_uuid=457eb676-33da-42ec-9a8c-9293d545c337
+ sec_ceph_keyring=AQDnMsxp4jczEhAAN9R9j6F38ffBBIXAJi9+4A==
+ cat
+ virsh secret-define --file /tmp/tmp.zyOWC8g1Rd.xml
Secret 457eb676-33da-42ec-9a8c-9293d545c337 created

+ virsh secret-set-value --secret 457eb676-33da-42ec-9a8c-9293d545c337 --base64 AQDnMsxp4jczEhAAN9R9j6F38ffBBIXAJi9+4A==
error: Passing secret value as command-line argument is insecure!
Secret value set

+ '[' -n '' ']'
+ '[' -n '' ']'
+ cleanup
+ rm -f /tmp/tmp.zyOWC8g1Rd.xml
+ '[' -n '' ']'
++ cat /var/run/libvirtd.pid
+ LIBVIRTD_PID=194406
+ kill 194406
+ tail --pid=194406 -f /dev/null
+ cgexec -g cpu,hugetlb,memory,rdma,misc,pids:/osh-libvirt systemd-run --scope --slice=system libvirtd --listen
Running as unit: run-r991f2c31ce1a444f86408b643fd4d8e2.scope; invocation ID: cec119de3269450c85748108e8c3d631