+ wait_for_file /etc/pki/CA/cacert.pem
+ local file=/etc/pki/CA/cacert.pem
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ sleep 1
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ sleep 1
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ sleep 1
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ sleep 1
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ sleep 1
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ wait_for_file /etc/pki/qemu/ca-cert.pem
+ local file=/etc/pki/qemu/ca-cert.pem
+ '[' '!' -f /etc/pki/qemu/ca-cert.pem ']'
+ wait_for_file /etc/pki/libvirt/servercert.pem
+ local file=/etc/pki/libvirt/servercert.pem
+ '[' '!' -f /etc/pki/libvirt/servercert.pem ']'
+ wait_for_file /etc/pki/libvirt/clientcert.pem
+ local file=/etc/pki/libvirt/clientcert.pem
+ '[' '!' -f /etc/pki/libvirt/clientcert.pem ']'
+ wait_for_file /etc/pki/qemu/server-cert.pem
+ local file=/etc/pki/qemu/server-cert.pem
+ '[' '!' -f /etc/pki/qemu/server-cert.pem ']'
+ wait_for_file /etc/pki/qemu/client-cert.pem
+ local file=/etc/pki/qemu/client-cert.pem
+ '[' '!' -f /etc/pki/qemu/client-cert.pem ']'
+ wait_for_file /etc/pki/libvirt/private/serverkey.pem
+ local file=/etc/pki/libvirt/private/serverkey.pem
+ '[' '!' -f /etc/pki/libvirt/private/serverkey.pem ']'
+ wait_for_file /etc/pki/libvirt/private/clientkey.pem
+ local file=/etc/pki/libvirt/private/clientkey.pem
+ '[' '!' -f /etc/pki/libvirt/private/clientkey.pem ']'
+ wait_for_file /etc/pki/qemu/server-key.pem
+ local file=/etc/pki/qemu/server-key.pem
+ '[' '!' -f /etc/pki/qemu/server-key.pem ']'
+ wait_for_file /etc/pki/qemu/client-key.pem
+ local file=/etc/pki/qemu/client-key.pem
+ '[' '!' -f /etc/pki/qemu/client-key.pem ']'
+ wait_for_file /etc/pki/libvirt-vnc/ca-cert.pem
+ local file=/etc/pki/libvirt-vnc/ca-cert.pem
+ '[' '!' -f /etc/pki/libvirt-vnc/ca-cert.pem ']'
+ wait_for_file /etc/pki/libvirt-vnc/server-cert.pem
+ local file=/etc/pki/libvirt-vnc/server-cert.pem
+ '[' '!' -f /etc/pki/libvirt-vnc/server-cert.pem ']'
+ wait_for_file /etc/pki/libvirt-vnc/server-key.pem
+ local file=/etc/pki/libvirt-vnc/server-key.pem
+ '[' '!' -f /etc/pki/libvirt-vnc/server-key.pem ']'
++ grep -w libvirtd
++ cat /proc/1/comm /proc/10/comm /proc/100/comm /proc/10150/comm /proc/101674/comm /proc/102/comm /proc/103/comm /proc/104/comm /proc/105/comm /proc/106/comm /proc/107793/comm /proc/107817/comm /proc/107883/comm /proc/108/comm /proc/108181/comm /proc/108224/comm /proc/108225/comm /proc/109/comm /proc/10908/comm /proc/10909/comm /proc/109266/comm /proc/109294/comm /proc/109317/comm /proc/109359/comm /proc/109771/comm /proc/109930/comm /proc/109932/comm /proc/109934/comm /proc/11/comm /proc/110/comm /proc/110998/comm /proc/111/comm /proc/111207/comm /proc/111335/comm /proc/111358/comm /proc/111473/comm /proc/111490/comm /proc/111496/comm /proc/111637/comm /proc/111640/comm /proc/111690/comm /proc/111791/comm /proc/112/comm /proc/113/comm /proc/113147/comm /proc/113172/comm /proc/113185/comm /proc/113210/comm /proc/114/comm /proc/115/comm /proc/115289/comm /proc/115835/comm /proc/115876/comm /proc/116/comm /proc/117/comm /proc/117050/comm /proc/1179/comm /proc/118020/comm /proc/118059/comm /proc/119520/comm /proc/119525/comm /proc/12/comm /proc/120558/comm /proc/122346/comm /proc/122975/comm /proc/122988/comm /proc/122989/comm /proc/12337/comm /proc/12367/comm /proc/12406/comm /proc/124394/comm /proc/12449/comm /proc/12461/comm /proc/126154/comm /proc/126177/comm /proc/126192/comm /proc/126216/comm /proc/126380/comm /proc/126796/comm /proc/12696/comm /proc/12725/comm /proc/127326/comm /proc/127527/comm /proc/12783/comm /proc/12806/comm /proc/12827/comm /proc/1284/comm /proc/1285/comm /proc/1286/comm /proc/1287/comm /proc/128769/comm /proc/128792/comm /proc/128989/comm /proc/129329/comm /proc/13/comm /proc/130201/comm /proc/132734/comm /proc/132772/comm /proc/132831/comm /proc/133128/comm /proc/133836/comm /proc/133841/comm /proc/134250/comm /proc/134316/comm /proc/134341/comm /proc/134342/comm /proc/135694/comm /proc/135695/comm /proc/1361/comm /proc/1365/comm /proc/14/comm /proc/142884/comm /proc/142885/comm /proc/142887/comm /proc/142888/comm /proc/142929/comm /proc/142930/comm /proc/1430/comm /proc/143144/comm /proc/1434/comm /proc/1443/comm /proc/15/comm /proc/155133/comm /proc/155158/comm /proc/155550/comm /proc/155594/comm /proc/155607/comm /proc/155640/comm /proc/155641/comm /proc/155642/comm /proc/155643/comm /proc/156031/comm /proc/156097/comm /proc/156971/comm /proc/156988/comm /proc/156989/comm /proc/157289/comm /proc/157312/comm /proc/157334/comm /proc/157357/comm /proc/157576/comm /proc/157595/comm /proc/157626/comm /proc/157651/comm /proc/157698/comm /proc/157711/comm /proc/157843/comm /proc/157869/comm /proc/157933/comm /proc/157956/comm /proc/158122/comm /proc/158401/comm /proc/158406/comm /proc/158958/comm /proc/158982/comm /proc/159194/comm /proc/159210/comm /proc/159216/comm /proc/159397/comm /proc/159398/comm /proc/159408/comm /proc/159496/comm /proc/16/comm /proc/160126/comm /proc/161444/comm /proc/161501/comm /proc/161662/comm /proc/161757/comm /proc/161788/comm /proc/161835/comm /proc/161865/comm /proc/161976/comm /proc/162011/comm /proc/162028/comm /proc/162069/comm /proc/162173/comm /proc/162229/comm /proc/162253/comm /proc/162491/comm /proc/162514/comm /proc/163074/comm /proc/166/comm /proc/167/comm /proc/167408/comm /proc/167732/comm /proc/167939/comm /proc/168/comm /proc/168058/comm /proc/169/comm /proc/169416/comm /proc/170/comm /proc/170604/comm /proc/171/comm /proc/172/comm /proc/172612/comm /proc/172673/comm /proc/172674/comm /proc/172811/comm /proc/172824/comm /proc/172825/comm /proc/173/comm /proc/173738/comm /proc/173829/comm /proc/173861/comm /proc/174/comm /proc/174046/comm /proc/174057/comm /proc/174241/comm /proc/174243/comm /proc/174257/comm /proc/174259/comm /proc/174846/comm /proc/174854/comm /proc/175111/comm /proc/175134/comm /proc/175249/comm /proc/175268/comm /proc/175274/comm /proc/175391/comm /proc/175392/comm /proc/175402/comm /proc/175466/comm /proc/176/comm /proc/176899/comm /proc/176969/comm /proc/177/comm /proc/177014/comm /proc/177041/comm /proc/177060/comm /proc/177086/comm /proc/177142/comm /proc/177356/comm /proc/177379/comm /proc/177398/comm /proc/177426/comm /proc/177804/comm /proc/177817/comm /proc/177978/comm /proc/177995/comm /proc/179/comm /proc/18/comm /proc/180/comm /proc/181427/comm /proc/181656/comm /proc/181659/comm /proc/182/comm /proc/182025/comm /proc/182983/comm /proc/183/comm /proc/183494/comm /proc/183518/comm /proc/183690/comm /proc/184/comm /proc/184116/comm /proc/184161/comm /proc/184242/comm /proc/184271/comm /proc/184336/comm /proc/184347/comm /proc/184808/comm /proc/185/comm /proc/186/comm /proc/186793/comm /proc/186794/comm /proc/186795/comm /proc/187/comm /proc/187079/comm /proc/187146/comm /proc/187153/comm /proc/187186/comm /proc/187187/comm /proc/187200/comm /proc/187214/comm /proc/187215/comm /proc/187728/comm /proc/187731/comm /proc/187735/comm /proc/187919/comm /proc/188/comm /proc/188340/comm /proc/188347/comm /proc/188724/comm /proc/188739/comm /proc/188740/comm /proc/188741/comm /proc/188742/comm /proc/188743/comm /proc/188744/comm /proc/188802/comm /proc/188874/comm /proc/188961/comm /proc/189/comm /proc/189376/comm /proc/189408/comm /proc/189432/comm /proc/189452/comm /proc/189506/comm /proc/189715/comm /proc/189738/comm /proc/189785/comm /proc/189965/comm /proc/19/comm /proc/190007/comm /proc/190024/comm /proc/190030/comm /proc/190082/comm /proc/190084/comm /proc/190105/comm /proc/190333/comm /proc/190400/comm /proc/190406/comm /proc/190524/comm /proc/190571/comm /proc/190597/comm /proc/190777/comm /proc/190859/comm /proc/190860/comm /proc/190861/comm /proc/190862/comm /proc/190865/comm /proc/190870/comm /proc/190871/comm /proc/190872/comm /proc/191/comm /proc/192/comm /proc/193/comm /proc/194/comm /proc/19430/comm /proc/19451/comm /proc/19473/comm /proc/19500/comm /proc/19517/comm /proc/196/comm /proc/198/comm /proc/2/comm /proc/20/comm /proc/202/comm /proc/21/comm /proc/212/comm /proc/21554/comm /proc/21559/comm /proc/21560/comm /proc/21580/comm /proc/22/comm /proc/220/comm /proc/221/comm /proc/226/comm /proc/24/comm /proc/24095/comm /proc/24351/comm /proc/24614/comm /proc/24632/comm /proc/24657/comm /proc/24669/comm /proc/248/comm /proc/25/comm /proc/26/comm /proc/27/comm /proc/28/comm /proc/283/comm /proc/286/comm /proc/287/comm /proc/288/comm /proc/29044/comm /proc/29315/comm /proc/29332/comm /proc/29357/comm /proc/29369/comm /proc/3/comm /proc/30/comm /proc/308/comm /proc/309/comm /proc/31/comm /proc/313/comm /proc/32/comm /proc/33/comm /proc/33548/comm /proc/33816/comm /proc/33833/comm /proc/33858/comm /proc/33870/comm /proc/34/comm /proc/347/comm /proc/35/comm /proc/350/comm /proc/351/comm /proc/35328/comm /proc/35330/comm /proc/356/comm /proc/36/comm /proc/362/comm /proc/368/comm /proc/37/comm /proc/377/comm /proc/38/comm /proc/386/comm /proc/39/comm /proc/392/comm /proc/39493/comm /proc/395/comm /proc/39521/comm /proc/39535/comm /proc/39557/comm /proc/39562/comm /proc/39581/comm /proc/396/comm /proc/39635/comm /proc/39644/comm /proc/39648/comm /proc/39667/comm /proc/39739/comm /proc/39758/comm /proc/39778/comm /proc/39796/comm /proc/39907/comm /proc/39965/comm /proc/4/comm /proc/40/comm /proc/40109/comm /proc/40132/comm /proc/40156/comm /proc/40342/comm /proc/40833/comm /proc/40848/comm /proc/40883/comm /proc/40897/comm /proc/41130/comm /proc/41341/comm /proc/41759/comm /proc/42/comm /proc/42184/comm /proc/42206/comm /proc/42251/comm /proc/42623/comm /proc/42645/comm /proc/42659/comm /proc/42683/comm /proc/42715/comm /proc/42735/comm /proc/43/comm /proc/43090/comm /proc/43114/comm /proc/43279/comm /proc/43564/comm /proc/43593/comm /proc/43622/comm /proc/43647/comm /proc/43667/comm /proc/43703/comm /proc/43802/comm /proc/43847/comm /proc/43894/comm /proc/44/comm /proc/45/comm /proc/454/comm /proc/45947/comm /proc/45981/comm /proc/46/comm /proc/46039/comm /proc/46067/comm /proc/46246/comm /proc/46259/comm /proc/46286/comm /proc/46403/comm /proc/46731/comm /proc/46755/comm /proc/46841/comm /proc/46864/comm /proc/46917/comm /proc/47030/comm /proc/47204/comm /proc/47226/comm /proc/47347/comm /proc/47463/comm /proc/47487/comm /proc/47682/comm /proc/48/comm /proc/48107/comm /proc/48133/comm /proc/48157/comm /proc/48240/comm /proc/48320/comm /proc/48417/comm /proc/48442/comm /proc/48547/comm /proc/49/comm /proc/49366/comm /proc/5/comm /proc/50/comm /proc/50147/comm /proc/50173/comm /proc/50321/comm /proc/50345/comm /proc/50426/comm /proc/50520/comm /proc/50727/comm /proc/50806/comm /proc/51/comm /proc/516/comm /proc/52/comm /proc/54/comm /proc/54565/comm /proc/54590/comm /proc/55/comm /proc/55269/comm /proc/55293/comm /proc/55308/comm /proc/55331/comm /proc/55360/comm /proc/55382/comm /proc/55585/comm /proc/55609/comm /proc/55647/comm /proc/55688/comm /proc/55722/comm /proc/55779/comm /proc/56/comm /proc/57/comm /proc/58/comm /proc/59250/comm /proc/59267/comm /proc/59525/comm /proc/59554/comm /proc/59611/comm /proc/59636/comm /proc/59645/comm /proc/59670/comm /proc/59688/comm /proc/59712/comm /proc/59932/comm /proc/6/comm /proc/60/comm /proc/60183/comm /proc/60401/comm /proc/60599/comm /proc/60640/comm /proc/60773/comm /proc/60797/comm /proc/60798/comm /proc/60799/comm /proc/60800/comm /proc/60881/comm /proc/609/comm /proc/61/comm /proc/61036/comm /proc/61068/comm /proc/61118/comm /proc/61146/comm /proc/613/comm /proc/61446/comm /proc/61469/comm /proc/615/comm /proc/61542/comm /proc/61576/comm /proc/61695/comm /proc/61747/comm /proc/61844/comm /proc/61966/comm /proc/62/comm /proc/62066/comm /proc/62091/comm /proc/621/comm /proc/622/comm /proc/62591/comm /proc/62615/comm /proc/62674/comm /proc/62694/comm /proc/62695/comm /proc/62696/comm /proc/62697/comm /proc/62698/comm /proc/62837/comm /proc/62860/comm /proc/63/comm /proc/63012/comm /proc/63037/comm /proc/63100/comm /proc/63307/comm /proc/63562/comm /proc/63610/comm /proc/63726/comm /proc/63749/comm /proc/63855/comm /proc/63856/comm /proc/639/comm /proc/63915/comm /proc/64/comm /proc/640/comm /proc/64050/comm /proc/64145/comm /proc/64185/comm /proc/64226/comm /proc/64380/comm /proc/64695/comm /proc/64778/comm /proc/64836/comm /proc/64902/comm /proc/65059/comm /proc/65081/comm /proc/65124/comm /proc/65234/comm /proc/65257/comm /proc/65681/comm /proc/65698/comm /proc/65704/comm /proc/65765/comm /proc/65766/comm /proc/65776/comm /proc/65864/comm /proc/66/comm /proc/67/comm /proc/67214/comm /proc/67247/comm /proc/68/comm /proc/69/comm /proc/694/comm /proc/697/comm /proc/698/comm /proc/70/comm /proc/70438/comm /proc/70519/comm /proc/70555/comm /proc/70556/comm /proc/70557/comm /proc/70558/comm /proc/70559/comm /proc/70561/comm /proc/70562/comm /proc/70563/comm /proc/70566/comm /proc/70567/comm /proc/70568/comm /proc/70570/comm /proc/70573/comm /proc/70574/comm /proc/711/comm /proc/72/comm /proc/73/comm /proc/74/comm /proc/75/comm /proc/76/comm /proc/76645/comm /proc/76668/comm /proc/76783/comm /proc/76800/comm /proc/76806/comm /proc/76983/comm /proc/76984/comm /proc/76994/comm /proc/77064/comm /proc/78/comm /proc/78187/comm /proc/78212/comm /proc/78361/comm /proc/79/comm /proc/8/comm /proc/80/comm /proc/81/comm /proc/81112/comm /proc/82/comm /proc/83146/comm /proc/83608/comm /proc/83623/comm /proc/84/comm /proc/84337/comm /proc/84360/comm /proc/85/comm /proc/85131/comm /proc/858/comm /proc/86/comm /proc/87/comm /proc/87784/comm /proc/87785/comm /proc/87973/comm /proc/88/comm /proc/89431/comm /proc/90/comm /proc/9043/comm /proc/90430/comm /proc/90455/comm /proc/9060/comm /proc/90758/comm /proc/9076/comm /proc/90774/comm /proc/90780/comm /proc/90986/comm /proc/90987/comm /proc/90998/comm /proc/91/comm /proc/91220/comm /proc/9158/comm /proc/92/comm /proc/93/comm /proc/94/comm /proc/94520/comm /proc/94544/comm /proc/94575/comm /proc/94631/comm /proc/94967/comm /proc/95032/comm /proc/95766/comm /proc/96/comm /proc/96826/comm /proc/96957/comm /proc/97/comm /proc/9775/comm /proc/98/comm /proc/98667/comm /proc/99/comm /proc/self/comm /proc/thread-self/comm
+ '[' -n '' ']'
+ rm -f /var/run/libvirtd.pid
+ [[ -c /dev/kvm ]]
+ chmod 660 /dev/kvm
+ chown root:kvm /dev/kvm
+ CGROUPS=
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/blkio ']'
+ grep -w blkio /sys/fs/cgroup/cgroup.controllers
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/cpu ']'
+ grep -w cpu /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=cpu,
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/devices ']'
+ grep -w devices /sys/fs/cgroup/cgroup.controllers
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/freezer ']'
+ grep -w freezer /sys/fs/cgroup/cgroup.controllers
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/hugetlb ']'
+ grep -w hugetlb /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=hugetlb,
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/memory ']'
+ grep -w memory /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=memory,
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/net_cls ']'
+ grep -w net_cls /sys/fs/cgroup/cgroup.controllers
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/perf_event ']'
+ grep -w perf_event /sys/fs/cgroup/cgroup.controllers
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/rdma ']'
+ grep -w rdma /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=rdma,
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/misc ']'
+ grep -w misc /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=misc,
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/pids ']'
+ grep -w pids /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=pids,
+ cgcreate -g cpu,hugetlb,memory,rdma,misc,pids:/osh-libvirt
++ cat /proc/meminfo
++ grep HugePages_Total
++ tr -cd '[:digit:]'
+ hp_count=0
+ '[' 00 -gt 0 ']'
+ '[' -n 457eb676-33da-42ec-9a8c-9293d545c337 ']'
+ cgexec -g cpu,hugetlb,memory,rdma,misc,pids:/osh-libvirt systemd-run --scope --slice=system libvirtd --listen
++ mktemp --suffix .xml
+ tmpsecret=/tmp/tmp.ui7JKgxoQM.xml
+ '[' -n '' ']'
+ trap cleanup EXIT
+ TIMEOUT=60
+ [[ ! -f /var/run/libvirtd.pid ]]
+ [[ 60 -gt 0 ]]
+ let TIMEOUT-=1
+ sleep 1
Running as unit: run-r8db43dc67a394eb3b7083be5d533cc04.scope; invocation ID: 06f3802ebcf3481c9854c02150471c1b
+ [[ ! -f /var/run/libvirtd.pid ]]
+ TIMEOUT=10
+ [[ ! -e /var/run/libvirt/libvirt-sock ]]
+ '[' -z '' ']'
+ '[' -n cinder ']'
++ awk '/key/{print $3}' /etc/ceph/ceph.client.cinder.keyring
+ CEPH_CINDER_KEYRING=AQDHzAdqwQ7aKRAAb83gfSMky8ARv0fOq8ZaEw==
+ '[' -n cinder ']'
+ create_virsh_libvirt_secret cinder 457eb676-33da-42ec-9a8c-9293d545c337 AQDHzAdqwQ7aKRAAb83gfSMky8ARv0fOq8ZaEw==
+ sec_user=cinder
+ sec_uuid=457eb676-33da-42ec-9a8c-9293d545c337
+ sec_ceph_keyring=AQDHzAdqwQ7aKRAAb83gfSMky8ARv0fOq8ZaEw==
+ cat
+ virsh secret-define --file /tmp/tmp.ui7JKgxoQM.xml
Secret 457eb676-33da-42ec-9a8c-9293d545c337 created

+ virsh secret-set-value --secret 457eb676-33da-42ec-9a8c-9293d545c337 --base64 AQDHzAdqwQ7aKRAAb83gfSMky8ARv0fOq8ZaEw==
error: Passing secret value as command-line argument is insecure!
Secret value set

+ '[' -n '' ']'
+ '[' -n '' ']'
+ cleanup
+ rm -f /tmp/tmp.ui7JKgxoQM.xml
+ '[' -n '' ']'
++ cat /var/run/libvirtd.pid
+ LIBVIRTD_PID=190892
+ kill 190892
+ tail --pid=190892 -f /dev/null
+ cgexec -g cpu,hugetlb,memory,rdma,misc,pids:/osh-libvirt systemd-run --scope --slice=system libvirtd --listen
Running as unit: run-rb31067413b28473dabc8d515dc5e817b.scope; invocation ID: a3bb465b46bc4d579cb6e6078e347e5c