+ wait_for_file /etc/pki/CA/cacert.pem
+ local file=/etc/pki/CA/cacert.pem
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ sleep 1
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ sleep 1
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ sleep 1
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ sleep 1
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ sleep 1
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ wait_for_file /etc/pki/qemu/ca-cert.pem
+ local file=/etc/pki/qemu/ca-cert.pem
+ '[' '!' -f /etc/pki/qemu/ca-cert.pem ']'
+ wait_for_file /etc/pki/libvirt/servercert.pem
+ local file=/etc/pki/libvirt/servercert.pem
+ '[' '!' -f /etc/pki/libvirt/servercert.pem ']'
+ wait_for_file /etc/pki/libvirt/clientcert.pem
+ local file=/etc/pki/libvirt/clientcert.pem
+ '[' '!' -f /etc/pki/libvirt/clientcert.pem ']'
+ wait_for_file /etc/pki/qemu/server-cert.pem
+ local file=/etc/pki/qemu/server-cert.pem
+ '[' '!' -f /etc/pki/qemu/server-cert.pem ']'
+ wait_for_file /etc/pki/qemu/client-cert.pem
+ local file=/etc/pki/qemu/client-cert.pem
+ '[' '!' -f /etc/pki/qemu/client-cert.pem ']'
+ wait_for_file /etc/pki/libvirt/private/serverkey.pem
+ local file=/etc/pki/libvirt/private/serverkey.pem
+ '[' '!' -f /etc/pki/libvirt/private/serverkey.pem ']'
+ wait_for_file /etc/pki/libvirt/private/clientkey.pem
+ local file=/etc/pki/libvirt/private/clientkey.pem
+ '[' '!' -f /etc/pki/libvirt/private/clientkey.pem ']'
+ wait_for_file /etc/pki/qemu/server-key.pem
+ local file=/etc/pki/qemu/server-key.pem
+ '[' '!' -f /etc/pki/qemu/server-key.pem ']'
+ wait_for_file /etc/pki/qemu/client-key.pem
+ local file=/etc/pki/qemu/client-key.pem
+ '[' '!' -f /etc/pki/qemu/client-key.pem ']'
+ wait_for_file /etc/pki/libvirt-vnc/ca-cert.pem
+ local file=/etc/pki/libvirt-vnc/ca-cert.pem
+ '[' '!' -f /etc/pki/libvirt-vnc/ca-cert.pem ']'
+ wait_for_file /etc/pki/libvirt-vnc/server-cert.pem
+ local file=/etc/pki/libvirt-vnc/server-cert.pem
+ '[' '!' -f /etc/pki/libvirt-vnc/server-cert.pem ']'
+ wait_for_file /etc/pki/libvirt-vnc/server-key.pem
+ local file=/etc/pki/libvirt-vnc/server-key.pem
+ '[' '!' -f /etc/pki/libvirt-vnc/server-key.pem ']'
++ grep -w libvirtd
++ cat /proc/1/comm /proc/10/comm /proc/100/comm /proc/100293/comm /proc/100318/comm /proc/100363/comm /proc/100401/comm /proc/100702/comm /proc/100767/comm /proc/101534/comm /proc/102/comm /proc/103/comm /proc/10312/comm /proc/103282/comm /proc/104/comm /proc/105/comm /proc/106/comm /proc/108/comm /proc/10818/comm /proc/10819/comm /proc/108394/comm /proc/108433/comm /proc/1088/comm /proc/109/comm /proc/11/comm /proc/110/comm /proc/111/comm /proc/112/comm /proc/113/comm /proc/113212/comm /proc/113236/comm /proc/113597/comm /proc/113610/comm /proc/113611/comm /proc/114/comm /proc/114780/comm /proc/114804/comm /proc/114827/comm /proc/114861/comm /proc/115/comm /proc/115869/comm /proc/116/comm /proc/116200/comm /proc/116202/comm /proc/116626/comm /proc/116907/comm /proc/117/comm /proc/117271/comm /proc/117296/comm /proc/117520/comm /proc/117537/comm /proc/117543/comm /proc/117590/comm /proc/117591/comm /proc/117601/comm /proc/117729/comm /proc/119103/comm /proc/119144/comm /proc/119184/comm /proc/119235/comm /proc/119732/comm /proc/12/comm /proc/121647/comm /proc/12210/comm /proc/12240/comm /proc/12296/comm /proc/12320/comm /proc/12340/comm /proc/124480/comm /proc/12574/comm /proc/125942/comm /proc/12603/comm /proc/12659/comm /proc/12684/comm /proc/12703/comm /proc/129297/comm /proc/129707/comm /proc/129720/comm /proc/129721/comm /proc/13/comm /proc/131128/comm /proc/132070/comm /proc/132095/comm /proc/132178/comm /proc/132201/comm /proc/132855/comm /proc/133374/comm /proc/133446/comm /proc/133599/comm /proc/135320/comm /proc/135344/comm /proc/14/comm /proc/1421/comm /proc/147288/comm /proc/148708/comm /proc/148709/comm /proc/148710/comm /proc/15/comm /proc/150095/comm /proc/150096/comm /proc/150098/comm /proc/150622/comm /proc/151524/comm /proc/151682/comm /proc/151826/comm /proc/1526/comm /proc/1527/comm /proc/1528/comm /proc/152866/comm /proc/1529/comm /proc/1533/comm /proc/153614/comm /proc/153627/comm /proc/153628/comm /proc/154892/comm /proc/154893/comm /proc/16/comm /proc/1600/comm /proc/1604/comm /proc/1613/comm /proc/162147/comm /proc/162148/comm /proc/162150/comm /proc/162151/comm /proc/162357/comm /proc/162366/comm /proc/163194/comm /proc/163218/comm /proc/163319/comm /proc/163749/comm /proc/163961/comm /proc/163996/comm /proc/164009/comm /proc/164040/comm /proc/164041/comm /proc/164042/comm /proc/164043/comm /proc/164045/comm /proc/164320/comm /proc/164525/comm /proc/164552/comm /proc/165422/comm /proc/165615/comm /proc/165638/comm /proc/165664/comm /proc/165693/comm /proc/165905/comm /proc/165913/comm /proc/165998/comm /proc/166/comm /proc/166018/comm /proc/166060/comm /proc/166075/comm /proc/166295/comm /proc/166317/comm /proc/166373/comm /proc/166395/comm /proc/166530/comm /proc/166779/comm /proc/166798/comm /proc/167/comm /proc/167460/comm /proc/167462/comm /proc/167604/comm /proc/167628/comm /proc/167814/comm /proc/167831/comm /proc/167837/comm /proc/167920/comm /proc/167921/comm /proc/167931/comm /proc/168/comm /proc/168123/comm /proc/169/comm /proc/169839/comm /proc/169879/comm /proc/169961/comm /proc/170/comm /proc/170013/comm /proc/170038/comm /proc/170069/comm /proc/170094/comm /proc/170163/comm /proc/170195/comm /proc/170198/comm /proc/170234/comm /proc/170236/comm /proc/170283/comm /proc/170493/comm /proc/170768/comm /proc/170792/comm /proc/171/comm /proc/171328/comm /proc/172/comm /proc/173/comm /proc/174/comm /proc/177/comm /proc/178098/comm /proc/178235/comm /proc/178237/comm /proc/178248/comm /proc/178633/comm /proc/178910/comm /proc/178977/comm /proc/179/comm /proc/179030/comm /proc/179461/comm /proc/18/comm /proc/180/comm /proc/180378/comm /proc/180423/comm /proc/180434/comm /proc/180689/comm /proc/181567/comm /proc/181611/comm /proc/183/comm /proc/183251/comm /proc/183259/comm /proc/183739/comm /proc/183775/comm /proc/183776/comm /proc/183777/comm /proc/183862/comm /proc/183875/comm /proc/183876/comm /proc/183879/comm /proc/183880/comm /proc/183881/comm /proc/184631/comm /proc/184644/comm /proc/184910/comm /proc/184911/comm /proc/184943/comm /proc/185/comm /proc/185036/comm /proc/185037/comm /proc/185064/comm /proc/185065/comm /proc/185502/comm /proc/185729/comm /proc/185753/comm /proc/185960/comm /proc/185976/comm /proc/185982/comm /proc/186/comm /proc/186040/comm /proc/186041/comm /proc/186051/comm /proc/186285/comm /proc/18650/comm /proc/187/comm /proc/187306/comm /proc/187321/comm /proc/187322/comm /proc/187323/comm /proc/187324/comm /proc/187325/comm /proc/187326/comm /proc/187367/comm /proc/187585/comm /proc/187587/comm /proc/187623/comm /proc/187643/comm /proc/187691/comm /proc/187747/comm /proc/187819/comm /proc/187848/comm /proc/187883/comm /proc/187911/comm /proc/187934/comm /proc/187955/comm /proc/187988/comm /proc/188/comm /proc/188019/comm /proc/188090/comm /proc/188517/comm /proc/188531/comm /proc/188598/comm /proc/188607/comm /proc/189/comm /proc/19/comm /proc/190/comm /proc/190075/comm /proc/190102/comm /proc/190733/comm /proc/190771/comm /proc/190855/comm /proc/190881/comm /proc/190960/comm /proc/190974/comm /proc/191/comm /proc/192/comm /proc/192360/comm /proc/193/comm /proc/193049/comm /proc/193055/comm /proc/193058/comm /proc/194/comm /proc/194446/comm /proc/194703/comm /proc/194705/comm /proc/195/comm /proc/195567/comm /proc/195569/comm /proc/195674/comm /proc/195794/comm /proc/196091/comm /proc/196094/comm /proc/196320/comm /proc/196345/comm /proc/196388/comm /proc/196486/comm /proc/196537/comm /proc/196562/comm /proc/196591/comm /proc/196633/comm /proc/196646/comm /proc/196662/comm /proc/196798/comm /proc/196822/comm /proc/196823/comm /proc/196824/comm /proc/196825/comm /proc/197/comm /proc/2/comm /proc/20/comm /proc/202/comm /proc/20285/comm /proc/20428/comm /proc/20446/comm /proc/20470/comm /proc/20497/comm /proc/20512/comm /proc/21/comm /proc/217/comm /proc/22/comm /proc/220/comm /proc/221/comm /proc/226/comm /proc/23458/comm /proc/23523/comm /proc/23524/comm /proc/23537/comm /proc/24/comm /proc/248/comm /proc/25/comm /proc/26/comm /proc/26773/comm /proc/268/comm /proc/27/comm /proc/27045/comm /proc/27062/comm /proc/27086/comm /proc/27098/comm /proc/28/comm /proc/283/comm /proc/287/comm /proc/289/comm /proc/290/comm /proc/3/comm /proc/30/comm /proc/309/comm /proc/31/comm /proc/310/comm /proc/31393/comm /proc/314/comm /proc/31660/comm /proc/31855/comm /proc/31879/comm /proc/31891/comm /proc/32/comm /proc/33/comm /proc/34/comm /proc/341/comm /proc/349/comm /proc/350/comm /proc/357/comm /proc/36/comm /proc/36251/comm /proc/36522/comm /proc/36538/comm /proc/36563/comm /proc/36576/comm /proc/368/comm /proc/37/comm /proc/375/comm /proc/38/comm /proc/381/comm /proc/39/comm /proc/392/comm /proc/396/comm /proc/39762/comm /proc/39764/comm /proc/398/comm /proc/4/comm /proc/40/comm /proc/42/comm /proc/42138/comm /proc/42174/comm /proc/42185/comm /proc/42192/comm /proc/42209/comm /proc/42218/comm /proc/42280/comm /proc/42282/comm /proc/42284/comm /proc/42312/comm /proc/42373/comm /proc/42392/comm /proc/42411/comm /proc/42435/comm /proc/42540/comm /proc/42598/comm /proc/42699/comm /proc/42723/comm /proc/42749/comm /proc/43/comm /proc/43496/comm /proc/43521/comm /proc/43536/comm /proc/43562/comm /proc/43697/comm /proc/44/comm /proc/44011/comm /proc/44387/comm /proc/44746/comm /proc/44861/comm /proc/44884/comm /proc/44926/comm /proc/45/comm /proc/45257/comm /proc/45284/comm /proc/45295/comm /proc/45318/comm /proc/45352/comm /proc/45371/comm /proc/454/comm /proc/45766/comm /proc/45790/comm /proc/46/comm /proc/46009/comm /proc/46260/comm /proc/46284/comm /proc/46299/comm /proc/46324/comm /proc/46341/comm /proc/46372/comm /proc/46493/comm /proc/46538/comm /proc/46560/comm /proc/46603/comm /proc/48/comm /proc/48649/comm /proc/48673/comm /proc/48799/comm /proc/48822/comm /proc/49/comm /proc/49249/comm /proc/49262/comm /proc/49299/comm /proc/49352/comm /proc/49682/comm /proc/49707/comm /proc/49725/comm /proc/49750/comm /proc/49818/comm /proc/49945/comm /proc/5/comm /proc/50/comm /proc/50113/comm /proc/50137/comm /proc/50263/comm /proc/50437/comm /proc/50461/comm /proc/50846/comm /proc/50870/comm /proc/50897/comm /proc/50975/comm /proc/51/comm /proc/51162/comm /proc/51258/comm /proc/51283/comm /proc/51369/comm /proc/519/comm /proc/52/comm /proc/53179/comm /proc/53204/comm /proc/53385/comm /proc/53409/comm /proc/53439/comm /proc/53571/comm /proc/53761/comm /proc/53842/comm /proc/53908/comm /proc/54/comm /proc/55/comm /proc/56/comm /proc/57/comm /proc/58/comm /proc/58007/comm /proc/58032/comm /proc/58684/comm /proc/58716/comm /proc/58733/comm /proc/58762/comm /proc/58775/comm /proc/58804/comm /proc/58979/comm /proc/59002/comm /proc/59068/comm /proc/59123/comm /proc/59165/comm /proc/59261/comm /proc/6/comm /proc/60/comm /proc/61/comm /proc/611/comm /proc/615/comm /proc/617/comm /proc/62/comm /proc/620/comm /proc/623/comm /proc/62782/comm /proc/63/comm /proc/63729/comm /proc/63773/comm /proc/63881/comm /proc/63904/comm /proc/63921/comm /proc/63947/comm /proc/63968/comm /proc/63999/comm /proc/64/comm /proc/640/comm /proc/64183/comm /proc/64489/comm /proc/64591/comm /proc/646/comm /proc/64884/comm /proc/65013/comm /proc/65203/comm /proc/65204/comm /proc/65248/comm /proc/65249/comm /proc/65262/comm /proc/65293/comm /proc/65317/comm /proc/65449/comm /proc/65473/comm /proc/65532/comm /proc/65535/comm /proc/65725/comm /proc/65764/comm /proc/65776/comm /proc/65800/comm /proc/65832/comm /proc/65857/comm /proc/66/comm /proc/66317/comm /proc/66341/comm /proc/66591/comm /proc/66661/comm /proc/66687/comm /proc/66947/comm /proc/66972/comm /proc/67/comm /proc/67212/comm /proc/67227/comm /proc/67228/comm /proc/67229/comm /proc/67230/comm /proc/67231/comm /proc/67575/comm /proc/67599/comm /proc/67787/comm /proc/67882/comm /proc/68/comm /proc/68280/comm /proc/68303/comm /proc/68454/comm /proc/68501/comm /proc/68606/comm /proc/68746/comm /proc/68797/comm /proc/68970/comm /proc/69/comm /proc/69094/comm /proc/69136/comm /proc/69631/comm /proc/69671/comm /proc/69719/comm /proc/69821/comm /proc/69866/comm /proc/69896/comm /proc/69952/comm /proc/69987/comm /proc/70/comm /proc/70006/comm /proc/70105/comm /proc/70137/comm /proc/702/comm /proc/705/comm /proc/706/comm /proc/70617/comm /proc/70634/comm /proc/70640/comm /proc/70687/comm /proc/70688/comm /proc/70698/comm /proc/70820/comm /proc/72/comm /proc/720/comm /proc/72205/comm /proc/72246/comm /proc/73/comm /proc/73763/comm /proc/74/comm /proc/75/comm /proc/75801/comm /proc/75818/comm /proc/75819/comm /proc/75820/comm /proc/75821/comm /proc/75824/comm /proc/75825/comm /proc/75826/comm /proc/75830/comm /proc/75831/comm /proc/75832/comm /proc/75833/comm /proc/75834/comm /proc/75835/comm /proc/75837/comm /proc/76/comm /proc/78/comm /proc/79/comm /proc/8/comm /proc/80/comm /proc/81/comm /proc/81589/comm /proc/81612/comm /proc/81864/comm /proc/81880/comm /proc/81886/comm /proc/81957/comm /proc/81958/comm /proc/81968/comm /proc/82/comm /proc/82099/comm /proc/83130/comm /proc/83154/comm /proc/83968/comm /proc/83969/comm /proc/84/comm /proc/84483/comm /proc/84610/comm /proc/85/comm /proc/85163/comm /proc/86/comm /proc/865/comm /proc/87/comm /proc/88/comm /proc/88546/comm /proc/88558/comm /proc/89321/comm /proc/89346/comm /proc/9/comm /proc/90/comm /proc/90520/comm /proc/91/comm /proc/92/comm /proc/9211/comm /proc/9228/comm /proc/9244/comm /proc/92463/comm /proc/93/comm /proc/9326/comm /proc/94/comm /proc/96/comm /proc/96027/comm /proc/96051/comm /proc/96266/comm /proc/96284/comm /proc/96290/comm /proc/96498/comm /proc/96499/comm /proc/96511/comm /proc/96715/comm /proc/97/comm /proc/98/comm /proc/99/comm /proc/99427/comm /proc/9943/comm /proc/self/comm /proc/thread-self/comm
+ '[' -n '' ']'
+ rm -f /var/run/libvirtd.pid
+ [[ -c /dev/kvm ]]
+ chmod 660 /dev/kvm
+ chown root:kvm /dev/kvm
+ CGROUPS=
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/blkio ']'
+ grep -w blkio /sys/fs/cgroup/cgroup.controllers
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/cpu ']'
+ grep -w cpu /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=cpu,
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/devices ']'
+ grep -w devices /sys/fs/cgroup/cgroup.controllers
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/freezer ']'
+ grep -w freezer /sys/fs/cgroup/cgroup.controllers
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/hugetlb ']'
+ grep -w hugetlb /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=hugetlb,
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/memory ']'
+ grep -w memory /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=memory,
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/net_cls ']'
+ grep -w net_cls /sys/fs/cgroup/cgroup.controllers
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/perf_event ']'
+ grep -w perf_event /sys/fs/cgroup/cgroup.controllers
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/rdma ']'
+ grep -w rdma /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=rdma,
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/misc ']'
+ grep -w misc /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=misc,
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/pids ']'
+ grep -w pids /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=pids,
+ cgcreate -g cpu,hugetlb,memory,rdma,misc,pids:/osh-libvirt
++ cat /proc/meminfo
++ grep HugePages_Total
++ tr -cd '[:digit:]'
+ hp_count=0
+ '[' 00 -gt 0 ']'
+ '[' -n 457eb676-33da-42ec-9a8c-9293d545c337 ']'
+ cgexec -g cpu,hugetlb,memory,rdma,misc,pids:/osh-libvirt systemd-run --scope --slice=system libvirtd --listen
++ mktemp --suffix .xml
+ tmpsecret=/tmp/tmp.Sd1hxu79VY.xml
+ '[' -n '' ']'
+ trap cleanup EXIT
+ TIMEOUT=60
+ [[ ! -f /var/run/libvirtd.pid ]]
+ [[ 60 -gt 0 ]]
+ let TIMEOUT-=1
+ sleep 1
Running as unit: run-r4a06b5bbe0294e3dae157a5f4fb0aa29.scope; invocation ID: 289cce81502842a0a64688d67205fd2f
+ [[ ! -f /var/run/libvirtd.pid ]]
+ TIMEOUT=10
+ [[ ! -e /var/run/libvirt/libvirt-sock ]]
+ '[' -z '' ']'
+ '[' -n cinder ']'
++ awk '/key/{print $3}' /etc/ceph/ceph.client.cinder.keyring
+ CEPH_CINDER_KEYRING=AQC4xhZq3Jc8HhAACiJIhtUNBPB5Ob3sA0WohQ==
+ '[' -n cinder ']'
+ create_virsh_libvirt_secret cinder 457eb676-33da-42ec-9a8c-9293d545c337 AQC4xhZq3Jc8HhAACiJIhtUNBPB5Ob3sA0WohQ==
+ sec_user=cinder
+ sec_uuid=457eb676-33da-42ec-9a8c-9293d545c337
+ sec_ceph_keyring=AQC4xhZq3Jc8HhAACiJIhtUNBPB5Ob3sA0WohQ==
+ cat
+ virsh secret-define --file /tmp/tmp.Sd1hxu79VY.xml
Secret 457eb676-33da-42ec-9a8c-9293d545c337 created

+ virsh secret-set-value --secret 457eb676-33da-42ec-9a8c-9293d545c337 --base64 AQC4xhZq3Jc8HhAACiJIhtUNBPB5Ob3sA0WohQ==
error: Passing secret value as command-line argument is insecure!
Secret value set

+ '[' -n '' ']'
+ '[' -n '' ']'
+ cleanup
+ rm -f /tmp/tmp.Sd1hxu79VY.xml
+ '[' -n '' ']'
++ cat /var/run/libvirtd.pid
+ LIBVIRTD_PID=196846
+ kill 196846
+ tail --pid=196846 -f /dev/null
+ cgexec -g cpu,hugetlb,memory,rdma,misc,pids:/osh-libvirt systemd-run --scope --slice=system libvirtd --listen
Running as unit: run-r8e31fef2307a4e1fac0f191cb2e54e41.scope; invocation ID: 16788fd04e9046f98602b79e5ef64143