+ wait_for_file /etc/pki/CA/cacert.pem
+ local file=/etc/pki/CA/cacert.pem
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ sleep 1
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ sleep 1
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ sleep 1
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ sleep 1
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ sleep 1
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ wait_for_file /etc/pki/qemu/ca-cert.pem
+ local file=/etc/pki/qemu/ca-cert.pem
+ '[' '!' -f /etc/pki/qemu/ca-cert.pem ']'
+ wait_for_file /etc/pki/libvirt/servercert.pem
+ local file=/etc/pki/libvirt/servercert.pem
+ '[' '!' -f /etc/pki/libvirt/servercert.pem ']'
+ wait_for_file /etc/pki/libvirt/clientcert.pem
+ local file=/etc/pki/libvirt/clientcert.pem
+ '[' '!' -f /etc/pki/libvirt/clientcert.pem ']'
+ wait_for_file /etc/pki/qemu/server-cert.pem
+ local file=/etc/pki/qemu/server-cert.pem
+ '[' '!' -f /etc/pki/qemu/server-cert.pem ']'
+ wait_for_file /etc/pki/qemu/client-cert.pem
+ local file=/etc/pki/qemu/client-cert.pem
+ '[' '!' -f /etc/pki/qemu/client-cert.pem ']'
+ wait_for_file /etc/pki/libvirt/private/serverkey.pem
+ local file=/etc/pki/libvirt/private/serverkey.pem
+ '[' '!' -f /etc/pki/libvirt/private/serverkey.pem ']'
+ wait_for_file /etc/pki/libvirt/private/clientkey.pem
+ local file=/etc/pki/libvirt/private/clientkey.pem
+ '[' '!' -f /etc/pki/libvirt/private/clientkey.pem ']'
+ wait_for_file /etc/pki/qemu/server-key.pem
+ local file=/etc/pki/qemu/server-key.pem
+ '[' '!' -f /etc/pki/qemu/server-key.pem ']'
+ wait_for_file /etc/pki/qemu/client-key.pem
+ local file=/etc/pki/qemu/client-key.pem
+ '[' '!' -f /etc/pki/qemu/client-key.pem ']'
+ wait_for_file /etc/pki/libvirt-vnc/ca-cert.pem
+ local file=/etc/pki/libvirt-vnc/ca-cert.pem
+ '[' '!' -f /etc/pki/libvirt-vnc/ca-cert.pem ']'
+ wait_for_file /etc/pki/libvirt-vnc/server-cert.pem
+ local file=/etc/pki/libvirt-vnc/server-cert.pem
+ '[' '!' -f /etc/pki/libvirt-vnc/server-cert.pem ']'
+ wait_for_file /etc/pki/libvirt-vnc/server-key.pem
+ local file=/etc/pki/libvirt-vnc/server-key.pem
+ '[' '!' -f /etc/pki/libvirt-vnc/server-key.pem ']'
++ grep -w libvirtd
++ cat /proc/1/comm /proc/10/comm /proc/100/comm /proc/102/comm /proc/103/comm /proc/10316/comm /proc/104/comm /proc/105/comm /proc/106/comm /proc/108/comm /proc/10820/comm /proc/10821/comm /proc/1086/comm /proc/109/comm /proc/109802/comm /proc/109827/comm /proc/11/comm /proc/110/comm /proc/110222/comm /proc/110235/comm /proc/110236/comm /proc/111/comm /proc/111364/comm /proc/111391/comm /proc/111482/comm /proc/111516/comm /proc/111715/comm /proc/111909/comm /proc/112/comm /proc/112075/comm /proc/112077/comm /proc/113/comm /proc/113155/comm /proc/113406/comm /proc/113429/comm /proc/113530/comm /proc/113550/comm /proc/113562/comm /proc/113694/comm /proc/113695/comm /proc/113705/comm /proc/113862/comm /proc/114/comm /proc/115/comm /proc/115177/comm /proc/115200/comm /proc/115384/comm /proc/115408/comm /proc/115813/comm /proc/116/comm /proc/117/comm /proc/117722/comm /proc/119389/comm /proc/12/comm /proc/12207/comm /proc/122260/comm /proc/12240/comm /proc/12277/comm /proc/12321/comm /proc/12334/comm /proc/123492/comm /proc/123494/comm /proc/123974/comm /proc/125364/comm /proc/12570/comm /proc/125807/comm /proc/125820/comm /proc/125821/comm /proc/12602/comm /proc/12657/comm /proc/12682/comm /proc/12702/comm /proc/127284/comm /proc/128245/comm /proc/128269/comm /proc/128310/comm /proc/128345/comm /proc/128946/comm /proc/129470/comm /proc/129657/comm /proc/13/comm /proc/131106/comm /proc/131128/comm /proc/132450/comm /proc/132454/comm /proc/14/comm /proc/1419/comm /proc/146779/comm /proc/147897/comm /proc/148522/comm /proc/148537/comm /proc/148538/comm /proc/15/comm /proc/150029/comm /proc/150030/comm /proc/1524/comm /proc/1525/comm /proc/1526/comm /proc/1527/comm /proc/1531/comm /proc/157158/comm /proc/157159/comm /proc/157161/comm /proc/157162/comm /proc/157268/comm /proc/157286/comm /proc/157445/comm /proc/158241/comm /proc/158264/comm /proc/159034/comm /proc/159426/comm /proc/159474/comm /proc/1598/comm /proc/159907/comm /proc/16/comm /proc/160044/comm /proc/160057/comm /proc/160064/comm /proc/160065/comm /proc/160066/comm /proc/160067/comm /proc/1602/comm /proc/161047/comm /proc/161071/comm /proc/1611/comm /proc/161979/comm /proc/162002/comm /proc/162139/comm /proc/162192/comm /proc/162205/comm /proc/162295/comm /proc/162307/comm /proc/162622/comm /proc/162646/comm /proc/162659/comm /proc/162691/comm /proc/162873/comm /proc/162926/comm /proc/162939/comm /proc/163034/comm /proc/163336/comm /proc/163375/comm /proc/163563/comm /proc/163568/comm /proc/163811/comm /proc/163835/comm /proc/164037/comm /proc/164054/comm /proc/164060/comm /proc/164107/comm /proc/164108/comm /proc/164118/comm /proc/164358/comm /proc/16522/comm /proc/16523/comm /proc/166/comm /proc/166060/comm /proc/166707/comm /proc/166737/comm /proc/166774/comm /proc/166792/comm /proc/166807/comm /proc/166837/comm /proc/166867/comm /proc/166869/comm /proc/166916/comm /proc/166949/comm /proc/166979/comm /proc/167/comm /proc/167138/comm /proc/167188/comm /proc/167199/comm /proc/167676/comm /proc/167700/comm /proc/167780/comm /proc/168/comm /proc/168377/comm /proc/169/comm /proc/170/comm /proc/171/comm /proc/172/comm /proc/173/comm /proc/174/comm /proc/176/comm /proc/177/comm /proc/179/comm /proc/18/comm /proc/180/comm /proc/181282/comm /proc/181447/comm /proc/181483/comm /proc/181498/comm /proc/181793/comm /proc/182/comm /proc/182078/comm /proc/182096/comm /proc/182225/comm /proc/182226/comm /proc/182518/comm /proc/182573/comm /proc/182577/comm /proc/183/comm /proc/183990/comm /proc/184/comm /proc/184017/comm /proc/184379/comm /proc/185/comm /proc/185145/comm /proc/185492/comm /proc/185629/comm /proc/185640/comm /proc/185726/comm /proc/186/comm /proc/18611/comm /proc/18630/comm /proc/18653/comm /proc/18679/comm /proc/18697/comm /proc/187/comm /proc/187310/comm /proc/187319/comm /proc/187881/comm /proc/187905/comm /proc/187906/comm /proc/187994/comm /proc/188/comm /proc/188007/comm /proc/188008/comm /proc/188018/comm /proc/188019/comm /proc/188020/comm /proc/188579/comm /proc/189078/comm /proc/189092/comm /proc/189332/comm /proc/189428/comm /proc/189440/comm /proc/189599/comm /proc/189601/comm /proc/189628/comm /proc/189630/comm /proc/19/comm /proc/190/comm /proc/190199/comm /proc/190206/comm /proc/190476/comm /proc/190499/comm /proc/190743/comm /proc/190760/comm /proc/190766/comm /proc/190824/comm /proc/190825/comm /proc/190835/comm /proc/191/comm /proc/191102/comm /proc/192/comm /proc/192221/comm /proc/192238/comm /proc/192239/comm /proc/192240/comm /proc/192241/comm /proc/192242/comm /proc/192243/comm /proc/192292/comm /proc/192564/comm /proc/192573/comm /proc/192592/comm /proc/192641/comm /proc/192643/comm /proc/192669/comm /proc/192739/comm /proc/192786/comm /proc/192863/comm /proc/192890/comm /proc/192892/comm /proc/192894/comm /proc/192900/comm /proc/192974/comm /proc/192977/comm /proc/193006/comm /proc/193086/comm /proc/193786/comm /proc/193799/comm /proc/194014/comm /proc/194284/comm /proc/194309/comm /proc/194488/comm /proc/194501/comm /proc/197323/comm /proc/197347/comm /proc/197860/comm /proc/197916/comm /proc/198/comm /proc/198011/comm /proc/198044/comm /proc/198076/comm /proc/198087/comm /proc/2/comm /proc/20/comm /proc/200804/comm /proc/201536/comm /proc/201549/comm /proc/202202/comm /proc/202296/comm /proc/202432/comm /proc/202439/comm /proc/202459/comm /proc/202735/comm /proc/202953/comm /proc/203006/comm /proc/203032/comm /proc/203102/comm /proc/203341/comm /proc/203344/comm /proc/203388/comm /proc/203389/comm /proc/203390/comm /proc/21/comm /proc/216/comm /proc/21605/comm /proc/21675/comm /proc/21676/comm /proc/21692/comm /proc/219/comm /proc/22/comm /proc/220/comm /proc/225/comm /proc/24/comm /proc/247/comm /proc/24938/comm /proc/25/comm /proc/25199/comm /proc/25216/comm /proc/25240/comm /proc/25254/comm /proc/26/comm /proc/268/comm /proc/27/comm /proc/28/comm /proc/287/comm /proc/288/comm /proc/290/comm /proc/29531/comm /proc/29798/comm /proc/29815/comm /proc/29840/comm /proc/29852/comm /proc/3/comm /proc/30/comm /proc/309/comm /proc/31/comm /proc/310/comm /proc/32/comm /proc/33/comm /proc/34/comm /proc/340/comm /proc/34061/comm /proc/34340/comm /proc/34357/comm /proc/34383/comm /proc/34395/comm /proc/348/comm /proc/351/comm /proc/35199/comm /proc/356/comm /proc/36/comm /proc/366/comm /proc/37/comm /proc/375/comm /proc/37578/comm /proc/37580/comm /proc/377/comm /proc/38/comm /proc/387/comm /proc/39/comm /proc/392/comm /proc/397/comm /proc/398/comm /proc/39927/comm /proc/39951/comm /proc/39975/comm /proc/39988/comm /proc/39997/comm /proc/4/comm /proc/40/comm /proc/40027/comm /proc/40058/comm /proc/40081/comm /proc/40084/comm /proc/40104/comm /proc/40162/comm /proc/40181/comm /proc/402/comm /proc/40249/comm /proc/40296/comm /proc/40346/comm /proc/40399/comm /proc/40523/comm /proc/40551/comm /proc/40579/comm /proc/41270/comm /proc/41297/comm /proc/41315/comm /proc/41338/comm /proc/41471/comm /proc/41797/comm /proc/42/comm /proc/42170/comm /proc/42643/comm /proc/42668/comm /proc/42705/comm /proc/43/comm /proc/43046/comm /proc/43071/comm /proc/43084/comm /proc/43108/comm /proc/43139/comm /proc/43163/comm /proc/43506/comm /proc/43530/comm /proc/43672/comm /proc/44/comm /proc/44016/comm /proc/44038/comm /proc/44061/comm /proc/44081/comm /proc/44106/comm /proc/44125/comm /proc/44238/comm /proc/44282/comm /proc/44324/comm /proc/45/comm /proc/452/comm /proc/457/comm /proc/46/comm /proc/46510/comm /proc/46596/comm /proc/46620/comm /proc/46642/comm /proc/46667/comm /proc/46882/comm /proc/46894/comm /proc/46982/comm /proc/47039/comm /proc/47364/comm /proc/47387/comm /proc/47460/comm /proc/47484/comm /proc/47533/comm /proc/47842/comm /proc/47866/comm /proc/48/comm /proc/48141/comm /proc/48166/comm /proc/48587/comm /proc/48610/comm /proc/48636/comm /proc/48721/comm /proc/48929/comm /proc/49/comm /proc/49024/comm /proc/49110/comm /proc/49142/comm /proc/5/comm /proc/50/comm /proc/50145/comm /proc/50943/comm /proc/50966/comm /proc/51/comm /proc/51179/comm /proc/51203/comm /proc/51235/comm /proc/51399/comm /proc/51590/comm /proc/51679/comm /proc/52/comm /proc/522/comm /proc/54/comm /proc/55/comm /proc/55612/comm /proc/55636/comm /proc/56/comm /proc/56240/comm /proc/56268/comm /proc/56296/comm /proc/56321/comm /proc/56336/comm /proc/56360/comm /proc/56516/comm /proc/56541/comm /proc/56594/comm /proc/56633/comm /proc/56665/comm /proc/56741/comm /proc/57/comm /proc/58/comm /proc/6/comm /proc/60/comm /proc/60770/comm /proc/60906/comm /proc/60941/comm /proc/60994/comm /proc/61/comm /proc/61020/comm /proc/61040/comm /proc/61065/comm /proc/61083/comm /proc/61112/comm /proc/61334/comm /proc/614/comm /proc/617/comm /proc/61825/comm /proc/62/comm /proc/620/comm /proc/62136/comm /proc/62182/comm /proc/62279/comm /proc/62303/comm /proc/62400/comm /proc/62401/comm /proc/62431/comm /proc/62432/comm /proc/62438/comm /proc/62550/comm /proc/62573/comm /proc/626/comm /proc/627/comm /proc/62863/comm /proc/62888/comm /proc/62913/comm /proc/62939/comm /proc/62951/comm /proc/62975/comm /proc/63/comm /proc/63438/comm /proc/63462/comm /proc/63576/comm /proc/63721/comm /proc/63785/comm /proc/63808/comm /proc/64/comm /proc/64234/comm /proc/64249/comm /proc/64250/comm /proc/64251/comm /proc/64252/comm /proc/64253/comm /proc/643/comm /proc/64359/comm /proc/64384/comm /proc/645/comm /proc/64689/comm /proc/64713/comm /proc/64895/comm /proc/65022/comm /proc/65341/comm /proc/65414/comm /proc/65423/comm /proc/65445/comm /proc/65599/comm /proc/65625/comm /proc/65743/comm /proc/65977/comm /proc/66/comm /proc/66018/comm /proc/66070/comm /proc/66145/comm /proc/66184/comm /proc/66514/comm /proc/66684/comm /proc/66761/comm /proc/66903/comm /proc/66927/comm /proc/66958/comm /proc/66967/comm /proc/67/comm /proc/67007/comm /proc/67038/comm /proc/67065/comm /proc/67744/comm /proc/67762/comm /proc/67768/comm /proc/67826/comm /proc/67827/comm /proc/67837/comm /proc/67971/comm /proc/68/comm /proc/69/comm /proc/69339/comm /proc/69373/comm /proc/70/comm /proc/702/comm /proc/705/comm /proc/706/comm /proc/719/comm /proc/72/comm /proc/72921/comm /proc/72943/comm /proc/72944/comm /proc/72945/comm /proc/72946/comm /proc/72947/comm /proc/72948/comm /proc/72949/comm /proc/72950/comm /proc/72957/comm /proc/72958/comm /proc/72959/comm /proc/72960/comm /proc/72961/comm /proc/72962/comm /proc/73/comm /proc/74/comm /proc/75/comm /proc/76/comm /proc/78/comm /proc/78594/comm /proc/78618/comm /proc/78707/comm /proc/78724/comm /proc/78730/comm /proc/78857/comm /proc/78858/comm /proc/78868/comm /proc/78946/comm /proc/79/comm /proc/8/comm /proc/80/comm /proc/80167/comm /proc/80192/comm /proc/81/comm /proc/82/comm /proc/84/comm /proc/85/comm /proc/85251/comm /proc/85263/comm /proc/86/comm /proc/86103/comm /proc/86126/comm /proc/864/comm /proc/87/comm /proc/87055/comm /proc/88/comm /proc/88859/comm /proc/9/comm /proc/90/comm /proc/91/comm /proc/92/comm /proc/9210/comm /proc/9227/comm /proc/9243/comm /proc/92434/comm /proc/92692/comm /proc/92716/comm /proc/92875/comm /proc/92892/comm /proc/92898/comm /proc/92995/comm /proc/92996/comm /proc/93/comm /proc/93023/comm /proc/9326/comm /proc/93284/comm /proc/94/comm /proc/96/comm /proc/96410/comm /proc/96433/comm /proc/96468/comm /proc/96506/comm /proc/96806/comm /proc/96925/comm /proc/97/comm /proc/97614/comm /proc/97738/comm /proc/98/comm /proc/99/comm /proc/9943/comm /proc/self/comm /proc/thread-self/comm
+ '[' -n '' ']'
+ rm -f /var/run/libvirtd.pid
+ [[ -c /dev/kvm ]]
+ chmod 660 /dev/kvm
+ chown root:kvm /dev/kvm
+ CGROUPS=
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/blkio ']'
+ grep -w blkio /sys/fs/cgroup/cgroup.controllers
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/cpu ']'
+ grep -w cpu /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=cpu,
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/devices ']'
+ grep -w devices /sys/fs/cgroup/cgroup.controllers
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/freezer ']'
+ grep -w freezer /sys/fs/cgroup/cgroup.controllers
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/hugetlb ']'
+ grep -w hugetlb /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=hugetlb,
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/memory ']'
+ grep -w memory /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=memory,
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/net_cls ']'
+ grep -w net_cls /sys/fs/cgroup/cgroup.controllers
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/perf_event ']'
+ grep -w perf_event /sys/fs/cgroup/cgroup.controllers
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/rdma ']'
+ grep -w rdma /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=rdma,
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/misc ']'
+ grep -w misc /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=misc,
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/pids ']'
+ grep -w pids /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=pids,
+ cgcreate -g cpu,hugetlb,memory,rdma,misc,pids:/osh-libvirt
++ cat /proc/meminfo
++ grep HugePages_Total
++ tr -cd '[:digit:]'
+ hp_count=0
+ '[' 00 -gt 0 ']'
+ '[' -n 457eb676-33da-42ec-9a8c-9293d545c337 ']'
+ cgexec -g cpu,hugetlb,memory,rdma,misc,pids:/osh-libvirt systemd-run --scope --slice=system libvirtd --listen
++ mktemp --suffix .xml
+ tmpsecret=/tmp/tmp.qNhmaYFPYg.xml
+ '[' -n '' ']'
+ trap cleanup EXIT
+ TIMEOUT=60
+ [[ ! -f /var/run/libvirtd.pid ]]
+ [[ 60 -gt 0 ]]
+ let TIMEOUT-=1
+ sleep 1
Running as unit: run-rbc64367f26ac44009945d5f15e7d26a2.scope; invocation ID: 90a0aefaa2ff4a8eb6bb21b19f736f92
+ [[ ! -f /var/run/libvirtd.pid ]]
+ TIMEOUT=10
+ [[ ! -e /var/run/libvirt/libvirt-sock ]]
+ '[' -z '' ']'
+ '[' -n cinder ']'
++ awk '/key/{print $3}' /etc/ceph/ceph.client.cinder.keyring
+ CEPH_CINDER_KEYRING=AQBkuBpqnhDgLBAAW6byvT/5kRzSHcPUnikyBA==
+ '[' -n cinder ']'
+ create_virsh_libvirt_secret cinder 457eb676-33da-42ec-9a8c-9293d545c337 AQBkuBpqnhDgLBAAW6byvT/5kRzSHcPUnikyBA==
+ sec_user=cinder
+ sec_uuid=457eb676-33da-42ec-9a8c-9293d545c337
+ sec_ceph_keyring=AQBkuBpqnhDgLBAAW6byvT/5kRzSHcPUnikyBA==
+ cat
+ virsh secret-define --file /tmp/tmp.qNhmaYFPYg.xml
Secret 457eb676-33da-42ec-9a8c-9293d545c337 created

+ virsh secret-set-value --secret 457eb676-33da-42ec-9a8c-9293d545c337 --base64 AQBkuBpqnhDgLBAAW6byvT/5kRzSHcPUnikyBA==
error: Passing secret value as command-line argument is insecure!
Secret value set

+ '[' -n '' ']'
+ '[' -n '' ']'
+ cleanup
+ rm -f /tmp/tmp.qNhmaYFPYg.xml
+ '[' -n '' ']'
++ cat /var/run/libvirtd.pid
+ LIBVIRTD_PID=203413
+ kill 203413
+ tail --pid=203413 -f /dev/null
+ cgexec -g cpu,hugetlb,memory,rdma,misc,pids:/osh-libvirt systemd-run --scope --slice=system libvirtd --listen
Running as unit: run-rd8228f2c8af3490ead329beb16963fc3.scope; invocation ID: 80cacde3d4234e0894334f2e0dd8138d