+ wait_for_file /etc/pki/CA/cacert.pem
+ local file=/etc/pki/CA/cacert.pem
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ sleep 1
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ sleep 1
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ sleep 1
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ sleep 1
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ sleep 1
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ wait_for_file /etc/pki/qemu/ca-cert.pem
+ local file=/etc/pki/qemu/ca-cert.pem
+ '[' '!' -f /etc/pki/qemu/ca-cert.pem ']'
+ wait_for_file /etc/pki/libvirt/servercert.pem
+ local file=/etc/pki/libvirt/servercert.pem
+ '[' '!' -f /etc/pki/libvirt/servercert.pem ']'
+ wait_for_file /etc/pki/libvirt/clientcert.pem
+ local file=/etc/pki/libvirt/clientcert.pem
+ '[' '!' -f /etc/pki/libvirt/clientcert.pem ']'
+ wait_for_file /etc/pki/qemu/server-cert.pem
+ local file=/etc/pki/qemu/server-cert.pem
+ '[' '!' -f /etc/pki/qemu/server-cert.pem ']'
+ wait_for_file /etc/pki/qemu/client-cert.pem
+ local file=/etc/pki/qemu/client-cert.pem
+ '[' '!' -f /etc/pki/qemu/client-cert.pem ']'
+ wait_for_file /etc/pki/libvirt/private/serverkey.pem
+ local file=/etc/pki/libvirt/private/serverkey.pem
+ '[' '!' -f /etc/pki/libvirt/private/serverkey.pem ']'
+ wait_for_file /etc/pki/libvirt/private/clientkey.pem
+ local file=/etc/pki/libvirt/private/clientkey.pem
+ '[' '!' -f /etc/pki/libvirt/private/clientkey.pem ']'
+ wait_for_file /etc/pki/qemu/server-key.pem
+ local file=/etc/pki/qemu/server-key.pem
+ '[' '!' -f /etc/pki/qemu/server-key.pem ']'
+ wait_for_file /etc/pki/qemu/client-key.pem
+ local file=/etc/pki/qemu/client-key.pem
+ '[' '!' -f /etc/pki/qemu/client-key.pem ']'
+ wait_for_file /etc/pki/libvirt-vnc/ca-cert.pem
+ local file=/etc/pki/libvirt-vnc/ca-cert.pem
+ '[' '!' -f /etc/pki/libvirt-vnc/ca-cert.pem ']'
+ wait_for_file /etc/pki/libvirt-vnc/server-cert.pem
+ local file=/etc/pki/libvirt-vnc/server-cert.pem
+ '[' '!' -f /etc/pki/libvirt-vnc/server-cert.pem ']'
+ wait_for_file /etc/pki/libvirt-vnc/server-key.pem
+ local file=/etc/pki/libvirt-vnc/server-key.pem
+ '[' '!' -f /etc/pki/libvirt-vnc/server-key.pem ']'
++ grep -w libvirtd
++ cat /proc/1/comm /proc/10/comm /proc/100/comm /proc/100474/comm /proc/101541/comm /proc/101542/comm /proc/102/comm /proc/103/comm /proc/10346/comm /proc/10369/comm /proc/104/comm /proc/105/comm /proc/105891/comm /proc/106/comm /proc/106628/comm /proc/108/comm /proc/10853/comm /proc/10854/comm /proc/109/comm /proc/11/comm /proc/110/comm /proc/1102/comm /proc/111/comm /proc/112/comm /proc/112644/comm /proc/112667/comm /proc/112986/comm /proc/112999/comm /proc/113/comm /proc/113000/comm /proc/114/comm /proc/114115/comm /proc/114141/comm /proc/114166/comm /proc/114190/comm /proc/114344/comm /proc/114645/comm /proc/114739/comm /proc/114846/comm /proc/114848/comm /proc/115/comm /proc/115628/comm /proc/115726/comm /proc/116/comm /proc/116090/comm /proc/116113/comm /proc/116321/comm /proc/116338/comm /proc/116344/comm /proc/116458/comm /proc/116459/comm /proc/116469/comm /proc/116725/comm /proc/117/comm /proc/117916/comm /proc/117939/comm /proc/117962/comm /proc/117985/comm /proc/118578/comm /proc/118637/comm /proc/12/comm /proc/120206/comm /proc/120221/comm /proc/120549/comm /proc/120858/comm /proc/121830/comm /proc/12242/comm /proc/12272/comm /proc/122975/comm /proc/12328/comm /proc/12352/comm /proc/12370/comm /proc/12601/comm /proc/12632/comm /proc/126488/comm /proc/12688/comm /proc/12718/comm /proc/12733/comm /proc/127756/comm /proc/128151/comm /proc/128164/comm /proc/128165/comm /proc/129630/comm /proc/13/comm /proc/131049/comm /proc/131074/comm /proc/131106/comm /proc/131144/comm /proc/131871/comm /proc/132302/comm /proc/132350/comm /proc/133355/comm /proc/14/comm /proc/1433/comm /proc/144691/comm /proc/144878/comm /proc/144879/comm /proc/145020/comm /proc/145043/comm /proc/149247/comm /proc/149301/comm /proc/15/comm /proc/151080/comm /proc/151103/comm /proc/151104/comm /proc/152385/comm /proc/152386/comm /proc/1551/comm /proc/1552/comm /proc/1553/comm /proc/1554/comm /proc/1558/comm /proc/159490/comm /proc/159491/comm /proc/159493/comm /proc/159494/comm /proc/159498/comm /proc/159673/comm /proc/16/comm /proc/160374/comm /proc/160401/comm /proc/160472/comm /proc/160473/comm /proc/160675/comm /proc/160746/comm /proc/160779/comm /proc/160790/comm /proc/160822/comm /proc/160823/comm /proc/160824/comm /proc/160825/comm /proc/161398/comm /proc/161424/comm /proc/162053/comm /proc/162184/comm /proc/162231/comm /proc/162274/comm /proc/1625/comm /proc/162577/comm /proc/162601/comm /proc/162622/comm /proc/162648/comm /proc/162851/comm /proc/162866/comm /proc/162896/comm /proc/1629/comm /proc/162916/comm /proc/162986/comm /proc/163003/comm /proc/163182/comm /proc/163232/comm /proc/163326/comm /proc/163353/comm /proc/163480/comm /proc/163686/comm /proc/163694/comm /proc/1638/comm /proc/164137/comm /proc/164165/comm /proc/164403/comm /proc/164428/comm /proc/164519/comm /proc/164536/comm /proc/164542/comm /proc/164695/comm /proc/164696/comm /proc/164708/comm /proc/164825/comm /proc/166/comm /proc/166449/comm /proc/166528/comm /proc/166587/comm /proc/166700/comm /proc/166823/comm /proc/166856/comm /proc/166883/comm /proc/166907/comm /proc/166968/comm /proc/167/comm /proc/167002/comm /proc/167103/comm /proc/167126/comm /proc/167380/comm /proc/167402/comm /proc/167428/comm /proc/168/comm /proc/168046/comm /proc/168069/comm /proc/169/comm /proc/170/comm /proc/170460/comm /proc/171/comm /proc/172/comm /proc/173/comm /proc/173166/comm /proc/173182/comm /proc/173446/comm /proc/173678/comm /proc/173702/comm /proc/174/comm /proc/174949/comm /proc/175/comm /proc/176/comm /proc/176288/comm /proc/176289/comm /proc/176295/comm /proc/178/comm /proc/178068/comm /proc/178372/comm /proc/178398/comm /proc/178399/comm /proc/178449/comm /proc/178634/comm /proc/178647/comm /proc/178648/comm /proc/178654/comm /proc/178655/comm /proc/178656/comm /proc/179358/comm /proc/179359/comm /proc/179569/comm /proc/179572/comm /proc/179880/comm /proc/179881/comm /proc/179955/comm /proc/179957/comm /proc/18/comm /proc/180/comm /proc/180627/comm /proc/180670/comm /proc/180742/comm /proc/180806/comm /proc/180823/comm /proc/180829/comm /proc/180899/comm /proc/180900/comm /proc/180910/comm /proc/181/comm /proc/181140/comm /proc/182243/comm /proc/182258/comm /proc/182259/comm /proc/182260/comm /proc/182261/comm /proc/182262/comm /proc/182263/comm /proc/182300/comm /proc/182554/comm /proc/182579/comm /proc/182675/comm /proc/182698/comm /proc/182719/comm /proc/182743/comm /proc/182765/comm /proc/182789/comm /proc/182803/comm /proc/182820/comm /proc/182846/comm /proc/183/comm /proc/183012/comm /proc/183074/comm /proc/183099/comm /proc/183582/comm /proc/184/comm /proc/184263/comm /proc/184277/comm /proc/185/comm /proc/18512/comm /proc/18533/comm /proc/18554/comm /proc/18581/comm /proc/18599/comm /proc/186/comm /proc/187/comm /proc/187720/comm /proc/187753/comm /proc/187878/comm /proc/188/comm /proc/188012/comm /proc/188256/comm /proc/188474/comm /proc/188505/comm /proc/188512/comm /proc/188554/comm /proc/188620/comm /proc/188651/comm /proc/188718/comm /proc/188729/comm /proc/189/comm /proc/189057/comm /proc/189066/comm /proc/19/comm /proc/190/comm /proc/190709/comm /proc/191/comm /proc/191604/comm /proc/191807/comm /proc/191831/comm /proc/192357/comm /proc/192361/comm /proc/192825/comm /proc/192874/comm /proc/193069/comm /proc/193088/comm /proc/193310/comm /proc/193354/comm /proc/193430/comm /proc/193515/comm /proc/193543/comm /proc/193559/comm /proc/193572/comm /proc/193713/comm /proc/193714/comm /proc/193715/comm /proc/193765/comm /proc/193768/comm /proc/193797/comm /proc/193837/comm /proc/193843/comm /proc/193844/comm /proc/193845/comm /proc/2/comm /proc/20/comm /proc/203/comm /proc/204/comm /proc/21/comm /proc/213/comm /proc/214/comm /proc/21503/comm /proc/21569/comm /proc/21570/comm /proc/21583/comm /proc/217/comm /proc/218/comm /proc/22/comm /proc/223/comm /proc/24/comm /proc/245/comm /proc/24842/comm /proc/25/comm /proc/25120/comm /proc/25137/comm /proc/25163/comm /proc/25176/comm /proc/26/comm /proc/266/comm /proc/27/comm /proc/28/comm /proc/283/comm /proc/285/comm /proc/287/comm /proc/288/comm /proc/289/comm /proc/29631/comm /proc/29900/comm /proc/29917/comm /proc/29942/comm /proc/29954/comm /proc/3/comm /proc/30/comm /proc/308/comm /proc/309/comm /proc/31/comm /proc/313/comm /proc/314/comm /proc/315/comm /proc/316/comm /proc/317/comm /proc/319/comm /proc/32/comm /proc/320/comm /proc/33/comm /proc/34/comm /proc/34143/comm /proc/34424/comm /proc/34441/comm /proc/34466/comm /proc/34478/comm /proc/359/comm /proc/36/comm /proc/37/comm /proc/370/comm /proc/38/comm /proc/38734/comm /proc/38736/comm /proc/38842/comm /proc/38862/comm /proc/38910/comm /proc/38936/comm /proc/38949/comm /proc/39/comm /proc/393/comm /proc/394/comm /proc/397/comm /proc/4/comm /proc/40/comm /proc/41422/comm /proc/41454/comm /proc/41467/comm /proc/41490/comm /proc/41497/comm /proc/41523/comm /proc/41561/comm /proc/41582/comm /proc/41585/comm /proc/41603/comm /proc/41668/comm /proc/41687/comm /proc/41707/comm /proc/41739/comm /proc/41841/comm /proc/41897/comm /proc/42/comm /proc/42050/comm /proc/42074/comm /proc/42101/comm /proc/42767/comm /proc/42785/comm /proc/42823/comm /proc/42824/comm /proc/43/comm /proc/43038/comm /proc/43287/comm /proc/43681/comm /proc/44/comm /proc/44124/comm /proc/44151/comm /proc/44175/comm /proc/44535/comm /proc/44561/comm /proc/44582/comm /proc/44606/comm /proc/44626/comm /proc/44681/comm /proc/45/comm /proc/45033/comm /proc/45058/comm /proc/451/comm /proc/45206/comm /proc/45542/comm /proc/45568/comm /proc/45585/comm /proc/45615/comm /proc/45645/comm /proc/45669/comm /proc/45778/comm /proc/45824/comm /proc/45868/comm /proc/46/comm /proc/47685/comm /proc/47720/comm /proc/47783/comm /proc/47808/comm /proc/48/comm /proc/48060/comm /proc/48073/comm /proc/48144/comm /proc/48218/comm /proc/48585/comm /proc/48609/comm /proc/48624/comm /proc/48650/comm /proc/48922/comm /proc/49/comm /proc/49046/comm /proc/49217/comm /proc/49240/comm /proc/49360/comm /proc/49516/comm /proc/49545/comm /proc/49891/comm /proc/49916/comm /proc/5/comm /proc/50/comm /proc/50038/comm /proc/50094/comm /proc/50192/comm /proc/50220/comm /proc/50287/comm /proc/50337/comm /proc/51/comm /proc/51256/comm /proc/519/comm /proc/52/comm /proc/52107/comm /proc/52130/comm /proc/52295/comm /proc/52318/comm /proc/52348/comm /proc/52489/comm /proc/52686/comm /proc/52769/comm /proc/54/comm /proc/55/comm /proc/56/comm /proc/57/comm /proc/57124/comm /proc/57150/comm /proc/57754/comm /proc/57782/comm /proc/57810/comm /proc/57835/comm /proc/57848/comm /proc/57873/comm /proc/58/comm /proc/58028/comm /proc/58052/comm /proc/58098/comm /proc/58140/comm /proc/58181/comm /proc/58279/comm /proc/6/comm /proc/60/comm /proc/61/comm /proc/612/comm /proc/616/comm /proc/618/comm /proc/62/comm /proc/621/comm /proc/622/comm /proc/62695/comm /proc/62803/comm /proc/62859/comm /proc/62953/comm /proc/62981/comm /proc/62986/comm /proc/63/comm /proc/63015/comm /proc/63030/comm /proc/63055/comm /proc/63202/comm /proc/63595/comm /proc/63779/comm /proc/63816/comm /proc/64/comm /proc/641/comm /proc/64111/comm /proc/64138/comm /proc/64311/comm /proc/64413/comm /proc/64414/comm /proc/64435/comm /proc/64436/comm /proc/64466/comm /proc/645/comm /proc/64611/comm /proc/64614/comm /proc/64727/comm /proc/64752/comm /proc/64773/comm /proc/64797/comm /proc/64968/comm /proc/64992/comm /proc/65089/comm /proc/65119/comm /proc/65142/comm /proc/65165/comm /proc/65580/comm /proc/65607/comm /proc/65647/comm /proc/65968/comm /proc/66/comm /proc/66039/comm /proc/66180/comm /proc/66196/comm /proc/66197/comm /proc/66198/comm /proc/66199/comm /proc/66200/comm /proc/66387/comm /proc/66412/comm /proc/66448/comm /proc/66592/comm /proc/66668/comm /proc/66906/comm /proc/66930/comm /proc/67/comm /proc/67155/comm /proc/67202/comm /proc/67485/comm /proc/67607/comm /proc/67662/comm /proc/67677/comm /proc/67702/comm /proc/67860/comm /proc/67879/comm /proc/68/comm /proc/68023/comm /proc/68098/comm /proc/68213/comm /proc/68284/comm /proc/68331/comm /proc/68394/comm /proc/68681/comm /proc/68703/comm /proc/68731/comm /proc/69/comm /proc/69082/comm /proc/69107/comm /proc/69379/comm /proc/69396/comm /proc/69402/comm /proc/69539/comm /proc/69540/comm /proc/69567/comm /proc/69643/comm /proc/70/comm /proc/702/comm /proc/705/comm /proc/706/comm /proc/71079/comm /proc/71102/comm /proc/719/comm /proc/72/comm /proc/73/comm /proc/74/comm /proc/74524/comm /proc/74655/comm /proc/74656/comm /proc/74657/comm /proc/74658/comm /proc/74659/comm /proc/74660/comm /proc/74662/comm /proc/74663/comm /proc/74668/comm /proc/74669/comm /proc/74670/comm /proc/74672/comm /proc/74673/comm /proc/74674/comm /proc/75/comm /proc/75146/comm /proc/76/comm /proc/78/comm /proc/79/comm /proc/8/comm /proc/80/comm /proc/80453/comm /proc/80547/comm /proc/80570/comm /proc/80650/comm /proc/80667/comm /proc/80673/comm /proc/80847/comm /proc/80848/comm /proc/80858/comm /proc/80924/comm /proc/81/comm /proc/82/comm /proc/82193/comm /proc/82217/comm /proc/84/comm /proc/85/comm /proc/85148/comm /proc/85151/comm /proc/86/comm /proc/86139/comm /proc/864/comm /proc/87/comm /proc/87249/comm /proc/87604/comm /proc/87617/comm /proc/88/comm /proc/88431/comm /proc/88456/comm /proc/89371/comm /proc/90/comm /proc/91/comm /proc/92/comm /proc/9241/comm /proc/9258/comm /proc/9274/comm /proc/93/comm /proc/93350/comm /proc/9357/comm /proc/94/comm /proc/95528/comm /proc/95552/comm /proc/95671/comm /proc/95672/comm /proc/95713/comm /proc/95729/comm /proc/95735/comm /proc/95931/comm /proc/95932/comm /proc/95942/comm /proc/96/comm /proc/96087/comm /proc/97/comm /proc/98/comm /proc/98534/comm /proc/98558/comm /proc/98574/comm /proc/98609/comm /proc/98943/comm /proc/99/comm /proc/99023/comm /proc/9975/comm /proc/99847/comm /proc/self/comm /proc/thread-self/comm
+ '[' -n '' ']'
+ rm -f /var/run/libvirtd.pid
+ [[ -c /dev/kvm ]]
+ chmod 660 /dev/kvm
+ chown root:kvm /dev/kvm
+ CGROUPS=
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/blkio ']'
+ grep -w blkio /sys/fs/cgroup/cgroup.controllers
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/cpu ']'
+ grep -w cpu /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=cpu,
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/devices ']'
+ grep -w devices /sys/fs/cgroup/cgroup.controllers
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/freezer ']'
+ grep -w freezer /sys/fs/cgroup/cgroup.controllers
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/hugetlb ']'
+ grep -w hugetlb /sys/fs/cgroup/cgroup.controllers
+ CGROUPS+=hugetlb,
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
cpuset cpu io memory hugetlb pids rdma misc
+ '[' -d /sys/fs/cgroup/memory ']'
+ grep -w memory /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=memory,
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/net_cls ']'
+ grep -w net_cls /sys/fs/cgroup/cgroup.controllers
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/perf_event ']'
+ grep -w perf_event /sys/fs/cgroup/cgroup.controllers
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/rdma ']'
+ grep -w rdma /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=rdma,
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/misc ']'
+ grep -w misc /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=misc,
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/pids ']'
+ grep -w pids /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=pids,
+ cgcreate -g cpu,hugetlb,memory,rdma,misc,pids:/osh-libvirt
++ cat /proc/meminfo
++ grep HugePages_Total
++ tr -cd '[:digit:]'
+ hp_count=0
+ '[' 00 -gt 0 ']'
+ '[' -n 457eb676-33da-42ec-9a8c-9293d545c337 ']'
+ cgexec -g cpu,hugetlb,memory,rdma,misc,pids:/osh-libvirt systemd-run --scope --slice=system libvirtd --listen
++ mktemp --suffix .xml
+ tmpsecret=/tmp/tmp.9S0W1w1Hr5.xml
+ '[' -n '' ']'
+ trap cleanup EXIT
+ TIMEOUT=60
+ [[ ! -f /var/run/libvirtd.pid ]]
+ [[ 60 -gt 0 ]]
+ let TIMEOUT-=1
+ sleep 1
Running as unit: run-rf8da2d3f7b1746abaaa817976ff9381e.scope; invocation ID: 4ba1aec519ad4fab936fd5c94084da41
+ [[ ! -f /var/run/libvirtd.pid ]]
+ TIMEOUT=10
+ [[ ! -e /var/run/libvirt/libvirt-sock ]]
+ '[' -z '' ']'
+ '[' -n cinder ']'
++ awk '/key/{print $3}' /etc/ceph/ceph.client.cinder.keyring
+ CEPH_CINDER_KEYRING=AQDslsRq6rcTKxAA2kv8ne4rM1m7JQG/IxnCgA==
+ '[' -n cinder ']'
+ create_virsh_libvirt_secret cinder 457eb676-33da-42ec-9a8c-9293d545c337 AQDslsRq6rcTKxAA2kv8ne4rM1m7JQG/IxnCgA==
+ sec_user=cinder
+ sec_uuid=457eb676-33da-42ec-9a8c-9293d545c337
+ sec_ceph_keyring=AQDslsRq6rcTKxAA2kv8ne4rM1m7JQG/IxnCgA==
+ cat
+ virsh secret-define --file /tmp/tmp.9S0W1w1Hr5.xml
Secret 457eb676-33da-42ec-9a8c-9293d545c337 created

+ virsh secret-set-value --secret 457eb676-33da-42ec-9a8c-9293d545c337 --base64 AQDslsRq6rcTKxAA2kv8ne4rM1m7JQG/IxnCgA==
error: Passing secret value as command-line argument is insecure!
Secret value set

+ '[' -n '' ']'
+ '[' -n '' ']'
+ cleanup
+ rm -f /tmp/tmp.9S0W1w1Hr5.xml
+ '[' -n '' ']'
++ cat /var/run/libvirtd.pid
+ LIBVIRTD_PID=193865
+ kill 193865
+ tail --pid=193865 -f /dev/null
+ cgexec -g cpu,hugetlb,memory,rdma,misc,pids:/osh-libvirt systemd-run --scope --slice=system libvirtd --listen
Running as unit: run-r71c097a04d8b44e1a671b90dc65c689d.scope; invocation ID: 57bb9f08b64b40149e4f0c1026210608