+ wait_for_file /etc/pki/CA/cacert.pem
+ local file=/etc/pki/CA/cacert.pem
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ sleep 1
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ sleep 1
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ sleep 1
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ sleep 1
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ sleep 1
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ wait_for_file /etc/pki/qemu/ca-cert.pem
+ local file=/etc/pki/qemu/ca-cert.pem
+ '[' '!' -f /etc/pki/qemu/ca-cert.pem ']'
+ wait_for_file /etc/pki/libvirt/servercert.pem
+ local file=/etc/pki/libvirt/servercert.pem
+ '[' '!' -f /etc/pki/libvirt/servercert.pem ']'
+ wait_for_file /etc/pki/libvirt/clientcert.pem
+ local file=/etc/pki/libvirt/clientcert.pem
+ '[' '!' -f /etc/pki/libvirt/clientcert.pem ']'
+ wait_for_file /etc/pki/qemu/server-cert.pem
+ local file=/etc/pki/qemu/server-cert.pem
+ '[' '!' -f /etc/pki/qemu/server-cert.pem ']'
+ wait_for_file /etc/pki/qemu/client-cert.pem
+ local file=/etc/pki/qemu/client-cert.pem
+ '[' '!' -f /etc/pki/qemu/client-cert.pem ']'
+ wait_for_file /etc/pki/libvirt/private/serverkey.pem
+ local file=/etc/pki/libvirt/private/serverkey.pem
+ '[' '!' -f /etc/pki/libvirt/private/serverkey.pem ']'
+ wait_for_file /etc/pki/libvirt/private/clientkey.pem
+ local file=/etc/pki/libvirt/private/clientkey.pem
+ '[' '!' -f /etc/pki/libvirt/private/clientkey.pem ']'
+ wait_for_file /etc/pki/qemu/server-key.pem
+ local file=/etc/pki/qemu/server-key.pem
+ '[' '!' -f /etc/pki/qemu/server-key.pem ']'
+ wait_for_file /etc/pki/qemu/client-key.pem
+ local file=/etc/pki/qemu/client-key.pem
+ '[' '!' -f /etc/pki/qemu/client-key.pem ']'
+ wait_for_file /etc/pki/libvirt-vnc/ca-cert.pem
+ local file=/etc/pki/libvirt-vnc/ca-cert.pem
+ '[' '!' -f /etc/pki/libvirt-vnc/ca-cert.pem ']'
+ wait_for_file /etc/pki/libvirt-vnc/server-cert.pem
+ local file=/etc/pki/libvirt-vnc/server-cert.pem
+ '[' '!' -f /etc/pki/libvirt-vnc/server-cert.pem ']'
+ wait_for_file /etc/pki/libvirt-vnc/server-key.pem
+ local file=/etc/pki/libvirt-vnc/server-key.pem
+ '[' '!' -f /etc/pki/libvirt-vnc/server-key.pem ']'
++ grep -w libvirtd
++ cat /proc/1/comm /proc/10/comm /proc/100/comm /proc/100261/comm /proc/100263/comm /proc/10164/comm /proc/10187/comm /proc/102/comm /proc/103/comm /proc/103206/comm /proc/104/comm /proc/105/comm /proc/106/comm /proc/108/comm /proc/109/comm /proc/109197/comm /proc/109222/comm /proc/10924/comm /proc/10925/comm /proc/109634/comm /proc/109647/comm /proc/109648/comm /proc/11/comm /proc/110/comm /proc/110788/comm /proc/110811/comm /proc/110824/comm /proc/110855/comm /proc/111/comm /proc/111262/comm /proc/111293/comm /proc/111425/comm /proc/111562/comm /proc/111564/comm /proc/112/comm /proc/112015/comm /proc/112597/comm /proc/112695/comm /proc/112779/comm /proc/112803/comm /proc/112987/comm /proc/113/comm /proc/113004/comm /proc/113010/comm /proc/113069/comm /proc/113070/comm /proc/113080/comm /proc/113188/comm /proc/114/comm /proc/114598/comm /proc/114621/comm /proc/114637/comm /proc/114665/comm /proc/115/comm /proc/115249/comm /proc/115250/comm /proc/116/comm /proc/116574/comm /proc/117/comm /proc/118378/comm /proc/1185/comm /proc/119321/comm /proc/119458/comm /proc/119460/comm /proc/12/comm /proc/122040/comm /proc/122918/comm /proc/12367/comm /proc/12396/comm /proc/12437/comm /proc/124432/comm /proc/124447/comm /proc/124448/comm /proc/12473/comm /proc/12485/comm /proc/125869/comm /proc/12723/comm /proc/12751/comm /proc/127594/comm /proc/127626/comm /proc/127712/comm /proc/127736/comm /proc/12799/comm /proc/128294/comm /proc/12833/comm /proc/12854/comm /proc/128770/comm /proc/128995/comm /proc/1290/comm /proc/1291/comm /proc/1292/comm /proc/1293/comm /proc/129730/comm /proc/13/comm /proc/130401/comm /proc/130425/comm /proc/131556/comm /proc/131780/comm /proc/132937/comm /proc/1381/comm /proc/1385/comm /proc/14/comm /proc/1450/comm /proc/1454/comm /proc/145711/comm /proc/146061/comm /proc/146062/comm /proc/1463/comm /proc/147271/comm /proc/147293/comm /proc/147294/comm /proc/148717/comm /proc/148718/comm /proc/15/comm /proc/155795/comm /proc/155796/comm /proc/155804/comm /proc/155805/comm /proc/155807/comm /proc/156051/comm /proc/156134/comm /proc/156766/comm /proc/156790/comm /proc/157210/comm /proc/157244/comm /proc/157256/comm /proc/157287/comm /proc/157288/comm /proc/157289/comm /proc/157290/comm /proc/158296/comm /proc/158323/comm /proc/158739/comm /proc/158763/comm /proc/158918/comm /proc/159290/comm /proc/159684/comm /proc/159708/comm /proc/159803/comm /proc/159820/comm /proc/159826/comm /proc/159960/comm /proc/159961/comm /proc/159971/comm /proc/16/comm /proc/160140/comm /proc/160815/comm /proc/161735/comm /proc/161804/comm /proc/161900/comm /proc/161947/comm /proc/161970/comm /proc/161994/comm /proc/162104/comm /proc/162149/comm /proc/162154/comm /proc/162193/comm /proc/162243/comm /proc/162294/comm /proc/162321/comm /proc/162401/comm /proc/162448/comm /proc/162818/comm /proc/162841/comm /proc/165/comm /proc/166/comm /proc/167/comm /proc/167200/comm /proc/167307/comm /proc/167308/comm /proc/167314/comm /proc/168/comm /proc/168081/comm /proc/168139/comm /proc/168141/comm /proc/169/comm /proc/169466/comm /proc/170/comm /proc/170659/comm /proc/170664/comm /proc/171/comm /proc/172/comm /proc/172142/comm /proc/172209/comm /proc/172248/comm /proc/172625/comm /proc/172660/comm /proc/172661/comm /proc/172777/comm /proc/172823/comm /proc/172824/comm /proc/173/comm /proc/173584/comm /proc/173649/comm /proc/173788/comm /proc/173986/comm /proc/173988/comm /proc/174062/comm /proc/174064/comm /proc/174428/comm /proc/174485/comm /proc/174498/comm /proc/174519/comm /proc/174689/comm /proc/174713/comm /proc/174953/comm /proc/174970/comm /proc/174976/comm /proc/175/comm /proc/175026/comm /proc/175027/comm /proc/175037/comm /proc/175104/comm /proc/176/comm /proc/176493/comm /proc/176515/comm /proc/176564/comm /proc/176592/comm /proc/176677/comm /proc/176712/comm /proc/176886/comm /proc/176897/comm /proc/176943/comm /proc/176961/comm /proc/177020/comm /proc/177071/comm /proc/177115/comm /proc/177138/comm /proc/177582/comm /proc/177595/comm /proc/177674/comm /proc/177811/comm /proc/178/comm /proc/179/comm /proc/18/comm /proc/181/comm /proc/183/comm /proc/183484/comm /proc/183516/comm /proc/183739/comm /proc/183742/comm /proc/185/comm /proc/185534/comm /proc/185541/comm /proc/185672/comm /proc/185673/comm /proc/185674/comm /proc/185850/comm /proc/185939/comm /proc/185962/comm /proc/185989/comm /proc/185990/comm /proc/186/comm /proc/186003/comm /proc/186070/comm /proc/186071/comm /proc/186278/comm /proc/186282/comm /proc/186295/comm /proc/186792/comm /proc/187/comm /proc/187286/comm /proc/187464/comm /proc/187814/comm /proc/188/comm /proc/188852/comm /proc/188871/comm /proc/188891/comm /proc/188944/comm /proc/189146/comm /proc/189157/comm /proc/189386/comm /proc/189521/comm /proc/189529/comm /proc/189987/comm /proc/19/comm /proc/190/comm /proc/190024/comm /proc/190025/comm /proc/190026/comm /proc/190027/comm /proc/190028/comm /proc/190029/comm /proc/190107/comm /proc/190553/comm /proc/190605/comm /proc/190632/comm /proc/190640/comm /proc/190764/comm /proc/190804/comm /proc/191036/comm /proc/191037/comm /proc/191045/comm /proc/191046/comm /proc/191065/comm /proc/191084/comm /proc/191090/comm /proc/191093/comm /proc/191138/comm /proc/191139/comm /proc/191140/comm /proc/192/comm /proc/193/comm /proc/194/comm /proc/195/comm /proc/19743/comm /proc/19766/comm /proc/19787/comm /proc/198/comm /proc/19814/comm /proc/19831/comm /proc/2/comm /proc/20/comm /proc/209/comm /proc/21/comm /proc/213/comm /proc/217/comm /proc/21871/comm /proc/21880/comm /proc/21881/comm /proc/21895/comm /proc/22/comm /proc/220/comm /proc/225/comm /proc/24/comm /proc/24692/comm /proc/247/comm /proc/24956/comm /proc/24974/comm /proc/24997/comm /proc/25/comm /proc/25010/comm /proc/25524/comm /proc/25763/comm /proc/26/comm /proc/268/comm /proc/27/comm /proc/28/comm /proc/284/comm /proc/285/comm /proc/286/comm /proc/288/comm /proc/29300/comm /proc/29572/comm /proc/29589/comm /proc/29613/comm /proc/29626/comm /proc/3/comm /proc/30/comm /proc/308/comm /proc/309/comm /proc/31/comm /proc/313/comm /proc/314/comm /proc/32/comm /proc/33/comm /proc/33898/comm /proc/34/comm /proc/341/comm /proc/34176/comm /proc/34195/comm /proc/34219/comm /proc/34231/comm /proc/349/comm /proc/356/comm /proc/35817/comm /proc/35819/comm /proc/36/comm /proc/37/comm /proc/38/comm /proc/382/comm /proc/389/comm /proc/39/comm /proc/393/comm /proc/397/comm /proc/39705/comm /proc/39742/comm /proc/39747/comm /proc/39751/comm /proc/39753/comm /proc/39802/comm /proc/39833/comm /proc/39849/comm /proc/39871/comm /proc/39880/comm /proc/39949/comm /proc/39957/comm /proc/39977/comm /proc/4/comm /proc/40/comm /proc/40001/comm /proc/40111/comm /proc/40164/comm /proc/40264/comm /proc/40289/comm /proc/40314/comm /proc/41030/comm /proc/41044/comm /proc/41083/comm /proc/41093/comm /proc/41332/comm /proc/41562/comm /proc/41945/comm /proc/42/comm /proc/42418/comm /proc/42440/comm /proc/42483/comm /proc/42851/comm /proc/42878/comm /proc/42893/comm /proc/42917/comm /proc/42949/comm /proc/42975/comm /proc/43/comm /proc/43316/comm /proc/43340/comm /proc/43533/comm /proc/43813/comm /proc/43837/comm /proc/43853/comm /proc/43877/comm /proc/43897/comm /proc/43920/comm /proc/44/comm /proc/44032/comm /proc/44078/comm /proc/44124/comm /proc/45/comm /proc/451/comm /proc/456/comm /proc/46/comm /proc/46219/comm /proc/46249/comm /proc/46327/comm /proc/46351/comm /proc/46612/comm /proc/46625/comm /proc/46674/comm /proc/46736/comm /proc/47257/comm /proc/47282/comm /proc/47373/comm /proc/47396/comm /proc/47445/comm /proc/475/comm /proc/47570/comm /proc/47745/comm /proc/47767/comm /proc/47892/comm /proc/48/comm /proc/48034/comm /proc/48059/comm /proc/48442/comm /proc/48466/comm /proc/48562/comm /proc/48614/comm /proc/48711/comm /proc/48740/comm /proc/48816/comm /proc/48875/comm /proc/49/comm /proc/5/comm /proc/50/comm /proc/50601/comm /proc/50624/comm /proc/50801/comm /proc/50825/comm /proc/50891/comm /proc/50983/comm /proc/51/comm /proc/51147/comm /proc/51276/comm /proc/51318/comm /proc/519/comm /proc/52/comm /proc/520/comm /proc/54/comm /proc/55/comm /proc/55168/comm /proc/55191/comm /proc/55811/comm /proc/55835/comm /proc/55849/comm /proc/55881/comm /proc/55897/comm /proc/55922/comm /proc/56/comm /proc/56094/comm /proc/56118/comm /proc/56157/comm /proc/56191/comm /proc/56235/comm /proc/56287/comm /proc/57/comm /proc/575/comm /proc/58/comm /proc/6/comm /proc/60/comm /proc/60220/comm /proc/60259/comm /proc/60322/comm /proc/60351/comm /proc/60356/comm /proc/60389/comm /proc/60421/comm /proc/60445/comm /proc/60540/comm /proc/60902/comm /proc/61/comm /proc/61254/comm /proc/61281/comm /proc/61294/comm /proc/614/comm /proc/61445/comm /proc/61446/comm /proc/61550/comm /proc/61551/comm /proc/61582/comm /proc/617/comm /proc/61789/comm /proc/61813/comm /proc/61841/comm /proc/61865/comm /proc/62/comm /proc/620/comm /proc/62018/comm /proc/62320/comm /proc/62343/comm /proc/62378/comm /proc/62406/comm /proc/62495/comm /proc/62524/comm /proc/626/comm /proc/62676/comm /proc/627/comm /proc/62803/comm /proc/62830/comm /proc/63/comm /proc/63333/comm /proc/63355/comm /proc/63451/comm /proc/63467/comm /proc/63468/comm /proc/63469/comm /proc/63470/comm /proc/63471/comm /proc/63481/comm /proc/63504/comm /proc/63720/comm /proc/63743/comm /proc/64/comm /proc/64186/comm /proc/64297/comm /proc/644/comm /proc/64405/comm /proc/64542/comm /proc/64596/comm /proc/64697/comm /proc/647/comm /proc/64718/comm /proc/64834/comm /proc/64835/comm /proc/65126/comm /proc/65183/comm /proc/65225/comm /proc/65273/comm /proc/65438/comm /proc/65483/comm /proc/65613/comm /proc/65849/comm /proc/66/comm /proc/66017/comm /proc/66050/comm /proc/66080/comm /proc/66165/comm /proc/66215/comm /proc/66401/comm /proc/66488/comm /proc/66513/comm /proc/66971/comm /proc/66988/comm /proc/66994/comm /proc/67/comm /proc/67052/comm /proc/67053/comm /proc/67063/comm /proc/67240/comm /proc/68/comm /proc/68628/comm /proc/68653/comm /proc/69/comm /proc/699/comm /proc/70/comm /proc/70104/comm /proc/702/comm /proc/703/comm /proc/71550/comm /proc/716/comm /proc/71970/comm /proc/71985/comm /proc/71986/comm /proc/71987/comm /proc/71988/comm /proc/71989/comm /proc/71993/comm /proc/71994/comm /proc/71997/comm /proc/71999/comm /proc/72/comm /proc/72000/comm /proc/72001/comm /proc/72002/comm /proc/72003/comm /proc/72004/comm /proc/73/comm /proc/74/comm /proc/75/comm /proc/76/comm /proc/78/comm /proc/78001/comm /proc/78023/comm /proc/78119/comm /proc/78136/comm /proc/78142/comm /proc/78189/comm /proc/78190/comm /proc/78200/comm /proc/78413/comm /proc/79/comm /proc/79435/comm /proc/79460/comm /proc/79729/comm /proc/8/comm /proc/80/comm /proc/80010/comm /proc/80888/comm /proc/81/comm /proc/82/comm /proc/84/comm /proc/84724/comm /proc/84738/comm /proc/85/comm /proc/85556/comm /proc/85578/comm /proc/86/comm /proc/861/comm /proc/86572/comm /proc/87/comm /proc/88/comm /proc/9/comm /proc/90/comm /proc/9059/comm /proc/90623/comm /proc/9076/comm /proc/9092/comm /proc/91/comm /proc/91742/comm /proc/9175/comm /proc/91983/comm /proc/92/comm /proc/92007/comm /proc/92285/comm /proc/92302/comm /proc/92308/comm /proc/92400/comm /proc/92401/comm /proc/92411/comm /proc/92672/comm /proc/93/comm /proc/94/comm /proc/95893/comm /proc/95915/comm /proc/96/comm /proc/96045/comm /proc/96129/comm /proc/96500/comm /proc/96520/comm /proc/96621/comm /proc/97/comm /proc/9792/comm /proc/98/comm /proc/98252/comm /proc/98253/comm /proc/98594/comm /proc/99/comm /proc/self/comm /proc/thread-self/comm
+ '[' -n '' ']'
+ rm -f /var/run/libvirtd.pid
+ [[ -c /dev/kvm ]]
+ chmod 660 /dev/kvm
+ chown root:kvm /dev/kvm
+ CGROUPS=
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/blkio ']'
+ grep -w blkio /sys/fs/cgroup/cgroup.controllers
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/cpu ']'
+ grep -w cpu /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=cpu,
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/devices ']'
+ grep -w devices /sys/fs/cgroup/cgroup.controllers
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/freezer ']'
+ grep -w freezer /sys/fs/cgroup/cgroup.controllers
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/hugetlb ']'
+ grep -w hugetlb /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=hugetlb,
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/memory ']'
+ grep -w memory /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=memory,
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/net_cls ']'
+ grep -w net_cls /sys/fs/cgroup/cgroup.controllers
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/perf_event ']'
+ grep -w perf_event /sys/fs/cgroup/cgroup.controllers
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/rdma ']'
+ grep -w rdma /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=rdma,
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/misc ']'
+ grep -w misc /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=misc,
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/pids ']'
+ grep -w pids /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=pids,
+ cgcreate -g cpu,hugetlb,memory,rdma,misc,pids:/osh-libvirt
++ cat /proc/meminfo
++ grep HugePages_Total
++ tr -cd '[:digit:]'
+ hp_count=0
+ '[' 00 -gt 0 ']'
+ '[' -n 457eb676-33da-42ec-9a8c-9293d545c337 ']'
+ cgexec -g cpu,hugetlb,memory,rdma,misc,pids:/osh-libvirt systemd-run --scope --slice=system libvirtd --listen
++ mktemp --suffix .xml
+ tmpsecret=/tmp/tmp.cEKdarWOey.xml
+ '[' -n '' ']'
+ trap cleanup EXIT
+ TIMEOUT=60
+ [[ ! -f /var/run/libvirtd.pid ]]
+ [[ 60 -gt 0 ]]
+ let TIMEOUT-=1
+ sleep 1
Running as unit: run-rf97ce326000f4d648eb8688f583e3edf.scope; invocation ID: 2b7dab1042ee4675a986b557c2dd5c2e
+ [[ ! -f /var/run/libvirtd.pid ]]
+ TIMEOUT=10
+ [[ ! -e /var/run/libvirt/libvirt-sock ]]
+ '[' -z '' ']'
+ '[' -n cinder ']'
++ awk '/key/{print $3}' /etc/ceph/ceph.client.cinder.keyring
+ CEPH_CINDER_KEYRING=AQBBCQBq5un6MRAASNeiG06qRdEHORcCwugUWQ==
+ '[' -n cinder ']'
+ create_virsh_libvirt_secret cinder 457eb676-33da-42ec-9a8c-9293d545c337 AQBBCQBq5un6MRAASNeiG06qRdEHORcCwugUWQ==
+ sec_user=cinder
+ sec_uuid=457eb676-33da-42ec-9a8c-9293d545c337
+ sec_ceph_keyring=AQBBCQBq5un6MRAASNeiG06qRdEHORcCwugUWQ==
+ cat
+ virsh secret-define --file /tmp/tmp.cEKdarWOey.xml
Secret 457eb676-33da-42ec-9a8c-9293d545c337 created

+ virsh secret-set-value --secret 457eb676-33da-42ec-9a8c-9293d545c337 --base64 AQBBCQBq5un6MRAASNeiG06qRdEHORcCwugUWQ==
error: Passing secret value as command-line argument is insecure!
Secret value set

+ '[' -n '' ']'
+ '[' -n '' ']'
+ cleanup
+ rm -f /tmp/tmp.cEKdarWOey.xml
+ '[' -n '' ']'
++ cat /var/run/libvirtd.pid
+ LIBVIRTD_PID=191160
+ kill 191160
+ tail --pid=191160 -f /dev/null
+ cgexec -g cpu,hugetlb,memory,rdma,misc,pids:/osh-libvirt systemd-run --scope --slice=system libvirtd --listen
Running as unit: run-r8036d3af32184b08a426de7ee7e2bd25.scope; invocation ID: 58c77d3b837640e0a89d8a40d2d21c1c