+ wait_for_file /etc/pki/CA/cacert.pem
+ local file=/etc/pki/CA/cacert.pem
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ sleep 1
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ sleep 1
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ sleep 1
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ sleep 1
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ sleep 1
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ wait_for_file /etc/pki/qemu/ca-cert.pem
+ local file=/etc/pki/qemu/ca-cert.pem
+ '[' '!' -f /etc/pki/qemu/ca-cert.pem ']'
+ wait_for_file /etc/pki/libvirt/servercert.pem
+ local file=/etc/pki/libvirt/servercert.pem
+ '[' '!' -f /etc/pki/libvirt/servercert.pem ']'
+ wait_for_file /etc/pki/libvirt/clientcert.pem
+ local file=/etc/pki/libvirt/clientcert.pem
+ '[' '!' -f /etc/pki/libvirt/clientcert.pem ']'
+ wait_for_file /etc/pki/qemu/server-cert.pem
+ local file=/etc/pki/qemu/server-cert.pem
+ '[' '!' -f /etc/pki/qemu/server-cert.pem ']'
+ wait_for_file /etc/pki/qemu/client-cert.pem
+ local file=/etc/pki/qemu/client-cert.pem
+ '[' '!' -f /etc/pki/qemu/client-cert.pem ']'
+ wait_for_file /etc/pki/libvirt/private/serverkey.pem
+ local file=/etc/pki/libvirt/private/serverkey.pem
+ '[' '!' -f /etc/pki/libvirt/private/serverkey.pem ']'
+ wait_for_file /etc/pki/libvirt/private/clientkey.pem
+ local file=/etc/pki/libvirt/private/clientkey.pem
+ '[' '!' -f /etc/pki/libvirt/private/clientkey.pem ']'
+ wait_for_file /etc/pki/qemu/server-key.pem
+ local file=/etc/pki/qemu/server-key.pem
+ '[' '!' -f /etc/pki/qemu/server-key.pem ']'
+ wait_for_file /etc/pki/qemu/client-key.pem
+ local file=/etc/pki/qemu/client-key.pem
+ '[' '!' -f /etc/pki/qemu/client-key.pem ']'
+ wait_for_file /etc/pki/libvirt-vnc/ca-cert.pem
+ local file=/etc/pki/libvirt-vnc/ca-cert.pem
+ '[' '!' -f /etc/pki/libvirt-vnc/ca-cert.pem ']'
+ wait_for_file /etc/pki/libvirt-vnc/server-cert.pem
+ local file=/etc/pki/libvirt-vnc/server-cert.pem
+ '[' '!' -f /etc/pki/libvirt-vnc/server-cert.pem ']'
+ wait_for_file /etc/pki/libvirt-vnc/server-key.pem
+ local file=/etc/pki/libvirt-vnc/server-key.pem
+ '[' '!' -f /etc/pki/libvirt-vnc/server-key.pem ']'
++ grep -w libvirtd
++ cat /proc/1/comm /proc/10/comm /proc/100/comm /proc/100812/comm /proc/102/comm /proc/103/comm /proc/10351/comm /proc/104/comm /proc/104975/comm /proc/105/comm /proc/106/comm /proc/108/comm /proc/108138/comm /proc/10859/comm /proc/10860/comm /proc/109/comm /proc/11/comm /proc/110/comm /proc/1103/comm /proc/111/comm /proc/111502/comm /proc/111533/comm /proc/111640/comm /proc/111940/comm /proc/111952/comm /proc/111953/comm /proc/112/comm /proc/113/comm /proc/113126/comm /proc/113149/comm /proc/113170/comm /proc/113197/comm /proc/113407/comm /proc/113534/comm /proc/113680/comm /proc/113682/comm /proc/114/comm /proc/114067/comm /proc/114328/comm /proc/114688/comm /proc/114994/comm /proc/115/comm /proc/115057/comm /proc/115081/comm /proc/115276/comm /proc/115293/comm /proc/115299/comm /proc/115420/comm /proc/115421/comm /proc/115431/comm /proc/115496/comm /proc/116/comm /proc/116893/comm /proc/116919/comm /proc/116944/comm /proc/116967/comm /proc/117/comm /proc/117561/comm /proc/12/comm /proc/120740/comm /proc/12248/comm /proc/12278/comm /proc/123157/comm /proc/123158/comm /proc/12334/comm /proc/12358/comm /proc/12377/comm /proc/125183/comm /proc/12608/comm /proc/126330/comm /proc/126343/comm /proc/12640/comm /proc/126823/comm /proc/126837/comm /proc/126838/comm /proc/12696/comm /proc/12720/comm /proc/12740/comm /proc/128473/comm /proc/129850/comm /proc/129885/comm /proc/129951/comm /proc/129975/comm /proc/13/comm /proc/130638/comm /proc/130967/comm /proc/130968/comm /proc/130969/comm /proc/131001/comm /proc/131190/comm /proc/131946/comm /proc/132304/comm /proc/132581/comm /proc/132604/comm /proc/133901/comm /proc/13722/comm /proc/14/comm /proc/1434/comm /proc/145167/comm /proc/148270/comm /proc/149037/comm /proc/149671/comm /proc/149699/comm /proc/149700/comm /proc/15/comm /proc/150939/comm /proc/150940/comm /proc/1552/comm /proc/1553/comm /proc/1554/comm /proc/1555/comm /proc/1559/comm /proc/158051/comm /proc/158052/comm /proc/158057/comm /proc/158062/comm /proc/158082/comm /proc/158219/comm /proc/158272/comm /proc/158813/comm /proc/158839/comm /proc/158915/comm /proc/159248/comm /proc/159282/comm /proc/159295/comm /proc/159302/comm /proc/159303/comm /proc/159304/comm /proc/159305/comm /proc/16/comm /proc/160439/comm /proc/160470/comm /proc/160850/comm /proc/160886/comm /proc/161078/comm /proc/161545/comm /proc/161546/comm /proc/161548/comm /proc/161752/comm /proc/161775/comm /proc/161911/comm /proc/161985/comm /proc/162020/comm /proc/162026/comm /proc/162076/comm /proc/162077/comm /proc/162087/comm /proc/162260/comm /proc/1630/comm /proc/1634/comm /proc/163835/comm /proc/163904/comm /proc/164040/comm /proc/164139/comm /proc/164165/comm /proc/164182/comm /proc/164216/comm /proc/164262/comm /proc/164288/comm /proc/1643/comm /proc/164385/comm /proc/164415/comm /proc/164519/comm /proc/164703/comm /proc/164728/comm /proc/164784/comm /proc/164808/comm /proc/164859/comm /proc/165/comm /proc/165270/comm /proc/165288/comm /proc/166/comm /proc/167/comm /proc/168/comm /proc/169/comm /proc/169130/comm /proc/169480/comm /proc/170/comm /proc/170136/comm /proc/170351/comm /proc/171/comm /proc/171443/comm /proc/171451/comm /proc/172/comm /proc/172590/comm /proc/172648/comm /proc/172653/comm /proc/173/comm /proc/174078/comm /proc/174163/comm /proc/174171/comm /proc/174174/comm /proc/174581/comm /proc/174593/comm /proc/174594/comm /proc/174758/comm /proc/174773/comm /proc/174774/comm /proc/175746/comm /proc/175747/comm /proc/175923/comm /proc/175958/comm /proc/176/comm /proc/176067/comm /proc/176068/comm /proc/176150/comm /proc/176153/comm /proc/176329/comm /proc/176837/comm /proc/176860/comm /proc/176942/comm /proc/176959/comm /proc/176965/comm /proc/177065/comm /proc/177066/comm /proc/177076/comm /proc/177253/comm /proc/178/comm /proc/178700/comm /proc/178741/comm /proc/178761/comm /proc/178782/comm /proc/178818/comm /proc/178862/comm /proc/179/comm /proc/179023/comm /proc/179063/comm /proc/179104/comm /proc/179133/comm /proc/179167/comm /proc/179202/comm /proc/179354/comm /proc/179378/comm /proc/179863/comm /proc/179895/comm /proc/179985/comm /proc/18/comm /proc/182/comm /proc/183113/comm /proc/183170/comm /proc/183174/comm /proc/184/comm /proc/184930/comm /proc/185006/comm /proc/185007/comm /proc/185948/comm /proc/186/comm /proc/18607/comm /proc/186190/comm /proc/18626/comm /proc/18650/comm /proc/186515/comm /proc/18675/comm /proc/18691/comm /proc/187/comm /proc/188/comm /proc/188102/comm /proc/188103/comm /proc/188104/comm /proc/188294/comm /proc/188311/comm /proc/188411/comm /proc/188412/comm /proc/188431/comm /proc/188458/comm /proc/188459/comm /proc/188653/comm /proc/188656/comm /proc/188659/comm /proc/189/comm /proc/189215/comm /proc/189671/comm /proc/189864/comm /proc/19/comm /proc/190/comm /proc/190228/comm /proc/190694/comm /proc/190978/comm /proc/191/comm /proc/191006/comm /proc/191007/comm /proc/191343/comm /proc/191349/comm /proc/191532/comm /proc/191759/comm /proc/192004/comm /proc/192022/comm /proc/192023/comm /proc/192024/comm /proc/192025/comm /proc/192026/comm /proc/192027/comm /proc/192140/comm /proc/192496/comm /proc/192501/comm /proc/192503/comm /proc/192517/comm /proc/192577/comm /proc/192604/comm /proc/192661/comm /proc/192681/comm /proc/192703/comm /proc/192988/comm /proc/193005/comm /proc/193011/comm /proc/193061/comm /proc/193064/comm /proc/193099/comm /proc/193100/comm /proc/193101/comm /proc/2/comm /proc/20/comm /proc/202/comm /proc/203/comm /proc/204/comm /proc/205/comm /proc/206/comm /proc/21/comm /proc/215/comm /proc/21590/comm /proc/21660/comm /proc/21662/comm /proc/21689/comm /proc/219/comm /proc/22/comm /proc/220/comm /proc/225/comm /proc/24/comm /proc/247/comm /proc/24947/comm /proc/25/comm /proc/25208/comm /proc/25227/comm /proc/25252/comm /proc/25264/comm /proc/26/comm /proc/27/comm /proc/278/comm /proc/28/comm /proc/286/comm /proc/291/comm /proc/292/comm /proc/293/comm /proc/29710/comm /proc/29974/comm /proc/29991/comm /proc/3/comm /proc/30/comm /proc/30016/comm /proc/30028/comm /proc/31/comm /proc/312/comm /proc/313/comm /proc/317/comm /proc/318/comm /proc/319/comm /proc/32/comm /proc/320/comm /proc/321/comm /proc/322/comm /proc/323/comm /proc/324/comm /proc/33/comm /proc/34/comm /proc/34331/comm /proc/34612/comm /proc/34629/comm /proc/34654/comm /proc/34666/comm /proc/36/comm /proc/364/comm /proc/37/comm /proc/38/comm /proc/38909/comm /proc/38911/comm /proc/39/comm /proc/39039/comm /proc/39058/comm /proc/39082/comm /proc/39112/comm /proc/39138/comm /proc/395/comm /proc/399/comm /proc/4/comm /proc/40/comm /proc/41605/comm /proc/41656/comm /proc/41660/comm /proc/41662/comm /proc/41680/comm /proc/41682/comm /proc/41749/comm /proc/41759/comm /proc/41763/comm /proc/41783/comm /proc/41856/comm /proc/41866/comm /proc/41884/comm /proc/41936/comm /proc/42/comm /proc/42005/comm /proc/42062/comm /proc/42195/comm /proc/42221/comm /proc/42254/comm /proc/42953/comm /proc/42972/comm /proc/42999/comm /proc/43/comm /proc/43015/comm /proc/43268/comm /proc/43478/comm /proc/43893/comm /proc/44/comm /proc/44309/comm /proc/44333/comm /proc/44360/comm /proc/44703/comm /proc/44731/comm /proc/44742/comm /proc/44766/comm /proc/44797/comm /proc/44815/comm /proc/45/comm /proc/45186/comm /proc/45210/comm /proc/453/comm /proc/45358/comm /proc/45688/comm /proc/45719/comm /proc/45737/comm /proc/45761/comm /proc/45786/comm /proc/45811/comm /proc/45920/comm /proc/45965/comm /proc/46/comm /proc/46014/comm /proc/47846/comm /proc/47878/comm /proc/47922/comm /proc/47945/comm /proc/48/comm /proc/48157/comm /proc/48169/comm /proc/48204/comm /proc/48280/comm /proc/48826/comm /proc/48851/comm /proc/48925/comm /proc/48949/comm /proc/48997/comm /proc/49/comm /proc/49064/comm /proc/49283/comm /proc/49307/comm /proc/49427/comm /proc/49560/comm /proc/49583/comm /proc/49948/comm /proc/49971/comm /proc/5/comm /proc/50/comm /proc/50079/comm /proc/50165/comm /proc/50261/comm /proc/50290/comm /proc/50357/comm /proc/50406/comm /proc/51/comm /proc/52/comm /proc/521/comm /proc/52138/comm /proc/52165/comm /proc/52377/comm /proc/52400/comm /proc/52434/comm /proc/52540/comm /proc/52730/comm /proc/52836/comm /proc/52874/comm /proc/54/comm /proc/55/comm /proc/56/comm /proc/57/comm /proc/57206/comm /proc/57229/comm /proc/57848/comm /proc/57871/comm /proc/57886/comm /proc/57914/comm /proc/57926/comm /proc/57951/comm /proc/58/comm /proc/58086/comm /proc/58109/comm /proc/58173/comm /proc/58224/comm /proc/58257/comm /proc/58359/comm /proc/6/comm /proc/60/comm /proc/61/comm /proc/614/comm /proc/618/comm /proc/62/comm /proc/620/comm /proc/626/comm /proc/627/comm /proc/62791/comm /proc/62844/comm /proc/62873/comm /proc/63/comm /proc/63023/comm /proc/63052/comm /proc/63077/comm /proc/63100/comm /proc/63114/comm /proc/63138/comm /proc/63276/comm /proc/63277/comm /proc/63278/comm /proc/63279/comm /proc/63442/comm /proc/63859/comm /proc/64/comm /proc/64208/comm /proc/64236/comm /proc/64396/comm /proc/64427/comm /proc/64495/comm /proc/64496/comm /proc/645/comm /proc/64513/comm /proc/64545/comm /proc/64558/comm /proc/64579/comm /proc/64580/comm /proc/64880/comm /proc/64912/comm /proc/64929/comm /proc/64962/comm /proc/64981/comm /proc/65005/comm /proc/651/comm /proc/65393/comm /proc/65416/comm /proc/65485/comm /proc/65707/comm /proc/65731/comm /proc/66/comm /proc/66112/comm /proc/66126/comm /proc/66127/comm /proc/66128/comm /proc/66129/comm /proc/66130/comm /proc/66221/comm /proc/66245/comm /proc/66306/comm /proc/66566/comm /proc/66589/comm /proc/66609/comm /proc/66662/comm /proc/67/comm /proc/67022/comm /proc/67075/comm /proc/67373/comm /proc/67397/comm /proc/67464/comm /proc/67502/comm /proc/67549/comm /proc/67679/comm /proc/67747/comm /proc/67792/comm /proc/67873/comm /proc/67922/comm /proc/68/comm /proc/68062/comm /proc/68126/comm /proc/68377/comm /proc/68418/comm /proc/68454/comm /proc/68494/comm /proc/68586/comm /proc/68609/comm /proc/68786/comm /proc/68809/comm /proc/69/comm /proc/69120/comm /proc/69137/comm /proc/69143/comm /proc/69190/comm /proc/69191/comm /proc/69201/comm /proc/69455/comm /proc/70/comm /proc/70982/comm /proc/71010/comm /proc/713/comm /proc/716/comm /proc/717/comm /proc/72/comm /proc/73/comm /proc/730/comm /proc/74/comm /proc/74152/comm /proc/74203/comm /proc/74229/comm /proc/74230/comm /proc/74231/comm /proc/74232/comm /proc/74236/comm /proc/74237/comm /proc/74239/comm /proc/74241/comm /proc/74243/comm /proc/74244/comm /proc/74245/comm /proc/74246/comm /proc/74247/comm /proc/74248/comm /proc/75/comm /proc/76/comm /proc/77465/comm /proc/78/comm /proc/79/comm /proc/8/comm /proc/80/comm /proc/80129/comm /proc/80152/comm /proc/80343/comm /proc/80364/comm /proc/80370/comm /proc/80429/comm /proc/80430/comm /proc/80440/comm /proc/80493/comm /proc/81/comm /proc/81683/comm /proc/81706/comm /proc/82/comm /proc/84/comm /proc/85/comm /proc/85008/comm /proc/86/comm /proc/87/comm /proc/87081/comm /proc/87093/comm /proc/875/comm /proc/87891/comm /proc/87915/comm /proc/88/comm /proc/88713/comm /proc/9/comm /proc/90/comm /proc/9017/comm /proc/91/comm /proc/91382/comm /proc/92/comm /proc/9245/comm /proc/9262/comm /proc/9278/comm /proc/93/comm /proc/9361/comm /proc/94/comm /proc/94543/comm /proc/94572/comm /proc/94836/comm /proc/94853/comm /proc/94859/comm /proc/94962/comm /proc/94963/comm /proc/94974/comm /proc/95260/comm /proc/96/comm /proc/97/comm /proc/97738/comm /proc/97739/comm /proc/98/comm /proc/98102/comm /proc/98126/comm /proc/98150/comm /proc/98182/comm /proc/98467/comm /proc/98541/comm /proc/99/comm /proc/99359/comm /proc/9979/comm /proc/self/comm /proc/thread-self/comm
+ '[' -n '' ']'
+ rm -f /var/run/libvirtd.pid
+ [[ -c /dev/kvm ]]
+ chmod 660 /dev/kvm
+ chown root:kvm /dev/kvm
+ CGROUPS=
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/blkio ']'
+ grep -w blkio /sys/fs/cgroup/cgroup.controllers
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/cpu ']'
+ grep -w cpu /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=cpu,
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/devices ']'
+ grep -w devices /sys/fs/cgroup/cgroup.controllers
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/freezer ']'
+ grep -w freezer /sys/fs/cgroup/cgroup.controllers
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/hugetlb ']'
+ grep -w hugetlb /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=hugetlb,
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/memory ']'
+ grep -w memory /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=memory,
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/net_cls ']'
+ grep -w net_cls /sys/fs/cgroup/cgroup.controllers
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/perf_event ']'
+ grep -w perf_event /sys/fs/cgroup/cgroup.controllers
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/rdma ']'
+ grep -w rdma /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=rdma,
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/misc ']'
+ grep -w misc /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=misc,
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/pids ']'
+ grep -w pids /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=pids,
+ cgcreate -g cpu,hugetlb,memory,rdma,misc,pids:/osh-libvirt
++ cat /proc/meminfo
++ grep HugePages_Total
++ tr -cd '[:digit:]'
+ hp_count=0
+ '[' 00 -gt 0 ']'
+ '[' -n 457eb676-33da-42ec-9a8c-9293d545c337 ']'
+ cgexec -g cpu,hugetlb,memory,rdma,misc,pids:/osh-libvirt systemd-run --scope --slice=system libvirtd --listen
++ mktemp --suffix .xml
+ tmpsecret=/tmp/tmp.dPyuUdatyM.xml
+ '[' -n '' ']'
+ trap cleanup EXIT
+ TIMEOUT=60
+ [[ ! -f /var/run/libvirtd.pid ]]
+ [[ 60 -gt 0 ]]
+ let TIMEOUT-=1
+ sleep 1
Running as unit: run-rdde771a83863457cb3c32920fc495cd5.scope; invocation ID: 0ba9f2b6d9b24969bdf8b130b5f933e5
+ [[ ! -f /var/run/libvirtd.pid ]]
+ TIMEOUT=10
+ [[ ! -e /var/run/libvirt/libvirt-sock ]]
+ '[' -z '' ']'
+ '[' -n cinder ']'
++ awk '/key/{print $3}' /etc/ceph/ceph.client.cinder.keyring
+ CEPH_CINDER_KEYRING=AQCzxsVqOFSjLhAAJAwsrxQlUof3pUwWiFGBEQ==
+ '[' -n cinder ']'
+ create_virsh_libvirt_secret cinder 457eb676-33da-42ec-9a8c-9293d545c337 AQCzxsVqOFSjLhAAJAwsrxQlUof3pUwWiFGBEQ==
+ sec_user=cinder
+ sec_uuid=457eb676-33da-42ec-9a8c-9293d545c337
+ sec_ceph_keyring=AQCzxsVqOFSjLhAAJAwsrxQlUof3pUwWiFGBEQ==
+ cat
+ virsh secret-define --file /tmp/tmp.dPyuUdatyM.xml
Secret 457eb676-33da-42ec-9a8c-9293d545c337 created

+ virsh secret-set-value --secret 457eb676-33da-42ec-9a8c-9293d545c337 --base64 AQCzxsVqOFSjLhAAJAwsrxQlUof3pUwWiFGBEQ==
error: Passing secret value as command-line argument is insecure!
Secret value set

+ '[' -n '' ']'
+ '[' -n '' ']'
+ cleanup
+ rm -f /tmp/tmp.dPyuUdatyM.xml
+ '[' -n '' ']'
++ cat /var/run/libvirtd.pid
+ LIBVIRTD_PID=193121
+ kill 193121
+ tail --pid=193121 -f /dev/null
+ cgexec -g cpu,hugetlb,memory,rdma,misc,pids:/osh-libvirt systemd-run --scope --slice=system libvirtd --listen
Running as unit: run-r2e5e0d8cbaa1443da27d559fc283bae9.scope; invocation ID: aa587372f4ed4bdca04ad4e17074d578