+ wait_for_file /etc/pki/CA/cacert.pem
+ local file=/etc/pki/CA/cacert.pem
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ sleep 1
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ sleep 1
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ sleep 1
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ sleep 1
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ sleep 1
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ wait_for_file /etc/pki/qemu/ca-cert.pem
+ local file=/etc/pki/qemu/ca-cert.pem
+ '[' '!' -f /etc/pki/qemu/ca-cert.pem ']'
+ wait_for_file /etc/pki/libvirt/servercert.pem
+ local file=/etc/pki/libvirt/servercert.pem
+ '[' '!' -f /etc/pki/libvirt/servercert.pem ']'
+ wait_for_file /etc/pki/libvirt/clientcert.pem
+ local file=/etc/pki/libvirt/clientcert.pem
+ '[' '!' -f /etc/pki/libvirt/clientcert.pem ']'
+ wait_for_file /etc/pki/qemu/server-cert.pem
+ local file=/etc/pki/qemu/server-cert.pem
+ '[' '!' -f /etc/pki/qemu/server-cert.pem ']'
+ wait_for_file /etc/pki/qemu/client-cert.pem
+ local file=/etc/pki/qemu/client-cert.pem
+ '[' '!' -f /etc/pki/qemu/client-cert.pem ']'
+ wait_for_file /etc/pki/libvirt/private/serverkey.pem
+ local file=/etc/pki/libvirt/private/serverkey.pem
+ '[' '!' -f /etc/pki/libvirt/private/serverkey.pem ']'
+ wait_for_file /etc/pki/libvirt/private/clientkey.pem
+ local file=/etc/pki/libvirt/private/clientkey.pem
+ '[' '!' -f /etc/pki/libvirt/private/clientkey.pem ']'
+ wait_for_file /etc/pki/qemu/server-key.pem
+ local file=/etc/pki/qemu/server-key.pem
+ '[' '!' -f /etc/pki/qemu/server-key.pem ']'
+ wait_for_file /etc/pki/qemu/client-key.pem
+ local file=/etc/pki/qemu/client-key.pem
+ '[' '!' -f /etc/pki/qemu/client-key.pem ']'
+ wait_for_file /etc/pki/libvirt-vnc/ca-cert.pem
+ local file=/etc/pki/libvirt-vnc/ca-cert.pem
+ '[' '!' -f /etc/pki/libvirt-vnc/ca-cert.pem ']'
+ wait_for_file /etc/pki/libvirt-vnc/server-cert.pem
+ local file=/etc/pki/libvirt-vnc/server-cert.pem
+ '[' '!' -f /etc/pki/libvirt-vnc/server-cert.pem ']'
+ wait_for_file /etc/pki/libvirt-vnc/server-key.pem
+ local file=/etc/pki/libvirt-vnc/server-key.pem
+ '[' '!' -f /etc/pki/libvirt-vnc/server-key.pem ']'
++ grep -w libvirtd
++ cat /proc/1/comm /proc/10/comm /proc/100/comm /proc/100032/comm /proc/100058/comm /proc/100088/comm /proc/100114/comm /proc/100444/comm /proc/100622/comm /proc/101814/comm /proc/102/comm /proc/103/comm /proc/103192/comm /proc/10334/comm /proc/104/comm /proc/104052/comm /proc/104965/comm /proc/105/comm /proc/105910/comm /proc/105918/comm /proc/106/comm /proc/106265/comm /proc/107815/comm /proc/107828/comm /proc/107829/comm /proc/108/comm /proc/108249/comm /proc/109/comm /proc/1092/comm /proc/11/comm /proc/110/comm /proc/110476/comm /proc/110500/comm /proc/110560/comm /proc/110583/comm /proc/111/comm /proc/11100/comm /proc/11101/comm /proc/111100/comm /proc/111413/comm /proc/111479/comm /proc/112/comm /proc/112272/comm /proc/112286/comm /proc/112577/comm /proc/112579/comm /proc/112914/comm /proc/112939/comm /proc/113/comm /proc/113305/comm /proc/113937/comm /proc/113943/comm /proc/114/comm /proc/115/comm /proc/116/comm /proc/117/comm /proc/117011/comm /proc/117083/comm /proc/117106/comm /proc/117107/comm /proc/118099/comm /proc/118100/comm /proc/12/comm /proc/12489/comm /proc/124895/comm /proc/124896/comm /proc/124898/comm /proc/124899/comm /proc/125122/comm /proc/12520/comm /proc/12543/comm /proc/125513/comm /proc/125536/comm /proc/125833/comm /proc/125867/comm /proc/125880/comm /proc/125923/comm /proc/125924/comm /proc/125927/comm /proc/125930/comm /proc/12595/comm /proc/12615/comm /proc/126407/comm /proc/126434/comm /proc/126659/comm /proc/127169/comm /proc/127187/comm /proc/127411/comm /proc/127435/comm /proc/127450/comm /proc/127475/comm /proc/127700/comm /proc/127703/comm /proc/127738/comm /proc/127759/comm /proc/127809/comm /proc/127827/comm /proc/127950/comm /proc/128007/comm /proc/128172/comm /proc/128195/comm /proc/128345/comm /proc/128360/comm /proc/12852/comm /proc/128590/comm /proc/128595/comm /proc/128711/comm /proc/12884/comm /proc/129074/comm /proc/129173/comm /proc/129196/comm /proc/129385/comm /proc/129401/comm /proc/129407/comm /proc/12941/comm /proc/129465/comm /proc/129516/comm /proc/129517/comm /proc/12965/comm /proc/129655/comm /proc/12985/comm /proc/13/comm /proc/130775/comm /proc/130854/comm /proc/130886/comm /proc/130988/comm /proc/131016/comm /proc/131031/comm /proc/131056/comm /proc/131154/comm /proc/131179/comm /proc/131214/comm /proc/131223/comm /proc/131254/comm /proc/131264/comm /proc/131295/comm /proc/131700/comm /proc/131723/comm /proc/131942/comm /proc/132126/comm /proc/132727/comm /proc/133/comm /proc/14/comm /proc/1425/comm /proc/148858/comm /proc/148860/comm /proc/149649/comm /proc/149668/comm /proc/149901/comm /proc/15/comm /proc/151420/comm /proc/151446/comm /proc/152712/comm /proc/153130/comm /proc/153163/comm /proc/153164/comm /proc/153245/comm /proc/153258/comm /proc/153259/comm /proc/153641/comm /proc/153770/comm /proc/153875/comm /proc/154227/comm /proc/154260/comm /proc/1543/comm /proc/154315/comm /proc/154316/comm /proc/1544/comm /proc/154406/comm /proc/154407/comm /proc/1545/comm /proc/1546/comm /proc/154811/comm /proc/154889/comm /proc/154912/comm /proc/1550/comm /proc/155028/comm /proc/155044/comm /proc/155050/comm /proc/155181/comm /proc/155232/comm /proc/155233/comm /proc/155350/comm /proc/156321/comm /proc/156499/comm /proc/156530/comm /proc/156554/comm /proc/156589/comm /proc/156765/comm /proc/156789/comm /proc/157179/comm /proc/157192/comm /proc/157294/comm /proc/157301/comm /proc/159272/comm /proc/16/comm /proc/160225/comm /proc/160232/comm /proc/1617/comm /proc/162052/comm /proc/162053/comm /proc/162064/comm /proc/1621/comm /proc/1630/comm /proc/163190/comm /proc/163213/comm /proc/163645/comm /proc/163690/comm /proc/163766/comm /proc/163797/comm /proc/163863/comm /proc/163874/comm /proc/164150/comm /proc/164151/comm /proc/164152/comm /proc/164403/comm /proc/164484/comm /proc/164502/comm /proc/164503/comm /proc/164730/comm /proc/164731/comm /proc/164733/comm /proc/164734/comm /proc/164735/comm /proc/164736/comm /proc/164737/comm /proc/165487/comm /proc/165488/comm /proc/165539/comm /proc/165562/comm /proc/165699/comm /proc/165717/comm /proc/165723/comm /proc/165865/comm /proc/165916/comm /proc/165917/comm /proc/166/comm /proc/166093/comm /proc/167/comm /proc/167142/comm /proc/167157/comm /proc/167158/comm /proc/167159/comm /proc/167160/comm /proc/167161/comm /proc/167162/comm /proc/167211/comm /proc/167312/comm /proc/167639/comm /proc/167664/comm /proc/167696/comm /proc/167721/comm /proc/167740/comm /proc/167774/comm /proc/167800/comm /proc/167831/comm /proc/167845/comm /proc/167876/comm /proc/167910/comm /proc/168/comm /proc/168003/comm /proc/168067/comm /proc/168405/comm /proc/168406/comm /proc/168411/comm /proc/168449/comm /proc/168476/comm /proc/168509/comm /proc/168653/comm /proc/168690/comm /proc/168728/comm /proc/168798/comm /proc/168821/comm /proc/168923/comm /proc/168970/comm /proc/169/comm /proc/169017/comm /proc/169214/comm /proc/169229/comm /proc/169234/comm /proc/169253/comm /proc/169258/comm /proc/169259/comm /proc/169260/comm /proc/169261/comm /proc/169262/comm /proc/169263/comm /proc/170/comm /proc/171/comm /proc/172/comm /proc/173/comm /proc/174/comm /proc/176/comm /proc/178/comm /proc/18/comm /proc/181/comm /proc/182/comm /proc/184/comm /proc/185/comm /proc/187/comm /proc/18766/comm /proc/18786/comm /proc/188/comm /proc/18807/comm /proc/18835/comm /proc/18853/comm /proc/189/comm /proc/19/comm /proc/190/comm /proc/192/comm /proc/194/comm /proc/195/comm /proc/198/comm /proc/2/comm /proc/20/comm /proc/202/comm /proc/21/comm /proc/216/comm /proc/21784/comm /proc/21846/comm /proc/21848/comm /proc/21867/comm /proc/219/comm /proc/22/comm /proc/220/comm /proc/225/comm /proc/24/comm /proc/247/comm /proc/25/comm /proc/25111/comm /proc/25373/comm /proc/25390/comm /proc/25413/comm /proc/25426/comm /proc/26/comm /proc/27/comm /proc/276/comm /proc/28/comm /proc/287/comm /proc/289/comm /proc/290/comm /proc/291/comm /proc/293/comm /proc/29791/comm /proc/3/comm /proc/30/comm /proc/30059/comm /proc/30076/comm /proc/30102/comm /proc/30115/comm /proc/31/comm /proc/312/comm /proc/313/comm /proc/317/comm /proc/318/comm /proc/319/comm /proc/32/comm /proc/320/comm /proc/321/comm /proc/322/comm /proc/323/comm /proc/324/comm /proc/33/comm /proc/34/comm /proc/34411/comm /proc/34689/comm /proc/34706/comm /proc/34732/comm /proc/34744/comm /proc/36/comm /proc/364/comm /proc/37/comm /proc/38/comm /proc/383/comm /proc/39/comm /proc/39284/comm /proc/39286/comm /proc/39391/comm /proc/39412/comm /proc/39456/comm /proc/39483/comm /proc/395/comm /proc/39500/comm /proc/398/comm /proc/4/comm /proc/40/comm /proc/41960/comm /proc/41986/comm /proc/42/comm /proc/42001/comm /proc/42025/comm /proc/42050/comm /proc/42056/comm /proc/42059/comm /proc/42127/comm /proc/42136/comm /proc/42137/comm /proc/42207/comm /proc/42235/comm /proc/42255/comm /proc/42261/comm /proc/42384/comm /proc/42444/comm /proc/42595/comm /proc/42619/comm /proc/42657/comm /proc/43/comm /proc/43330/comm /proc/43355/comm /proc/43389/comm /proc/43412/comm /proc/43528/comm /proc/43835/comm /proc/44/comm /proc/44210/comm /proc/44666/comm /proc/44690/comm /proc/44735/comm /proc/45/comm /proc/45085/comm /proc/45111/comm /proc/45123/comm /proc/45148/comm /proc/45179/comm /proc/45204/comm /proc/453/comm /proc/45559/comm /proc/45583/comm /proc/45804/comm /proc/45890/comm /proc/46/comm /proc/46013/comm /proc/46044/comm /proc/46058/comm /proc/46084/comm /proc/46142/comm /proc/46168/comm /proc/46247/comm /proc/46295/comm /proc/46341/comm /proc/47897/comm /proc/47933/comm /proc/47981/comm /proc/48/comm /proc/48005/comm /proc/48218/comm /proc/48231/comm /proc/48266/comm /proc/48375/comm /proc/48731/comm /proc/48754/comm /proc/48815/comm /proc/48838/comm /proc/48884/comm /proc/49/comm /proc/49024/comm /proc/49192/comm /proc/49217/comm /proc/49552/comm /proc/49740/comm /proc/49764/comm /proc/49934/comm /proc/5/comm /proc/50/comm /proc/50049/comm /proc/50074/comm /proc/50198/comm /proc/50251/comm /proc/50348/comm /proc/50377/comm /proc/50419/comm /proc/50491/comm /proc/51/comm /proc/51462/comm /proc/51987/comm /proc/52/comm /proc/52010/comm /proc/521/comm /proc/52102/comm /proc/54/comm /proc/55/comm /proc/55435/comm /proc/55458/comm /proc/55936/comm /proc/55964/comm /proc/56/comm /proc/56074/comm /proc/56098/comm /proc/56112/comm /proc/56137/comm /proc/56258/comm /proc/56281/comm /proc/56319/comm /proc/56360/comm /proc/56397/comm /proc/56527/comm /proc/57/comm /proc/58/comm /proc/58776/comm /proc/58951/comm /proc/59029/comm /proc/59079/comm /proc/59104/comm /proc/59119/comm /proc/59154/comm /proc/59177/comm /proc/59201/comm /proc/59272/comm /proc/59409/comm /proc/59711/comm /proc/59753/comm /proc/59917/comm /proc/59920/comm /proc/59997/comm /proc/6/comm /proc/60/comm /proc/60022/comm /proc/60190/comm /proc/60215/comm /proc/60234/comm /proc/60235/comm /proc/60252/comm /proc/60298/comm /proc/60299/comm /proc/60412/comm /proc/60433/comm /proc/60753/comm /proc/60790/comm /proc/60838/comm /proc/60869/comm /proc/60892/comm /proc/60918/comm /proc/61/comm /proc/61236/comm /proc/61261/comm /proc/61292/comm /proc/613/comm /proc/616/comm /proc/61638/comm /proc/61662/comm /proc/61759/comm /proc/61782/comm /proc/61828/comm /proc/61846/comm /proc/61847/comm /proc/61848/comm /proc/61849/comm /proc/61850/comm /proc/619/comm /proc/62/comm /proc/62114/comm /proc/62174/comm /proc/62383/comm /proc/62409/comm /proc/625/comm /proc/626/comm /proc/62684/comm /proc/62726/comm /proc/62801/comm /proc/62987/comm /proc/63/comm /proc/63024/comm /proc/63047/comm /proc/63182/comm /proc/63268/comm /proc/63311/comm /proc/63354/comm /proc/63409/comm /proc/63462/comm /proc/63592/comm /proc/63690/comm /proc/63727/comm /proc/63915/comm /proc/63952/comm /proc/64/comm /proc/64054/comm /proc/64074/comm /proc/64218/comm /proc/64253/comm /proc/64436/comm /proc/64453/comm /proc/64459/comm /proc/645/comm /proc/64526/comm /proc/64577/comm /proc/64578/comm /proc/64671/comm /proc/650/comm /proc/65892/comm /proc/65922/comm /proc/66/comm /proc/66061/comm /proc/67/comm /proc/67623/comm /proc/68/comm /proc/68407/comm /proc/68445/comm /proc/68446/comm /proc/68447/comm /proc/68448/comm /proc/68449/comm /proc/68454/comm /proc/68457/comm /proc/68458/comm /proc/68459/comm /proc/68460/comm /proc/68461/comm /proc/68462/comm /proc/68463/comm /proc/68464/comm /proc/69/comm /proc/70/comm /proc/70362/comm /proc/70390/comm /proc/706/comm /proc/70861/comm /proc/709/comm /proc/710/comm /proc/72/comm /proc/723/comm /proc/72347/comm /proc/72371/comm /proc/72452/comm /proc/72469/comm /proc/72475/comm /proc/72543/comm /proc/72594/comm /proc/72595/comm /proc/72646/comm /proc/73/comm /proc/73305/comm /proc/73330/comm /proc/73541/comm /proc/74/comm /proc/74290/comm /proc/74861/comm /proc/75/comm /proc/76/comm /proc/77172/comm /proc/77184/comm /proc/77667/comm /proc/77691/comm /proc/78/comm /proc/78191/comm /proc/79/comm /proc/8/comm /proc/80/comm /proc/80526/comm /proc/80994/comm /proc/81/comm /proc/81652/comm /proc/81653/comm /proc/82/comm /proc/82152/comm /proc/82178/comm /proc/82391/comm /proc/82409/comm /proc/82417/comm /proc/82540/comm /proc/82619/comm /proc/82620/comm /proc/82925/comm /proc/84/comm /proc/85/comm /proc/86/comm /proc/87/comm /proc/870/comm /proc/87094/comm /proc/88/comm /proc/88042/comm /proc/88085/comm /proc/88105/comm /proc/88130/comm /proc/88238/comm /proc/88346/comm /proc/89221/comm /proc/90/comm /proc/90157/comm /proc/91/comm /proc/92/comm /proc/9231/comm /proc/92460/comm /proc/9248/comm /proc/9264/comm /proc/92959/comm /proc/93/comm /proc/9346/comm /proc/94/comm /proc/95234/comm /proc/95791/comm /proc/95816/comm /proc/96/comm /proc/96132/comm /proc/96146/comm /proc/96147/comm /proc/97/comm /proc/97049/comm /proc/97076/comm /proc/97116/comm /proc/97161/comm /proc/97393/comm /proc/97497/comm /proc/97606/comm /proc/97668/comm /proc/97670/comm /proc/98/comm /proc/98174/comm /proc/98377/comm /proc/98741/comm /proc/98765/comm /proc/98843/comm /proc/98860/comm /proc/98866/comm /proc/98924/comm /proc/98975/comm /proc/98976/comm /proc/99/comm /proc/99169/comm /proc/9962/comm /proc/self/comm /proc/thread-self/comm
+ '[' -n '' ']'
+ rm -f /var/run/libvirtd.pid
+ [[ -c /dev/kvm ]]
+ chmod 660 /dev/kvm
+ chown root:kvm /dev/kvm
+ CGROUPS=
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/blkio ']'
+ grep -w blkio /sys/fs/cgroup/cgroup.controllers
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/cpu ']'
+ grep -w cpu /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=cpu,
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/devices ']'
+ grep -w devices /sys/fs/cgroup/cgroup.controllers
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/freezer ']'
+ grep -w freezer /sys/fs/cgroup/cgroup.controllers
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/hugetlb ']'
+ grep -w hugetlb /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=hugetlb,
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/memory ']'
+ grep -w memory /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=memory,
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/net_cls ']'
+ grep -w net_cls /sys/fs/cgroup/cgroup.controllers
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/perf_event ']'
+ grep -w perf_event /sys/fs/cgroup/cgroup.controllers
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/rdma ']'
+ grep -w rdma /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=rdma,
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/misc ']'
+ grep -w misc /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=misc,
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/pids ']'
+ grep -w pids /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=pids,
+ cgcreate -g cpu,hugetlb,memory,rdma,misc,pids:/osh-libvirt
++ cat /proc/meminfo
++ grep HugePages_Total
++ tr -cd '[:digit:]'
+ hp_count=0
+ '[' 00 -gt 0 ']'
+ '[' -n 457eb676-33da-42ec-9a8c-9293d545c337 ']'
+ cgexec -g cpu,hugetlb,memory,rdma,misc,pids:/osh-libvirt systemd-run --scope --slice=system libvirtd --listen
++ mktemp --suffix .xml
+ tmpsecret=/tmp/tmp.IRK1bMrGn3.xml
+ '[' -n '' ']'
+ trap cleanup EXIT
+ TIMEOUT=60
+ [[ ! -f /var/run/libvirtd.pid ]]
+ [[ 60 -gt 0 ]]
+ let TIMEOUT-=1
+ sleep 1
Running scope as unit: run-r081e7c9102a14e2e9e000c5f716483ca.scope
+ [[ ! -f /var/run/libvirtd.pid ]]
+ TIMEOUT=10
+ [[ ! -e /var/run/libvirt/libvirt-sock ]]
+ '[' -z '' ']'
+ '[' -n cinder ']'
++ awk '/key/{print $3}' /etc/ceph/ceph.client.cinder.keyring
+ CEPH_CINDER_KEYRING=AQD88WJqtyFpBRAAQKWgpXK2Og37RczWEt2VNg==
+ '[' -n cinder ']'
+ create_virsh_libvirt_secret cinder 457eb676-33da-42ec-9a8c-9293d545c337 AQD88WJqtyFpBRAAQKWgpXK2Og37RczWEt2VNg==
+ sec_user=cinder
+ sec_uuid=457eb676-33da-42ec-9a8c-9293d545c337
+ sec_ceph_keyring=AQD88WJqtyFpBRAAQKWgpXK2Og37RczWEt2VNg==
+ cat
+ virsh secret-define --file /tmp/tmp.IRK1bMrGn3.xml
Secret 457eb676-33da-42ec-9a8c-9293d545c337 created

+ virsh secret-set-value --secret 457eb676-33da-42ec-9a8c-9293d545c337 --base64 AQD88WJqtyFpBRAAQKWgpXK2Og37RczWEt2VNg==
error: Passing secret value as command-line argument is insecure!
Secret value set

+ '[' -n '' ']'
+ cleanup
+ rm -f /tmp/tmp.IRK1bMrGn3.xml
+ '[' -n '' ']'
++ cat /var/run/libvirtd.pid
+ LIBVIRTD_PID=169310
+ kill 169310
+ tail --pid=169310 -f /dev/null
+ cgexec -g cpu,hugetlb,memory,rdma,misc,pids:/osh-libvirt systemd-run --scope --slice=system libvirtd --listen
Running scope as unit: run-r98cb2f96258348c680adf825946157d7.scope