+ wait_for_file /etc/pki/CA/cacert.pem + local file=/etc/pki/CA/cacert.pem + '[' '!' -f /etc/pki/CA/cacert.pem ']' + sleep 1 + '[' '!' -f /etc/pki/CA/cacert.pem ']' + sleep 1 + '[' '!' -f /etc/pki/CA/cacert.pem ']' + sleep 1 + '[' '!' -f /etc/pki/CA/cacert.pem ']' + sleep 1 + '[' '!' -f /etc/pki/CA/cacert.pem ']' + sleep 1 + '[' '!' -f /etc/pki/CA/cacert.pem ']' + wait_for_file /etc/pki/qemu/ca-cert.pem + local file=/etc/pki/qemu/ca-cert.pem + '[' '!' -f /etc/pki/qemu/ca-cert.pem ']' + wait_for_file /etc/pki/libvirt/servercert.pem + local file=/etc/pki/libvirt/servercert.pem + '[' '!' -f /etc/pki/libvirt/servercert.pem ']' + wait_for_file /etc/pki/libvirt/clientcert.pem + local file=/etc/pki/libvirt/clientcert.pem + '[' '!' -f /etc/pki/libvirt/clientcert.pem ']' + wait_for_file /etc/pki/qemu/server-cert.pem + local file=/etc/pki/qemu/server-cert.pem + '[' '!' -f /etc/pki/qemu/server-cert.pem ']' + wait_for_file /etc/pki/qemu/client-cert.pem + local file=/etc/pki/qemu/client-cert.pem + '[' '!' -f /etc/pki/qemu/client-cert.pem ']' + wait_for_file /etc/pki/libvirt/private/serverkey.pem + local file=/etc/pki/libvirt/private/serverkey.pem + '[' '!' -f /etc/pki/libvirt/private/serverkey.pem ']' + wait_for_file /etc/pki/libvirt/private/clientkey.pem + local file=/etc/pki/libvirt/private/clientkey.pem + '[' '!' -f /etc/pki/libvirt/private/clientkey.pem ']' + wait_for_file /etc/pki/qemu/server-key.pem + local file=/etc/pki/qemu/server-key.pem + '[' '!' -f /etc/pki/qemu/server-key.pem ']' + wait_for_file /etc/pki/qemu/client-key.pem + local file=/etc/pki/qemu/client-key.pem + '[' '!' -f /etc/pki/qemu/client-key.pem ']' + wait_for_file /etc/pki/libvirt-vnc/ca-cert.pem + local file=/etc/pki/libvirt-vnc/ca-cert.pem + '[' '!' -f /etc/pki/libvirt-vnc/ca-cert.pem ']' + wait_for_file /etc/pki/libvirt-vnc/server-cert.pem + local file=/etc/pki/libvirt-vnc/server-cert.pem + '[' '!' -f /etc/pki/libvirt-vnc/server-cert.pem ']' + wait_for_file /etc/pki/libvirt-vnc/server-key.pem + local file=/etc/pki/libvirt-vnc/server-key.pem + '[' '!' -f /etc/pki/libvirt-vnc/server-key.pem ']' ++ grep -w libvirtd ++ cat /proc/1/comm /proc/10/comm /proc/100/comm /proc/101103/comm /proc/101126/comm /proc/101147/comm /proc/101174/comm /proc/101360/comm /proc/101450/comm /proc/102/comm /proc/102510/comm /proc/103/comm /proc/10337/comm /proc/103375/comm /proc/10360/comm /proc/104/comm /proc/104216/comm /proc/105/comm /proc/105347/comm /proc/106/comm /proc/107650/comm /proc/108/comm /proc/108261/comm /proc/109/comm /proc/109370/comm /proc/1099/comm /proc/11/comm /proc/110/comm /proc/11098/comm /proc/11099/comm /proc/111/comm /proc/112/comm /proc/113/comm /proc/114/comm /proc/114158/comm /proc/114182/comm /proc/114307/comm /proc/114538/comm /proc/114551/comm /proc/114552/comm /proc/115/comm /proc/115582/comm /proc/115606/comm /proc/115646/comm /proc/115680/comm /proc/115895/comm /proc/115916/comm /proc/116/comm /proc/116271/comm /proc/116273/comm /proc/116290/comm /proc/116941/comm /proc/117/comm /proc/117279/comm /proc/117652/comm /proc/117676/comm /proc/117818/comm /proc/117835/comm /proc/117841/comm /proc/117975/comm /proc/117976/comm /proc/117986/comm /proc/118051/comm /proc/119444/comm /proc/119472/comm /proc/119499/comm /proc/119537/comm /proc/119992/comm /proc/12/comm /proc/121547/comm /proc/122534/comm /proc/122653/comm /proc/123759/comm /proc/123760/comm /proc/124815/comm /proc/124865/comm /proc/12492/comm /proc/12524/comm /proc/12560/comm /proc/12605/comm /proc/12617/comm /proc/126319/comm /proc/128479/comm /proc/12855/comm /proc/12882/comm /proc/12937/comm /proc/12963/comm /proc/12983/comm /proc/13/comm /proc/14/comm /proc/140476/comm /proc/140488/comm /proc/140489/comm /proc/142188/comm /proc/143354/comm /proc/143379/comm /proc/1434/comm /proc/143400/comm /proc/143436/comm /proc/143903/comm /proc/143933/comm /proc/144417/comm /proc/144688/comm /proc/145925/comm /proc/145949/comm /proc/146/comm /proc/15/comm /proc/150133/comm /proc/151150/comm /proc/151174/comm /proc/151646/comm /proc/151672/comm /proc/151673/comm /proc/153073/comm /proc/153074/comm /proc/1539/comm /proc/1540/comm /proc/1541/comm /proc/1542/comm /proc/1546/comm /proc/16/comm /proc/160268/comm /proc/160269/comm /proc/160271/comm /proc/160272/comm /proc/160381/comm /proc/160390/comm /proc/160966/comm /proc/160989/comm /proc/1613/comm /proc/161371/comm /proc/161404/comm /proc/161417/comm /proc/161449/comm /proc/161450/comm /proc/161451/comm /proc/161453/comm /proc/161454/comm /proc/1617/comm /proc/1626/comm /proc/162627/comm /proc/162650/comm /proc/162998/comm /proc/163024/comm /proc/163241/comm /proc/163529/comm /proc/163719/comm /proc/163886/comm /proc/163910/comm /proc/164110/comm /proc/164127/comm /proc/164133/comm /proc/164214/comm /proc/164215/comm /proc/164225/comm /proc/164291/comm /proc/165874/comm /proc/165961/comm /proc/166/comm /proc/166067/comm /proc/166168/comm /proc/166196/comm /proc/166300/comm /proc/166343/comm /proc/166361/comm /proc/166414/comm /proc/166490/comm /proc/166545/comm /proc/166599/comm /proc/166643/comm /proc/166710/comm /proc/166928/comm /proc/166974/comm /proc/167/comm /proc/167418/comm /proc/167420/comm /proc/167801/comm /proc/168/comm /proc/169/comm /proc/170/comm /proc/171/comm /proc/171261/comm /proc/171665/comm /proc/172/comm /proc/172102/comm /proc/172242/comm /proc/173/comm /proc/173445/comm /proc/173446/comm /proc/173448/comm /proc/173471/comm /proc/174/comm /proc/174360/comm /proc/174585/comm /proc/174590/comm /proc/175894/comm /proc/176015/comm /proc/176059/comm /proc/176567/comm /proc/176599/comm /proc/176600/comm /proc/176650/comm /proc/176730/comm /proc/176731/comm /proc/177291/comm /proc/177293/comm /proc/177336/comm /proc/177665/comm /proc/177666/comm /proc/177734/comm /proc/177736/comm /proc/178/comm /proc/178085/comm /proc/178086/comm /proc/178184/comm /proc/178263/comm /proc/178378/comm /proc/178402/comm /proc/178577/comm /proc/178615/comm /proc/178635/comm /proc/178775/comm /proc/178776/comm /proc/178786/comm /proc/178888/comm /proc/18/comm /proc/180187/comm /proc/180223/comm /proc/180259/comm /proc/180288/comm /proc/180301/comm /proc/180343/comm /proc/180352/comm /proc/180362/comm /proc/180405/comm /proc/180484/comm /proc/180549/comm /proc/180735/comm /proc/180755/comm /proc/180777/comm /proc/180799/comm /proc/181/comm /proc/181340/comm /proc/181353/comm /proc/181510/comm /proc/182/comm /proc/184/comm /proc/184162/comm /proc/184739/comm /proc/185/comm /proc/187/comm /proc/187182/comm /proc/187193/comm /proc/18751/comm /proc/18769/comm /proc/18791/comm /proc/188/comm /proc/18817/comm /proc/18834/comm /proc/188471/comm /proc/188684/comm /proc/188879/comm /proc/188880/comm /proc/188881/comm /proc/189/comm /proc/189213/comm /proc/189214/comm /proc/189246/comm /proc/189247/comm /proc/189261/comm /proc/189273/comm /proc/189274/comm /proc/189529/comm /proc/189532/comm /proc/189535/comm /proc/19/comm /proc/190/comm /proc/190139/comm /proc/190551/comm /proc/190786/comm /proc/191/comm /proc/191380/comm /proc/191402/comm /proc/191661/comm /proc/191686/comm /proc/191779/comm /proc/191939/comm /proc/191947/comm /proc/192/comm /proc/192267/comm /proc/192648/comm /proc/192673/comm /proc/192679/comm /proc/192681/comm /proc/192682/comm /proc/192683/comm /proc/192689/comm /proc/192820/comm /proc/192821/comm /proc/192825/comm /proc/192826/comm /proc/192827/comm /proc/192828/comm /proc/192829/comm /proc/192830/comm /proc/192831/comm /proc/192832/comm /proc/192833/comm /proc/192834/comm /proc/192835/comm /proc/192836/comm /proc/192837/comm /proc/192838/comm /proc/192839/comm /proc/192840/comm /proc/192841/comm /proc/192842/comm /proc/192843/comm /proc/192844/comm /proc/192845/comm /proc/192846/comm /proc/192847/comm /proc/192848/comm /proc/192849/comm /proc/192850/comm /proc/192851/comm /proc/192852/comm /proc/192853/comm /proc/192854/comm /proc/192855/comm /proc/192868/comm /proc/193/comm /proc/193143/comm /proc/193191/comm /proc/193217/comm /proc/193315/comm /proc/193414/comm /proc/193438/comm /proc/193568/comm /proc/193572/comm /proc/193625/comm /proc/193626/comm /proc/193645/comm /proc/193662/comm /proc/193668/comm /proc/193715/comm /proc/193716/comm /proc/193717/comm /proc/194/comm /proc/197/comm /proc/2/comm /proc/20/comm /proc/201/comm /proc/21/comm /proc/216/comm /proc/21782/comm /proc/21850/comm /proc/21852/comm /proc/21870/comm /proc/219/comm /proc/22/comm /proc/220/comm /proc/225/comm /proc/24/comm /proc/247/comm /proc/25/comm /proc/25119/comm /proc/25396/comm /proc/25413/comm /proc/25437/comm /proc/25449/comm /proc/26/comm /proc/268/comm /proc/27/comm /proc/28/comm /proc/287/comm /proc/289/comm /proc/291/comm /proc/292/comm /proc/29627/comm /proc/29905/comm /proc/29923/comm /proc/29947/comm /proc/29959/comm /proc/3/comm /proc/30/comm /proc/31/comm /proc/311/comm /proc/312/comm /proc/316/comm /proc/32/comm /proc/33/comm /proc/34/comm /proc/343/comm /proc/34435/comm /proc/34708/comm /proc/34725/comm /proc/34749/comm /proc/34761/comm /proc/357/comm /proc/36/comm /proc/37/comm /proc/38/comm /proc/38052/comm /proc/38054/comm /proc/385/comm /proc/386/comm /proc/387/comm /proc/39/comm /proc/393/comm /proc/396/comm /proc/4/comm /proc/40/comm /proc/400/comm /proc/40418/comm /proc/40438/comm /proc/40453/comm /proc/40475/comm /proc/40501/comm /proc/40518/comm /proc/40545/comm /proc/40566/comm /proc/40569/comm /proc/40594/comm /proc/40657/comm /proc/40677/comm /proc/40697/comm /proc/40714/comm /proc/40817/comm /proc/40887/comm /proc/41032/comm /proc/41055/comm /proc/41080/comm /proc/41786/comm /proc/41812/comm /proc/41826/comm /proc/41853/comm /proc/42/comm /proc/42129/comm /proc/42290/comm /proc/42373/comm /proc/42713/comm /proc/43/comm /proc/43132/comm /proc/43154/comm /proc/43191/comm /proc/43512/comm /proc/43540/comm /proc/43574/comm /proc/43608/comm /proc/43634/comm /proc/43666/comm /proc/44/comm /proc/44113/comm /proc/44138/comm /proc/44237/comm /proc/44547/comm /proc/44577/comm /proc/44603/comm /proc/44626/comm /proc/44640/comm /proc/44664/comm /proc/44783/comm /proc/44825/comm /proc/44870/comm /proc/45/comm /proc/454/comm /proc/46/comm /proc/47042/comm /proc/47073/comm /proc/47152/comm /proc/47174/comm /proc/47393/comm /proc/47405/comm /proc/47438/comm /proc/47508/comm /proc/47891/comm /proc/47916/comm /proc/47957/comm /proc/47979/comm /proc/48/comm /proc/48048/comm /proc/48175/comm /proc/48346/comm /proc/48369/comm /proc/48488/comm /proc/487/comm /proc/48702/comm /proc/48725/comm /proc/49/comm /proc/49014/comm /proc/49038/comm /proc/49174/comm /proc/49349/comm /proc/49445/comm /proc/49477/comm /proc/49535/comm /proc/49592/comm /proc/5/comm /proc/50/comm /proc/50471/comm /proc/51/comm /proc/51020/comm /proc/51322/comm /proc/51346/comm /proc/51474/comm /proc/51497/comm /proc/51527/comm /proc/51689/comm /proc/51856/comm /proc/51936/comm /proc/52/comm /proc/520/comm /proc/53/comm /proc/54/comm /proc/55/comm /proc/55930/comm /proc/56/comm /proc/57/comm /proc/58/comm /proc/581/comm /proc/584/comm /proc/59409/comm /proc/59435/comm /proc/6/comm /proc/60/comm /proc/60353/comm /proc/60376/comm /proc/60409/comm /proc/60433/comm /proc/60447/comm /proc/60471/comm /proc/60562/comm /proc/60585/comm /proc/60772/comm /proc/60808/comm /proc/60843/comm /proc/60946/comm /proc/61/comm /proc/615/comm /proc/618/comm /proc/62/comm /proc/621/comm /proc/62101/comm /proc/62146/comm /proc/627/comm /proc/628/comm /proc/63/comm /proc/64/comm /proc/644/comm /proc/65077/comm /proc/651/comm /proc/65370/comm /proc/65400/comm /proc/65453/comm /proc/65477/comm /proc/65493/comm /proc/65518/comm /proc/65540/comm /proc/65564/comm /proc/65867/comm /proc/66/comm /proc/66126/comm /proc/66152/comm /proc/66176/comm /proc/66312/comm /proc/66313/comm /proc/66350/comm /proc/66351/comm /proc/66506/comm /proc/66724/comm /proc/66931/comm /proc/67/comm /proc/67121/comm /proc/67145/comm /proc/67226/comm /proc/67255/comm /proc/67272/comm /proc/67296/comm /proc/67516/comm /proc/67545/comm /proc/67623/comm /proc/67646/comm /proc/68/comm /proc/68060/comm /proc/68085/comm /proc/68127/comm /proc/68235/comm /proc/68259/comm /proc/68289/comm /proc/68467/comm /proc/68633/comm /proc/68650/comm /proc/68651/comm /proc/68652/comm /proc/68653/comm /proc/68654/comm /proc/68868/comm /proc/68893/comm /proc/69/comm /proc/69005/comm /proc/69029/comm /proc/69099/comm /proc/69201/comm /proc/69861/comm /proc/69884/comm /proc/69989/comm /proc/70/comm /proc/70029/comm /proc/70125/comm /proc/70237/comm /proc/70293/comm /proc/70532/comm /proc/706/comm /proc/70602/comm /proc/70633/comm /proc/70832/comm /proc/70844/comm /proc/709/comm /proc/70989/comm /proc/710/comm /proc/71152/comm /proc/71191/comm /proc/71240/comm /proc/71300/comm /proc/71398/comm /proc/71422/comm /proc/71543/comm /proc/71561/comm /proc/72/comm /proc/72246/comm /proc/72263/comm /proc/72269/comm /proc/72316/comm /proc/72317/comm /proc/72327/comm /proc/724/comm /proc/72483/comm /proc/73/comm /proc/73780/comm /proc/73803/comm /proc/74/comm /proc/74501/comm /proc/75/comm /proc/75400/comm /proc/76/comm /proc/76885/comm /proc/77430/comm /proc/77448/comm /proc/77449/comm /proc/77450/comm /proc/77451/comm /proc/77452/comm /proc/77456/comm /proc/77459/comm /proc/77460/comm /proc/77461/comm /proc/77462/comm /proc/77464/comm /proc/77465/comm /proc/77466/comm /proc/77467/comm /proc/78/comm /proc/79/comm /proc/8/comm /proc/80/comm /proc/81/comm /proc/82/comm /proc/82686/comm /proc/82687/comm /proc/83007/comm /proc/83031/comm /proc/83146/comm /proc/83162/comm /proc/83168/comm /proc/83297/comm /proc/83298/comm /proc/83308/comm /proc/83379/comm /proc/84/comm /proc/84470/comm /proc/84495/comm /proc/85/comm /proc/85684/comm /proc/85869/comm /proc/86/comm /proc/87/comm /proc/871/comm /proc/88/comm /proc/89658/comm /proc/89672/comm /proc/90/comm /proc/90410/comm /proc/90435/comm /proc/91/comm /proc/91475/comm /proc/92/comm /proc/9229/comm /proc/9246/comm /proc/9262/comm /proc/93/comm /proc/9344/comm /proc/94/comm /proc/94128/comm /proc/96/comm /proc/96855/comm /proc/96879/comm /proc/97/comm /proc/97249/comm /proc/97266/comm /proc/97272/comm /proc/97436/comm /proc/97437/comm /proc/97464/comm /proc/97575/comm /proc/98/comm /proc/99/comm /proc/9963/comm /proc/self/comm /proc/thread-self/comm + '[' -n '' ']' + rm -f /var/run/libvirtd.pid + [[ -c /dev/kvm ]] + chmod 660 /dev/kvm + chown root:kvm /dev/kvm + CGROUPS= + for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids + '[' -d /sys/fs/cgroup/blkio ']' + grep -w blkio /sys/fs/cgroup/cgroup.controllers + for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids + '[' -d /sys/fs/cgroup/cpu ']' + grep -w cpu /sys/fs/cgroup/cgroup.controllers cpuset cpu io memory hugetlb pids rdma misc + CGROUPS+=cpu, + for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids + '[' -d /sys/fs/cgroup/devices ']' + grep -w devices /sys/fs/cgroup/cgroup.controllers + for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids + '[' -d /sys/fs/cgroup/freezer ']' + grep -w freezer /sys/fs/cgroup/cgroup.controllers + for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids + '[' -d /sys/fs/cgroup/hugetlb ']' + grep -w hugetlb /sys/fs/cgroup/cgroup.controllers + CGROUPS+=hugetlb, + for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids + '[' -d /sys/fs/cgroup/memory ']' + grep -w memory /sys/fs/cgroup/cgroup.controllers cpuset cpu io memory hugetlb pids rdma misc cpuset cpu io memory hugetlb pids rdma misc + CGROUPS+=memory, + for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids + '[' -d /sys/fs/cgroup/net_cls ']' + grep -w net_cls /sys/fs/cgroup/cgroup.controllers + for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids + '[' -d /sys/fs/cgroup/perf_event ']' + grep -w perf_event /sys/fs/cgroup/cgroup.controllers + for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids + '[' -d /sys/fs/cgroup/rdma ']' + grep -w rdma /sys/fs/cgroup/cgroup.controllers cpuset cpu io memory hugetlb pids rdma misc + CGROUPS+=rdma, + for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids + '[' -d /sys/fs/cgroup/misc ']' + grep -w misc /sys/fs/cgroup/cgroup.controllers cpuset cpu io memory hugetlb pids rdma misc + CGROUPS+=misc, + for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids + '[' -d /sys/fs/cgroup/pids ']' + grep -w pids /sys/fs/cgroup/cgroup.controllers cpuset cpu io memory hugetlb pids rdma misc + CGROUPS+=pids, + cgcreate -g cpu,hugetlb,memory,rdma,misc,pids:/osh-libvirt ++ cat /proc/meminfo ++ grep HugePages_Total ++ tr -cd '[:digit:]' + hp_count=0 + '[' 00 -gt 0 ']' + '[' -n 457eb676-33da-42ec-9a8c-9293d545c337 ']' + cgexec -g cpu,hugetlb,memory,rdma,misc,pids:/osh-libvirt systemd-run --scope --slice=system libvirtd --listen ++ mktemp --suffix .xml + tmpsecret=/tmp/tmp.rsVXAwWUGF.xml + '[' -n '' ']' + trap cleanup EXIT + TIMEOUT=60 + [[ ! -f /var/run/libvirtd.pid ]] + [[ 60 -gt 0 ]] + let TIMEOUT-=1 + sleep 1 Running as unit: run-re1aba671a483438ebbf9b3879177b089.scope; invocation ID: 409c9e69a8de4336a33cf3a67f59b788 + [[ ! -f /var/run/libvirtd.pid ]] + TIMEOUT=10 + [[ ! -e /var/run/libvirt/libvirt-sock ]] + '[' -z '' ']' + '[' -n cinder ']' ++ awk '/key/{print $3}' /etc/ceph/ceph.client.cinder.keyring + CEPH_CINDER_KEYRING=AQAWQxZqEZ5SHRAA+xg0UaO8mNRWupamp917OQ== + '[' -n cinder ']' + create_virsh_libvirt_secret cinder 457eb676-33da-42ec-9a8c-9293d545c337 AQAWQxZqEZ5SHRAA+xg0UaO8mNRWupamp917OQ== + sec_user=cinder + sec_uuid=457eb676-33da-42ec-9a8c-9293d545c337 + sec_ceph_keyring=AQAWQxZqEZ5SHRAA+xg0UaO8mNRWupamp917OQ== + cat + virsh secret-define --file /tmp/tmp.rsVXAwWUGF.xml Secret 457eb676-33da-42ec-9a8c-9293d545c337 created + virsh secret-set-value --secret 457eb676-33da-42ec-9a8c-9293d545c337 --base64 AQAWQxZqEZ5SHRAA+xg0UaO8mNRWupamp917OQ== error: Passing secret value as command-line argument is insecure! Secret value set + '[' -n '' ']' + '[' -n '' ']' + cleanup + rm -f /tmp/tmp.rsVXAwWUGF.xml + '[' -n '' ']' ++ cat /var/run/libvirtd.pid + LIBVIRTD_PID=193737 + kill 193737 + tail --pid=193737 -f /dev/null + cgexec -g cpu,hugetlb,memory,rdma,misc,pids:/osh-libvirt systemd-run --scope --slice=system libvirtd --listen Running as unit: run-r1067944eb469406fbb7e8a07ef313230.scope; invocation ID: a37f33af79674fd38209f795beccafd1