+ wait_for_file /etc/pki/CA/cacert.pem
+ local file=/etc/pki/CA/cacert.pem
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ sleep 1
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ sleep 1
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ sleep 1
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ sleep 1
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ sleep 1
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ wait_for_file /etc/pki/qemu/ca-cert.pem
+ local file=/etc/pki/qemu/ca-cert.pem
+ '[' '!' -f /etc/pki/qemu/ca-cert.pem ']'
+ wait_for_file /etc/pki/libvirt/servercert.pem
+ local file=/etc/pki/libvirt/servercert.pem
+ '[' '!' -f /etc/pki/libvirt/servercert.pem ']'
+ wait_for_file /etc/pki/libvirt/clientcert.pem
+ local file=/etc/pki/libvirt/clientcert.pem
+ '[' '!' -f /etc/pki/libvirt/clientcert.pem ']'
+ wait_for_file /etc/pki/qemu/server-cert.pem
+ local file=/etc/pki/qemu/server-cert.pem
+ '[' '!' -f /etc/pki/qemu/server-cert.pem ']'
+ wait_for_file /etc/pki/qemu/client-cert.pem
+ local file=/etc/pki/qemu/client-cert.pem
+ '[' '!' -f /etc/pki/qemu/client-cert.pem ']'
+ wait_for_file /etc/pki/libvirt/private/serverkey.pem
+ local file=/etc/pki/libvirt/private/serverkey.pem
+ '[' '!' -f /etc/pki/libvirt/private/serverkey.pem ']'
+ wait_for_file /etc/pki/libvirt/private/clientkey.pem
+ local file=/etc/pki/libvirt/private/clientkey.pem
+ '[' '!' -f /etc/pki/libvirt/private/clientkey.pem ']'
+ wait_for_file /etc/pki/qemu/server-key.pem
+ local file=/etc/pki/qemu/server-key.pem
+ '[' '!' -f /etc/pki/qemu/server-key.pem ']'
+ wait_for_file /etc/pki/qemu/client-key.pem
+ local file=/etc/pki/qemu/client-key.pem
+ '[' '!' -f /etc/pki/qemu/client-key.pem ']'
+ wait_for_file /etc/pki/libvirt-vnc/ca-cert.pem
+ local file=/etc/pki/libvirt-vnc/ca-cert.pem
+ '[' '!' -f /etc/pki/libvirt-vnc/ca-cert.pem ']'
+ wait_for_file /etc/pki/libvirt-vnc/server-cert.pem
+ local file=/etc/pki/libvirt-vnc/server-cert.pem
+ '[' '!' -f /etc/pki/libvirt-vnc/server-cert.pem ']'
+ wait_for_file /etc/pki/libvirt-vnc/server-key.pem
+ local file=/etc/pki/libvirt-vnc/server-key.pem
+ '[' '!' -f /etc/pki/libvirt-vnc/server-key.pem ']'
++ grep -w libvirtd
++ cat /proc/1/comm /proc/10/comm /proc/100/comm /proc/100555/comm /proc/101086/comm /proc/101930/comm /proc/102/comm /proc/102306/comm /proc/103/comm /proc/10331/comm /proc/103892/comm /proc/104/comm /proc/105/comm /proc/105173/comm /proc/105174/comm /proc/106/comm /proc/106544/comm /proc/106991/comm /proc/107004/comm /proc/107005/comm /proc/107315/comm /proc/108/comm /proc/10843/comm /proc/10844/comm /proc/109/comm /proc/1091/comm /proc/109680/comm /proc/109703/comm /proc/109743/comm /proc/109772/comm /proc/11/comm /proc/110/comm /proc/110060/comm /proc/110144/comm /proc/110324/comm /proc/110556/comm /proc/110596/comm /proc/110749/comm /proc/111/comm /proc/111368/comm /proc/112/comm /proc/112099/comm /proc/112122/comm /proc/112554/comm /proc/113/comm /proc/113141/comm /proc/113144/comm /proc/114/comm /proc/114030/comm /proc/115/comm /proc/115034/comm /proc/115645/comm /proc/115646/comm /proc/115772/comm /proc/115774/comm /proc/115820/comm /proc/116/comm /proc/116168/comm /proc/116196/comm /proc/116197/comm /proc/117/comm /proc/117647/comm /proc/117648/comm /proc/12/comm /proc/12235/comm /proc/12266/comm /proc/12304/comm /proc/12346/comm /proc/12358/comm /proc/124647/comm /proc/124648/comm /proc/124650/comm /proc/124651/comm /proc/124671/comm /proc/125004/comm /proc/125035/comm /proc/125102/comm /proc/125357/comm /proc/125812/comm /proc/125848/comm /proc/125862/comm /proc/125895/comm /proc/125896/comm /proc/125897/comm /proc/125898/comm /proc/12598/comm /proc/12630/comm /proc/126435/comm /proc/126457/comm /proc/12685/comm /proc/127025/comm /proc/127049/comm /proc/12711/comm /proc/127133/comm /proc/12731/comm /proc/127592/comm /proc/127647/comm /proc/127807/comm /proc/127832/comm /proc/127925/comm /proc/127941/comm /proc/127948/comm /proc/128002/comm /proc/128078/comm /proc/128079/comm /proc/129496/comm /proc/129691/comm /proc/129737/comm /proc/129764/comm /proc/129856/comm /proc/129889/comm /proc/129946/comm /proc/129947/comm /proc/13/comm /proc/130012/comm /proc/130014/comm /proc/130035/comm /proc/130073/comm /proc/130137/comm /proc/130396/comm /proc/130437/comm /proc/130555/comm /proc/130579/comm /proc/130987/comm /proc/134290/comm /proc/134323/comm /proc/134915/comm /proc/135055/comm /proc/135089/comm /proc/14/comm /proc/1422/comm /proc/149498/comm /proc/149505/comm /proc/149506/comm /proc/149557/comm /proc/149589/comm /proc/15/comm /proc/151235/comm /proc/151258/comm /proc/151259/comm /proc/151393/comm /proc/151409/comm /proc/151410/comm /proc/152152/comm /proc/152183/comm /proc/152306/comm /proc/152415/comm /proc/152416/comm /proc/152503/comm /proc/152504/comm /proc/153009/comm /proc/153059/comm /proc/153135/comm /proc/153158/comm /proc/153269/comm /proc/153286/comm /proc/153293/comm /proc/153433/comm /proc/153484/comm /proc/153485/comm /proc/1540/comm /proc/1541/comm /proc/1542/comm /proc/1543/comm /proc/1547/comm /proc/154741/comm /proc/154789/comm /proc/154796/comm /proc/154833/comm /proc/154885/comm /proc/154887/comm /proc/154936/comm /proc/154950/comm /proc/154959/comm /proc/155000/comm /proc/155247/comm /proc/155291/comm /proc/155373/comm /proc/155398/comm /proc/155771/comm /proc/155873/comm /proc/155887/comm /proc/155958/comm /proc/155967/comm /proc/155968/comm /proc/156337/comm /proc/158605/comm /proc/158791/comm /proc/158792/comm /proc/159653/comm /proc/16/comm /proc/160661/comm /proc/160668/comm /proc/1614/comm /proc/1618/comm /proc/162217/comm /proc/162218/comm /proc/162219/comm /proc/162394/comm /proc/162395/comm /proc/162440/comm /proc/162441/comm /proc/162465/comm /proc/162513/comm /proc/162514/comm /proc/162692/comm /proc/162697/comm /proc/162698/comm /proc/1627/comm /proc/163161/comm /proc/163380/comm /proc/163446/comm /proc/163711/comm /proc/164568/comm /proc/164592/comm /proc/164604/comm /proc/164647/comm /proc/164807/comm /proc/164808/comm /proc/164990/comm /proc/165058/comm /proc/165076/comm /proc/165079/comm /proc/165080/comm /proc/165081/comm /proc/165104/comm /proc/165107/comm /proc/165173/comm /proc/165668/comm /proc/165691/comm /proc/165706/comm /proc/165842/comm /proc/165865/comm /proc/165894/comm /proc/166/comm /proc/166022/comm /proc/166039/comm /proc/166049/comm /proc/166134/comm /proc/166193/comm /proc/166225/comm /proc/166240/comm /proc/166241/comm /proc/166304/comm /proc/166364/comm /proc/166424/comm /proc/166425/comm /proc/166451/comm /proc/166552/comm /proc/166601/comm /proc/166604/comm /proc/166605/comm /proc/166606/comm /proc/167/comm /proc/168/comm /proc/169/comm /proc/170/comm /proc/171/comm /proc/172/comm /proc/173/comm /proc/174/comm /proc/176/comm /proc/178/comm /proc/18/comm /proc/180/comm /proc/181/comm /proc/183/comm /proc/184/comm /proc/18496/comm /proc/185/comm /proc/18515/comm /proc/18535/comm /proc/18561/comm /proc/18580/comm /proc/186/comm /proc/187/comm /proc/188/comm /proc/189/comm /proc/19/comm /proc/190/comm /proc/191/comm /proc/195/comm /proc/2/comm /proc/20/comm /proc/202/comm /proc/203/comm /proc/204/comm /proc/206/comm /proc/207/comm /proc/21/comm /proc/21497/comm /proc/215/comm /proc/21562/comm /proc/21563/comm /proc/21576/comm /proc/219/comm /proc/22/comm /proc/220/comm /proc/225/comm /proc/24/comm /proc/247/comm /proc/24839/comm /proc/25/comm /proc/25114/comm /proc/25129/comm /proc/25155/comm /proc/25167/comm /proc/25804/comm /proc/26/comm /proc/268/comm /proc/27/comm /proc/28/comm /proc/283/comm /proc/285/comm /proc/286/comm /proc/288/comm /proc/29619/comm /proc/29882/comm /proc/29899/comm /proc/29926/comm /proc/29938/comm /proc/3/comm /proc/30/comm /proc/308/comm /proc/309/comm /proc/31/comm /proc/313/comm /proc/314/comm /proc/315/comm /proc/316/comm /proc/317/comm /proc/318/comm /proc/319/comm /proc/32/comm /proc/320/comm /proc/33/comm /proc/34/comm /proc/34073/comm /proc/34325/comm /proc/34590/comm /proc/34607/comm /proc/34631/comm /proc/34643/comm /proc/35569/comm /proc/36/comm /proc/360/comm /proc/37/comm /proc/38/comm /proc/39/comm /proc/39186/comm /proc/39194/comm /proc/392/comm /proc/39304/comm /proc/39325/comm /proc/39348/comm /proc/39378/comm /proc/39414/comm /proc/396/comm /proc/4/comm /proc/40/comm /proc/41873/comm /proc/41902/comm /proc/41924/comm /proc/41930/comm /proc/41932/comm /proc/41964/comm /proc/42/comm /proc/42026/comm /proc/42027/comm /proc/42029/comm /proc/42050/comm /proc/42109/comm /proc/42141/comm /proc/42155/comm /proc/42174/comm /proc/42277/comm /proc/42339/comm /proc/42436/comm /proc/42459/comm /proc/42485/comm /proc/43/comm /proc/43237/comm /proc/43258/comm /proc/43280/comm /proc/43300/comm /proc/43535/comm /proc/43745/comm /proc/44/comm /proc/44169/comm /proc/44565/comm /proc/44593/comm /proc/44627/comm /proc/448/comm /proc/45/comm /proc/45007/comm /proc/45035/comm /proc/45046/comm /proc/45069/comm /proc/45101/comm /proc/45121/comm /proc/45474/comm /proc/45498/comm /proc/455/comm /proc/45695/comm /proc/46/comm /proc/46027/comm /proc/46053/comm /proc/46080/comm /proc/46104/comm /proc/46119/comm /proc/46144/comm /proc/46254/comm /proc/46301/comm /proc/46347/comm /proc/46434/comm /proc/47909/comm /proc/47937/comm /proc/47968/comm /proc/48/comm /proc/48047/comm /proc/48070/comm /proc/48205/comm /proc/48535/comm /proc/48547/comm /proc/48582/comm /proc/48713/comm /proc/48919/comm /proc/48942/comm /proc/49/comm /proc/49033/comm /proc/49055/comm /proc/49106/comm /proc/49229/comm /proc/49400/comm /proc/49425/comm /proc/49528/comm /proc/49751/comm /proc/49782/comm /proc/49982/comm /proc/5/comm /proc/50/comm /proc/50027/comm /proc/50123/comm /proc/50147/comm /proc/50253/comm /proc/50358/comm /proc/50464/comm /proc/51/comm /proc/51233/comm /proc/51746/comm /proc/51770/comm /proc/51838/comm /proc/52/comm /proc/520/comm /proc/53870/comm /proc/53894/comm /proc/54/comm /proc/54454/comm /proc/54486/comm /proc/54501/comm /proc/54525/comm /proc/54641/comm /proc/54665/comm /proc/54752/comm /proc/54809/comm /proc/54895/comm /proc/55/comm /proc/56/comm /proc/57/comm /proc/57426/comm /proc/57707/comm /proc/57759/comm /proc/57866/comm /proc/57899/comm /proc/57932/comm /proc/57955/comm /proc/57975/comm /proc/57999/comm /proc/58/comm /proc/58264/comm /proc/58379/comm /proc/58678/comm /proc/58776/comm /proc/58816/comm /proc/58985/comm /proc/59040/comm /proc/59047/comm /proc/59048/comm /proc/59081/comm /proc/59082/comm /proc/59147/comm /proc/59249/comm /proc/59273/comm /proc/59326/comm /proc/59350/comm /proc/59531/comm /proc/59557/comm /proc/59951/comm /proc/59952/comm /proc/6/comm /proc/60/comm /proc/60068/comm /proc/60094/comm /proc/60142/comm /proc/60429/comm /proc/60455/comm /proc/60690/comm /proc/60714/comm /proc/60742/comm /proc/60830/comm /proc/60849/comm /proc/60850/comm /proc/60851/comm /proc/60852/comm /proc/60853/comm /proc/61/comm /proc/61244/comm /proc/61267/comm /proc/613/comm /proc/61310/comm /proc/61346/comm /proc/61538/comm /proc/61657/comm /proc/61697/comm /proc/617/comm /proc/619/comm /proc/61999/comm /proc/62/comm /proc/62070/comm /proc/62180/comm /proc/62220/comm /proc/62266/comm /proc/62357/comm /proc/62415/comm /proc/62487/comm /proc/62647/comm /proc/62683/comm /proc/628/comm /proc/629/comm /proc/62949/comm /proc/63/comm /proc/63062/comm /proc/63123/comm /proc/63147/comm /proc/63354/comm /proc/63371/comm /proc/63378/comm /proc/63435/comm /proc/63509/comm /proc/63510/comm /proc/64/comm /proc/640/comm /proc/64612/comm /proc/64636/comm /proc/647/comm /proc/66/comm /proc/67/comm /proc/67463/comm /proc/67478/comm /proc/67479/comm /proc/67480/comm /proc/67481/comm /proc/67483/comm /proc/67484/comm /proc/67485/comm /proc/67486/comm /proc/67487/comm /proc/67491/comm /proc/67492/comm /proc/67493/comm /proc/67495/comm /proc/67496/comm /proc/68/comm /proc/68037/comm /proc/69/comm /proc/70/comm /proc/702/comm /proc/705/comm /proc/706/comm /proc/71815/comm /proc/71883/comm /proc/719/comm /proc/71908/comm /proc/72/comm /proc/72019/comm /proc/72036/comm /proc/72043/comm /proc/72149/comm /proc/72228/comm /proc/72229/comm /proc/73/comm /proc/73105/comm /proc/73129/comm /proc/74/comm /proc/74554/comm /proc/74555/comm /proc/74728/comm /proc/75/comm /proc/76/comm /proc/77265/comm /proc/77277/comm /proc/77900/comm /proc/77921/comm /proc/78/comm /proc/78746/comm /proc/79/comm /proc/8/comm /proc/80/comm /proc/81/comm /proc/81000/comm /proc/82/comm /proc/82774/comm /proc/82798/comm /proc/82950/comm /proc/82968/comm /proc/82975/comm /proc/83052/comm /proc/83147/comm /proc/83148/comm /proc/84/comm /proc/85/comm /proc/86/comm /proc/864/comm /proc/87/comm /proc/88/comm /proc/90/comm /proc/91/comm /proc/91254/comm /proc/91437/comm /proc/91461/comm /proc/91482/comm /proc/91507/comm /proc/91679/comm /proc/91776/comm /proc/91924/comm /proc/92/comm /proc/9226/comm /proc/9243/comm /proc/92510/comm /proc/9259/comm /proc/93/comm /proc/9343/comm /proc/93776/comm /proc/94/comm /proc/94294/comm /proc/94317/comm /proc/94588/comm /proc/94600/comm /proc/94601/comm /proc/95529/comm /proc/95557/comm /proc/95583/comm /proc/95606/comm /proc/95980/comm /proc/96/comm /proc/96129/comm /proc/96131/comm /proc/97/comm /proc/97092/comm /proc/97350/comm /proc/97375/comm /proc/97461/comm /proc/97478/comm /proc/97485/comm /proc/97542/comm /proc/97593/comm /proc/97594/comm /proc/98/comm /proc/98860/comm /proc/98885/comm /proc/98913/comm /proc/98939/comm /proc/99/comm /proc/9960/comm /proc/self/comm /proc/thread-self/comm
+ '[' -n '' ']'
+ rm -f /var/run/libvirtd.pid
+ [[ -c /dev/kvm ]]
+ chmod 660 /dev/kvm
+ chown root:kvm /dev/kvm
+ CGROUPS=
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/blkio ']'
+ grep -w blkio /sys/fs/cgroup/cgroup.controllers
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/cpu ']'
+ grep -w cpu /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=cpu,
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/devices ']'
+ grep -w devices /sys/fs/cgroup/cgroup.controllers
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/freezer ']'
+ grep -w freezer /sys/fs/cgroup/cgroup.controllers
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/hugetlb ']'
+ grep -w hugetlb /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=hugetlb,
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/memory ']'
+ grep -w memory /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=memory,
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/net_cls ']'
+ grep -w net_cls /sys/fs/cgroup/cgroup.controllers
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/perf_event ']'
+ grep -w perf_event /sys/fs/cgroup/cgroup.controllers
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/rdma ']'
+ grep -w rdma /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=rdma,
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/misc ']'
+ grep -w misc /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=misc,
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/pids ']'
+ grep -w pids /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=pids,
+ cgcreate -g cpu,hugetlb,memory,rdma,misc,pids:/osh-libvirt
++ cat /proc/meminfo
++ grep HugePages_Total
++ tr -cd '[:digit:]'
+ hp_count=0
+ '[' 00 -gt 0 ']'
+ '[' -n 457eb676-33da-42ec-9a8c-9293d545c337 ']'
+ cgexec -g cpu,hugetlb,memory,rdma,misc,pids:/osh-libvirt systemd-run --scope --slice=system libvirtd --listen
++ mktemp --suffix .xml
+ tmpsecret=/tmp/tmp.pUJawPs84L.xml
+ '[' -n '' ']'
+ trap cleanup EXIT
+ TIMEOUT=60
+ [[ ! -f /var/run/libvirtd.pid ]]
+ [[ 60 -gt 0 ]]
+ let TIMEOUT-=1
+ sleep 1
Running scope as unit: run-r84e039a83213409a9077369768d22aba.scope
+ [[ ! -f /var/run/libvirtd.pid ]]
+ TIMEOUT=10
+ [[ ! -e /var/run/libvirt/libvirt-sock ]]
+ '[' -z '' ']'
+ '[' -n cinder ']'
++ awk '/key/{print $3}' /etc/ceph/ceph.client.cinder.keyring
+ CEPH_CINDER_KEYRING=AQBl1KRqPOsqExAAtVViZbmH2CP7H95hTQVNHA==
+ '[' -n cinder ']'
+ create_virsh_libvirt_secret cinder 457eb676-33da-42ec-9a8c-9293d545c337 AQBl1KRqPOsqExAAtVViZbmH2CP7H95hTQVNHA==
+ sec_user=cinder
+ sec_uuid=457eb676-33da-42ec-9a8c-9293d545c337
+ sec_ceph_keyring=AQBl1KRqPOsqExAAtVViZbmH2CP7H95hTQVNHA==
+ cat
+ virsh secret-define --file /tmp/tmp.pUJawPs84L.xml
Secret 457eb676-33da-42ec-9a8c-9293d545c337 created

+ virsh secret-set-value --secret 457eb676-33da-42ec-9a8c-9293d545c337 --base64 AQBl1KRqPOsqExAAtVViZbmH2CP7H95hTQVNHA==
error: Passing secret value as command-line argument is insecure!
Secret value set

+ '[' -n '' ']'
+ cleanup
+ rm -f /tmp/tmp.pUJawPs84L.xml
+ '[' -n '' ']'
++ cat /var/run/libvirtd.pid
+ LIBVIRTD_PID=166626
+ kill 166626
+ tail --pid=166626 -f /dev/null
+ cgexec -g cpu,hugetlb,memory,rdma,misc,pids:/osh-libvirt systemd-run --scope --slice=system libvirtd --listen
Running scope as unit: run-r09a342afe4064c2092ca8783c563b170.scope