+ wait_for_file /etc/pki/CA/cacert.pem
+ local file=/etc/pki/CA/cacert.pem
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ sleep 1
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ sleep 1
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ sleep 1
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ sleep 1
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ sleep 1
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ wait_for_file /etc/pki/qemu/ca-cert.pem
+ local file=/etc/pki/qemu/ca-cert.pem
+ '[' '!' -f /etc/pki/qemu/ca-cert.pem ']'
+ wait_for_file /etc/pki/libvirt/servercert.pem
+ local file=/etc/pki/libvirt/servercert.pem
+ '[' '!' -f /etc/pki/libvirt/servercert.pem ']'
+ wait_for_file /etc/pki/libvirt/clientcert.pem
+ local file=/etc/pki/libvirt/clientcert.pem
+ '[' '!' -f /etc/pki/libvirt/clientcert.pem ']'
+ wait_for_file /etc/pki/qemu/server-cert.pem
+ local file=/etc/pki/qemu/server-cert.pem
+ '[' '!' -f /etc/pki/qemu/server-cert.pem ']'
+ wait_for_file /etc/pki/qemu/client-cert.pem
+ local file=/etc/pki/qemu/client-cert.pem
+ '[' '!' -f /etc/pki/qemu/client-cert.pem ']'
+ wait_for_file /etc/pki/libvirt/private/serverkey.pem
+ local file=/etc/pki/libvirt/private/serverkey.pem
+ '[' '!' -f /etc/pki/libvirt/private/serverkey.pem ']'
+ wait_for_file /etc/pki/libvirt/private/clientkey.pem
+ local file=/etc/pki/libvirt/private/clientkey.pem
+ '[' '!' -f /etc/pki/libvirt/private/clientkey.pem ']'
+ wait_for_file /etc/pki/qemu/server-key.pem
+ local file=/etc/pki/qemu/server-key.pem
+ '[' '!' -f /etc/pki/qemu/server-key.pem ']'
+ wait_for_file /etc/pki/qemu/client-key.pem
+ local file=/etc/pki/qemu/client-key.pem
+ '[' '!' -f /etc/pki/qemu/client-key.pem ']'
+ wait_for_file /etc/pki/libvirt-vnc/ca-cert.pem
+ local file=/etc/pki/libvirt-vnc/ca-cert.pem
+ '[' '!' -f /etc/pki/libvirt-vnc/ca-cert.pem ']'
+ wait_for_file /etc/pki/libvirt-vnc/server-cert.pem
+ local file=/etc/pki/libvirt-vnc/server-cert.pem
+ '[' '!' -f /etc/pki/libvirt-vnc/server-cert.pem ']'
+ wait_for_file /etc/pki/libvirt-vnc/server-key.pem
+ local file=/etc/pki/libvirt-vnc/server-key.pem
+ '[' '!' -f /etc/pki/libvirt-vnc/server-key.pem ']'
++ grep -w libvirtd
++ cat /proc/1/comm /proc/10/comm /proc/100/comm /proc/101056/comm /proc/101101/comm /proc/102/comm /proc/102890/comm /proc/103/comm /proc/10329/comm /proc/104/comm /proc/104718/comm /proc/104741/comm /proc/105/comm /proc/105184/comm /proc/105203/comm /proc/105204/comm /proc/106/comm /proc/106253/comm /proc/106279/comm /proc/106303/comm /proc/106326/comm /proc/106636/comm /proc/106638/comm /proc/106717/comm /proc/106890/comm /proc/106906/comm /proc/106908/comm /proc/107989/comm /proc/108/comm /proc/108320/comm /proc/10834/comm /proc/108345/comm /proc/10835/comm /proc/108433/comm /proc/108453/comm /proc/108459/comm /proc/108506/comm /proc/108508/comm /proc/108509/comm /proc/108514/comm /proc/108515/comm /proc/108525/comm /proc/108779/comm /proc/109/comm /proc/1094/comm /proc/11/comm /proc/110/comm /proc/110135/comm /proc/110160/comm /proc/110174/comm /proc/110200/comm /proc/110625/comm /proc/111/comm /proc/112/comm /proc/113/comm /proc/113983/comm /proc/114/comm /proc/115/comm /proc/116/comm /proc/116349/comm /proc/117/comm /proc/117397/comm /proc/118478/comm /proc/119159/comm /proc/119820/comm /proc/119859/comm /proc/119860/comm /proc/12/comm /proc/121157/comm /proc/12226/comm /proc/12259/comm /proc/12314/comm /proc/123374/comm /proc/12339/comm /proc/123398/comm /proc/123419/comm /proc/123442/comm /proc/12359/comm /proc/123973/comm /proc/124394/comm /proc/124606/comm /proc/125266/comm /proc/125272/comm /proc/125888/comm /proc/125911/comm /proc/12592/comm /proc/12623/comm /proc/126349/comm /proc/126370/comm /proc/126381/comm /proc/12679/comm /proc/12704/comm /proc/12723/comm /proc/127288/comm /proc/127289/comm /proc/127394/comm /proc/129567/comm /proc/129611/comm /proc/13/comm /proc/130669/comm /proc/131160/comm /proc/131185/comm /proc/131186/comm /proc/132537/comm /proc/132538/comm /proc/139430/comm /proc/139431/comm /proc/139433/comm /proc/139434/comm /proc/139436/comm /proc/139687/comm /proc/14/comm /proc/140277/comm /proc/140322/comm /proc/140658/comm /proc/140693/comm /proc/140706/comm /proc/140738/comm /proc/140739/comm /proc/140740/comm /proc/140741/comm /proc/141756/comm /proc/141780/comm /proc/142145/comm /proc/142171/comm /proc/142292/comm /proc/142396/comm /proc/1425/comm /proc/142737/comm /proc/142793/comm /proc/142940/comm /proc/142964/comm /proc/143082/comm /proc/143099/comm /proc/143105/comm /proc/143152/comm /proc/143154/comm /proc/143155/comm /proc/143156/comm /proc/143157/comm /proc/143167/comm /proc/143471/comm /proc/14400/comm /proc/144654/comm /proc/144832/comm /proc/144888/comm /proc/144957/comm /proc/145064/comm /proc/145087/comm /proc/145116/comm /proc/145142/comm /proc/145172/comm /proc/145204/comm /proc/145251/comm /proc/145282/comm /proc/145340/comm /proc/145373/comm /proc/145490/comm /proc/145944/comm /proc/145967/comm /proc/146472/comm /proc/146484/comm /proc/15/comm /proc/1543/comm /proc/1544/comm /proc/1545/comm /proc/1546/comm /proc/1550/comm /proc/16/comm /proc/1617/comm /proc/1621/comm /proc/1630/comm /proc/163744/comm /proc/163791/comm /proc/164279/comm /proc/164519/comm /proc/165730/comm /proc/165735/comm /proc/166569/comm /proc/166625/comm /proc/167/comm /proc/168/comm /proc/168338/comm /proc/168386/comm /proc/168832/comm /proc/168845/comm /proc/168846/comm /proc/168951/comm /proc/169/comm /proc/169199/comm /proc/169212/comm /proc/169213/comm /proc/169585/comm /proc/169595/comm /proc/169831/comm /proc/169832/comm /proc/169836/comm /proc/169837/comm /proc/170/comm /proc/170006/comm /proc/170471/comm /proc/170562/comm /proc/170586/comm /proc/170711/comm /proc/170719/comm /proc/170730/comm /proc/170736/comm /proc/170959/comm /proc/170961/comm /proc/170962/comm /proc/170979/comm /proc/170980/comm /proc/170992/comm /proc/171/comm /proc/171181/comm /proc/172/comm /proc/172388/comm /proc/172424/comm /proc/172435/comm /proc/172482/comm /proc/172498/comm /proc/172517/comm /proc/172569/comm /proc/172575/comm /proc/172581/comm /proc/172620/comm /proc/172962/comm /proc/172987/comm /proc/173/comm /proc/173007/comm /proc/173030/comm /proc/173439/comm /proc/173659/comm /proc/173685/comm /proc/173748/comm /proc/173756/comm /proc/173768/comm /proc/174/comm /proc/174224/comm /proc/175/comm /proc/176385/comm /proc/176397/comm /proc/176974/comm /proc/176979/comm /proc/176984/comm /proc/177/comm /proc/179/comm /proc/179208/comm /proc/179209/comm /proc/179350/comm /proc/179361/comm /proc/18/comm /proc/180835/comm /proc/181002/comm /proc/181003/comm /proc/181004/comm /proc/181220/comm /proc/181278/comm /proc/181282/comm /proc/181314/comm /proc/181315/comm /proc/181328/comm /proc/181341/comm /proc/181342/comm /proc/181641/comm /proc/181642/comm /proc/181643/comm /proc/182/comm /proc/182243/comm /proc/182410/comm /proc/182833/comm /proc/183/comm /proc/183047/comm /proc/183672/comm /proc/183921/comm /proc/183941/comm /proc/184419/comm /proc/184435/comm /proc/184446/comm /proc/184449/comm /proc/184452/comm /proc/184456/comm /proc/184457/comm /proc/184523/comm /proc/184524/comm /proc/184530/comm /proc/184808/comm /proc/185/comm /proc/185057/comm /proc/185111/comm /proc/185134/comm /proc/185435/comm /proc/185486/comm /proc/185519/comm /proc/185536/comm /proc/185556/comm /proc/185562/comm /proc/185632/comm /proc/185634/comm /proc/185635/comm /proc/185710/comm /proc/185711/comm /proc/185721/comm /proc/185780/comm /proc/185872/comm /proc/185876/comm /proc/185887/comm /proc/185888/comm /proc/185889/comm /proc/186/comm /proc/18680/comm /proc/187/comm /proc/18701/comm /proc/18723/comm /proc/18749/comm /proc/18766/comm /proc/188/comm /proc/189/comm /proc/19/comm /proc/190/comm /proc/191/comm /proc/193/comm /proc/194/comm /proc/195/comm /proc/196/comm /proc/197/comm /proc/2/comm /proc/20/comm /proc/202/comm /proc/21/comm /proc/211/comm /proc/21696/comm /proc/21766/comm /proc/21769/comm /proc/21784/comm /proc/22/comm /proc/220/comm /proc/221/comm /proc/226/comm /proc/24/comm /proc/248/comm /proc/25/comm /proc/25029/comm /proc/25310/comm /proc/25328/comm /proc/25352/comm /proc/25364/comm /proc/26/comm /proc/266/comm /proc/27/comm /proc/28/comm /proc/290/comm /proc/291/comm /proc/29810/comm /proc/3/comm /proc/30/comm /proc/30081/comm /proc/30097/comm /proc/30122/comm /proc/30134/comm /proc/30901/comm /proc/31/comm /proc/311/comm /proc/312/comm /proc/313/comm /proc/317/comm /proc/318/comm /proc/319/comm /proc/32/comm /proc/320/comm /proc/321/comm /proc/322/comm /proc/323/comm /proc/324/comm /proc/325/comm /proc/33/comm /proc/34/comm /proc/34615/comm /proc/34892/comm /proc/34909/comm /proc/34934/comm /proc/34946/comm /proc/36/comm /proc/365/comm /proc/37/comm /proc/38/comm /proc/39/comm /proc/39504/comm /proc/39506/comm /proc/39625/comm /proc/39666/comm /proc/39689/comm /proc/39716/comm /proc/39731/comm /proc/398/comm /proc/4/comm /proc/40/comm /proc/402/comm /proc/42/comm /proc/42164/comm /proc/42214/comm /proc/42224/comm /proc/42227/comm /proc/42234/comm /proc/42236/comm /proc/42314/comm /proc/42319/comm /proc/42331/comm /proc/42341/comm /proc/42414/comm /proc/42433/comm /proc/42452/comm /proc/42472/comm /proc/42581/comm /proc/42658/comm /proc/42808/comm /proc/42832/comm /proc/42856/comm /proc/43/comm /proc/43545/comm /proc/43565/comm /proc/43595/comm /proc/43612/comm /proc/43844/comm /proc/44/comm /proc/44051/comm /proc/44429/comm /proc/44928/comm /proc/44952/comm /proc/44991/comm /proc/45/comm /proc/45336/comm /proc/45359/comm /proc/45375/comm /proc/45398/comm /proc/45429/comm /proc/45467/comm /proc/456/comm /proc/45810/comm /proc/45833/comm /proc/45951/comm /proc/46/comm /proc/46015/comm /proc/46275/comm /proc/46298/comm /proc/46313/comm /proc/46336/comm /proc/46352/comm /proc/46381/comm /proc/46497/comm /proc/46544/comm /proc/46589/comm /proc/48/comm /proc/48415/comm /proc/48448/comm /proc/48527/comm /proc/48552/comm /proc/48775/comm /proc/48788/comm /proc/48819/comm /proc/48940/comm /proc/49/comm /proc/49288/comm /proc/49314/comm /proc/49392/comm /proc/49415/comm /proc/49460/comm /proc/49747/comm /proc/49963/comm /proc/49986/comm /proc/5/comm /proc/50/comm /proc/50110/comm /proc/50255/comm /proc/50280/comm /proc/50663/comm /proc/50687/comm /proc/50715/comm /proc/50793/comm /proc/50876/comm /proc/50973/comm /proc/50998/comm /proc/51/comm /proc/51084/comm /proc/51931/comm /proc/52/comm /proc/521/comm /proc/52780/comm /proc/52804/comm /proc/52887/comm /proc/52912/comm /proc/53004/comm /proc/53095/comm /proc/53289/comm /proc/53378/comm /proc/54/comm /proc/55/comm /proc/56/comm /proc/57/comm /proc/57105/comm /proc/57129/comm /proc/57732/comm /proc/57758/comm /proc/57790/comm /proc/57815/comm /proc/57832/comm /proc/57857/comm /proc/58/comm /proc/58010/comm /proc/58035/comm /proc/58085/comm /proc/58125/comm /proc/58160/comm /proc/58203/comm /proc/6/comm /proc/60/comm /proc/61/comm /proc/614/comm /proc/617/comm /proc/61787/comm /proc/61828/comm /proc/61923/comm /proc/61947/comm /proc/61976/comm /proc/62/comm /proc/620/comm /proc/62000/comm /proc/62015/comm /proc/62038/comm /proc/623/comm /proc/62381/comm /proc/62508/comm /proc/62548/comm /proc/62575/comm /proc/626/comm /proc/62600/comm /proc/62688/comm /proc/62852/comm /proc/62853/comm /proc/62914/comm /proc/62915/comm /proc/62941/comm /proc/62942/comm /proc/62944/comm /proc/63/comm /proc/63138/comm /proc/63402/comm /proc/63622/comm /proc/63659/comm /proc/63695/comm /proc/63720/comm /proc/63807/comm /proc/63835/comm /proc/63996/comm /proc/64/comm /proc/64020/comm /proc/64113/comm /proc/64136/comm /proc/643/comm /proc/64336/comm /proc/64366/comm /proc/64380/comm /proc/644/comm /proc/64644/comm /proc/64667/comm /proc/64763/comm /proc/64779/comm /proc/64780/comm /proc/64781/comm /proc/64782/comm /proc/64783/comm /proc/64946/comm /proc/64970/comm /proc/65118/comm /proc/65183/comm /proc/65461/comm /proc/65486/comm /proc/65836/comm /proc/65872/comm /proc/66/comm /proc/66193/comm /proc/66219/comm /proc/66262/comm /proc/66368/comm /proc/66434/comm /proc/66477/comm /proc/66508/comm /proc/66537/comm /proc/66648/comm /proc/66760/comm /proc/66803/comm /proc/67/comm /proc/67204/comm /proc/67251/comm /proc/67269/comm /proc/67323/comm /proc/67370/comm /proc/67390/comm /proc/67639/comm /proc/67662/comm /proc/67935/comm /proc/67951/comm /proc/67959/comm /proc/68/comm /proc/68007/comm /proc/68009/comm /proc/68010/comm /proc/68011/comm /proc/68012/comm /proc/68022/comm /proc/68145/comm /proc/69/comm /proc/69680/comm /proc/69706/comm /proc/70/comm /proc/703/comm /proc/706/comm /proc/707/comm /proc/72/comm /proc/721/comm /proc/72993/comm /proc/73/comm /proc/73033/comm /proc/73034/comm /proc/73035/comm /proc/73036/comm /proc/73038/comm /proc/73041/comm /proc/73043/comm /proc/73046/comm /proc/73047/comm /proc/73048/comm /proc/73049/comm /proc/73050/comm /proc/73051/comm /proc/73052/comm /proc/74/comm /proc/75/comm /proc/76/comm /proc/76281/comm /proc/78/comm /proc/78614/comm /proc/78704/comm /proc/78727/comm /proc/78923/comm /proc/78940/comm /proc/78946/comm /proc/78996/comm /proc/78998/comm /proc/78999/comm /proc/79/comm /proc/79014/comm /proc/79015/comm /proc/79025/comm /proc/79222/comm /proc/8/comm /proc/80/comm /proc/80217/comm /proc/80246/comm /proc/81/comm /proc/82/comm /proc/82938/comm /proc/84/comm /proc/84267/comm /proc/85/comm /proc/85321/comm /proc/85346/comm /proc/85361/comm /proc/86/comm /proc/86094/comm /proc/86119/comm /proc/866/comm /proc/86841/comm /proc/87/comm /proc/88/comm /proc/88860/comm /proc/88861/comm /proc/90/comm /proc/91/comm /proc/91963/comm /proc/91985/comm /proc/92/comm /proc/92124/comm /proc/92140/comm /proc/92146/comm /proc/92253/comm /proc/92255/comm /proc/92256/comm /proc/9227/comm /proc/92301/comm /proc/92302/comm /proc/92312/comm /proc/9244/comm /proc/92532/comm /proc/9260/comm /proc/93/comm /proc/9343/comm /proc/94/comm /proc/95322/comm /proc/95712/comm /proc/96/comm /proc/96436/comm /proc/96467/comm /proc/96610/comm /proc/96633/comm /proc/96877/comm /proc/96898/comm /proc/97/comm /proc/97024/comm /proc/98/comm /proc/99/comm /proc/9959/comm /proc/self/comm /proc/thread-self/comm
+ '[' -n '' ']'
+ rm -f /var/run/libvirtd.pid
+ [[ -c /dev/kvm ]]
+ chmod 660 /dev/kvm
+ chown root:kvm /dev/kvm
+ CGROUPS=
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/blkio ']'
+ grep -w blkio /sys/fs/cgroup/cgroup.controllers
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/cpu ']'
+ grep -w cpu /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=cpu,
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/devices ']'
+ grep -w devices /sys/fs/cgroup/cgroup.controllers
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/freezer ']'
+ grep -w freezer /sys/fs/cgroup/cgroup.controllers
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/hugetlb ']'
+ grep -w hugetlb /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=hugetlb,
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/memory ']'
+ grep -w memory /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=memory,
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/net_cls ']'
+ grep -w net_cls /sys/fs/cgroup/cgroup.controllers
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/perf_event ']'
+ grep -w perf_event /sys/fs/cgroup/cgroup.controllers
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/rdma ']'
+ grep -w rdma /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=rdma,
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/misc ']'
+ grep -w misc /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=misc,
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/pids ']'
+ grep -w pids /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=pids,
+ cgcreate -g cpu,hugetlb,memory,rdma,misc,pids:/osh-libvirt
++ cat /proc/meminfo
++ grep HugePages_Total
++ tr -cd '[:digit:]'
+ hp_count=0
+ '[' 00 -gt 0 ']'
+ '[' -n 457eb676-33da-42ec-9a8c-9293d545c337 ']'
+ cgexec -g cpu,hugetlb,memory,rdma,misc,pids:/osh-libvirt systemd-run --scope --slice=system libvirtd --listen
++ mktemp --suffix .xml
+ tmpsecret=/tmp/tmp.pwEk2tKQvD.xml
+ '[' -n '' ']'
+ trap cleanup EXIT
+ TIMEOUT=60
+ [[ ! -f /var/run/libvirtd.pid ]]
+ [[ 60 -gt 0 ]]
+ let TIMEOUT-=1
+ sleep 1
Running as unit: run-r02524846bebb42ea927b1036094b9eda.scope; invocation ID: 8b0498802e3c429ea9874bdb641c48da
+ [[ ! -f /var/run/libvirtd.pid ]]
+ TIMEOUT=10
+ [[ ! -e /var/run/libvirt/libvirt-sock ]]
+ '[' -z '' ']'
+ '[' -n cinder ']'
++ awk '/key/{print $3}' /etc/ceph/ceph.client.cinder.keyring
+ CEPH_CINDER_KEYRING=AQDdv2dqnE7aChAAzHZoOuK8FSqX4iwkrSDFSg==
+ '[' -n cinder ']'
+ create_virsh_libvirt_secret cinder 457eb676-33da-42ec-9a8c-9293d545c337 AQDdv2dqnE7aChAAzHZoOuK8FSqX4iwkrSDFSg==
+ sec_user=cinder
+ sec_uuid=457eb676-33da-42ec-9a8c-9293d545c337
+ sec_ceph_keyring=AQDdv2dqnE7aChAAzHZoOuK8FSqX4iwkrSDFSg==
+ cat
+ virsh secret-define --file /tmp/tmp.pwEk2tKQvD.xml
Secret 457eb676-33da-42ec-9a8c-9293d545c337 created

+ virsh secret-set-value --secret 457eb676-33da-42ec-9a8c-9293d545c337 --base64 AQDdv2dqnE7aChAAzHZoOuK8FSqX4iwkrSDFSg==
error: Passing secret value as command-line argument is insecure!
Secret value set

+ '[' -n '' ']'
+ cleanup
+ rm -f /tmp/tmp.pwEk2tKQvD.xml
+ '[' -n '' ']'
++ cat /var/run/libvirtd.pid
+ LIBVIRTD_PID=185909
+ kill 185909
+ tail --pid=185909 -f /dev/null
+ cgexec -g cpu,hugetlb,memory,rdma,misc,pids:/osh-libvirt systemd-run --scope --slice=system libvirtd --listen
Running as unit: run-rd0736941db6f4ceb94dd5eaa33635db7.scope; invocation ID: 3f30d28d5dd04f1cacf099875917f422