+ wait_for_file /etc/pki/CA/cacert.pem
+ local file=/etc/pki/CA/cacert.pem
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ sleep 1
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ sleep 1
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ sleep 1
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ sleep 1
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ sleep 1
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ wait_for_file /etc/pki/qemu/ca-cert.pem
+ local file=/etc/pki/qemu/ca-cert.pem
+ '[' '!' -f /etc/pki/qemu/ca-cert.pem ']'
+ wait_for_file /etc/pki/libvirt/servercert.pem
+ local file=/etc/pki/libvirt/servercert.pem
+ '[' '!' -f /etc/pki/libvirt/servercert.pem ']'
+ wait_for_file /etc/pki/libvirt/clientcert.pem
+ local file=/etc/pki/libvirt/clientcert.pem
+ '[' '!' -f /etc/pki/libvirt/clientcert.pem ']'
+ wait_for_file /etc/pki/qemu/server-cert.pem
+ local file=/etc/pki/qemu/server-cert.pem
+ '[' '!' -f /etc/pki/qemu/server-cert.pem ']'
+ wait_for_file /etc/pki/qemu/client-cert.pem
+ local file=/etc/pki/qemu/client-cert.pem
+ '[' '!' -f /etc/pki/qemu/client-cert.pem ']'
+ wait_for_file /etc/pki/libvirt/private/serverkey.pem
+ local file=/etc/pki/libvirt/private/serverkey.pem
+ '[' '!' -f /etc/pki/libvirt/private/serverkey.pem ']'
+ wait_for_file /etc/pki/libvirt/private/clientkey.pem
+ local file=/etc/pki/libvirt/private/clientkey.pem
+ '[' '!' -f /etc/pki/libvirt/private/clientkey.pem ']'
+ wait_for_file /etc/pki/qemu/server-key.pem
+ local file=/etc/pki/qemu/server-key.pem
+ '[' '!' -f /etc/pki/qemu/server-key.pem ']'
+ wait_for_file /etc/pki/qemu/client-key.pem
+ local file=/etc/pki/qemu/client-key.pem
+ '[' '!' -f /etc/pki/qemu/client-key.pem ']'
+ wait_for_file /etc/pki/libvirt-vnc/ca-cert.pem
+ local file=/etc/pki/libvirt-vnc/ca-cert.pem
+ '[' '!' -f /etc/pki/libvirt-vnc/ca-cert.pem ']'
+ wait_for_file /etc/pki/libvirt-vnc/server-cert.pem
+ local file=/etc/pki/libvirt-vnc/server-cert.pem
+ '[' '!' -f /etc/pki/libvirt-vnc/server-cert.pem ']'
+ wait_for_file /etc/pki/libvirt-vnc/server-key.pem
+ local file=/etc/pki/libvirt-vnc/server-key.pem
+ '[' '!' -f /etc/pki/libvirt-vnc/server-key.pem ']'
++ grep -w libvirtd
++ cat /proc/1/comm /proc/10/comm /proc/100/comm /proc/100231/comm /proc/100752/comm /proc/101849/comm /proc/102/comm /proc/103/comm /proc/10344/comm /proc/103645/comm /proc/104/comm /proc/105/comm /proc/106/comm /proc/106098/comm /proc/106941/comm /proc/108/comm /proc/109/comm /proc/11/comm /proc/110/comm /proc/1101/comm /proc/111/comm /proc/11106/comm /proc/11107/comm /proc/112/comm /proc/112844/comm /proc/112868/comm /proc/113/comm /proc/113241/comm /proc/113254/comm /proc/113255/comm /proc/114/comm /proc/114463/comm /proc/114487/comm /proc/114509/comm /proc/114533/comm /proc/114618/comm /proc/114619/comm /proc/114621/comm /proc/114851/comm /proc/115/comm /proc/115224/comm /proc/115226/comm /proc/115886/comm /proc/116/comm /proc/116168/comm /proc/116285/comm /proc/116308/comm /proc/116507/comm /proc/116527/comm /proc/116533/comm /proc/116583/comm /proc/116584/comm /proc/116594/comm /proc/116825/comm /proc/117/comm /proc/118090/comm /proc/118113/comm /proc/118132/comm /proc/118157/comm /proc/118737/comm /proc/118797/comm /proc/12/comm /proc/120047/comm /proc/120048/comm /proc/121954/comm /proc/122015/comm /proc/124633/comm /proc/12502/comm /proc/12529/comm /proc/125819/comm /proc/12587/comm /proc/12616/comm /proc/12634/comm /proc/126667/comm /proc/128340/comm /proc/128353/comm /proc/128354/comm /proc/12866/comm /proc/12899/comm /proc/12954/comm /proc/129704/comm /proc/12979/comm /proc/13/comm /proc/13000/comm /proc/131112/comm /proc/131135/comm /proc/131149/comm /proc/131175/comm /proc/131877/comm /proc/132244/comm /proc/132463/comm /proc/133302/comm /proc/133311/comm /proc/133417/comm /proc/133882/comm /proc/138563/comm /proc/138675/comm /proc/14/comm /proc/1434/comm /proc/145571/comm /proc/145842/comm /proc/145867/comm /proc/145880/comm /proc/146734/comm /proc/149530/comm /proc/149578/comm /proc/15/comm /proc/150489/comm /proc/150712/comm /proc/151120/comm /proc/151152/comm /proc/151153/comm /proc/152683/comm /proc/152684/comm /proc/15418/comm /proc/1552/comm /proc/1553/comm /proc/1554/comm /proc/1555/comm /proc/1559/comm /proc/159683/comm /proc/159684/comm /proc/159686/comm /proc/159687/comm /proc/159928/comm /proc/16/comm /proc/160535/comm /proc/160558/comm /proc/160650/comm /proc/160890/comm /proc/160917/comm /proc/160950/comm /proc/160963/comm /proc/160994/comm /proc/160995/comm /proc/160996/comm /proc/160997/comm /proc/162000/comm /proc/162024/comm /proc/162512/comm /proc/162540/comm /proc/1626/comm /proc/162694/comm /proc/1630/comm /proc/163438/comm /proc/163461/comm /proc/163664/comm /proc/163683/comm /proc/163689/comm /proc/163738/comm /proc/163739/comm /proc/163749/comm /proc/163876/comm /proc/1639/comm /proc/165/comm /proc/165297/comm /proc/165476/comm /proc/165597/comm /proc/165671/comm /proc/165773/comm /proc/165807/comm /proc/165808/comm /proc/165840/comm /proc/165888/comm /proc/165931/comm /proc/166/comm /proc/166094/comm /proc/166135/comm /proc/166209/comm /proc/166242/comm /proc/166267/comm /proc/166511/comm /proc/166536/comm /proc/166706/comm /proc/166924/comm /proc/166931/comm /proc/166962/comm /proc/167/comm /proc/168/comm /proc/169/comm /proc/169557/comm /proc/170/comm /proc/171/comm /proc/172/comm /proc/172073/comm /proc/173/comm /proc/173794/comm /proc/174460/comm /proc/174539/comm /proc/174545/comm /proc/176/comm /proc/176197/comm /proc/176244/comm /proc/176385/comm /proc/176583/comm /proc/176721/comm /proc/176748/comm /proc/176749/comm /proc/176997/comm /proc/177009/comm /proc/177010/comm /proc/177552/comm /proc/177565/comm /proc/177618/comm /proc/177635/comm /proc/177679/comm /proc/177879/comm /proc/177880/comm /proc/177904/comm /proc/177958/comm /proc/177959/comm /proc/178/comm /proc/178156/comm /proc/178158/comm /proc/178479/comm /proc/178724/comm /proc/178749/comm /proc/179/comm /proc/179066/comm /proc/179083/comm /proc/179089/comm /proc/179141/comm /proc/179142/comm /proc/179152/comm /proc/179279/comm /proc/18/comm /proc/180626/comm /proc/180655/comm /proc/180701/comm /proc/180730/comm /proc/180753/comm /proc/180775/comm /proc/180785/comm /proc/180834/comm /proc/180846/comm /proc/180898/comm /proc/181136/comm /proc/181176/comm /proc/181256/comm /proc/181300/comm /proc/181865/comm /proc/181871/comm /proc/181878/comm /proc/181909/comm /proc/181923/comm /proc/182/comm /proc/182736/comm /proc/184/comm /proc/184586/comm /proc/184587/comm /proc/185717/comm /proc/186/comm /proc/187/comm /proc/187715/comm /proc/188/comm /proc/189/comm /proc/18946/comm /proc/189484/comm /proc/189493/comm /proc/189494/comm /proc/189628/comm /proc/189629/comm /proc/189630/comm /proc/18964/comm /proc/18986/comm /proc/189903/comm /proc/189921/comm /proc/189950/comm /proc/189951/comm /proc/189964/comm /proc/189977/comm /proc/189978/comm /proc/19/comm /proc/19011/comm /proc/19031/comm /proc/190402/comm /proc/190405/comm /proc/190408/comm /proc/191/comm /proc/191081/comm /proc/191345/comm /proc/191510/comm /proc/191974/comm /proc/192/comm /proc/192295/comm /proc/192318/comm /proc/192330/comm /proc/192373/comm /proc/192708/comm /proc/192712/comm /proc/193161/comm /proc/193183/comm /proc/193202/comm /proc/193203/comm /proc/193204/comm /proc/193205/comm /proc/193206/comm /proc/193207/comm /proc/193257/comm /proc/193378/comm /proc/193828/comm /proc/193973/comm /proc/193995/comm /proc/194066/comm /proc/194118/comm /proc/194144/comm /proc/194255/comm /proc/194273/comm /proc/194281/comm /proc/194331/comm /proc/194450/comm /proc/194451/comm /proc/194461/comm /proc/194521/comm /proc/194524/comm /proc/194540/comm /proc/194541/comm /proc/194542/comm /proc/2/comm /proc/20/comm /proc/202/comm /proc/203/comm /proc/204/comm /proc/21/comm /proc/215/comm /proc/216/comm /proc/21948/comm /proc/22/comm /proc/220/comm /proc/22013/comm /proc/22014/comm /proc/22027/comm /proc/221/comm /proc/226/comm /proc/24/comm /proc/248/comm /proc/25/comm /proc/25274/comm /proc/25547/comm /proc/25564/comm /proc/25588/comm /proc/25600/comm /proc/26/comm /proc/269/comm /proc/27/comm /proc/28/comm /proc/284/comm /proc/287/comm /proc/288/comm /proc/289/comm /proc/291/comm /proc/29781/comm /proc/3/comm /proc/30/comm /proc/30045/comm /proc/30062/comm /proc/30088/comm /proc/30100/comm /proc/31/comm /proc/310/comm /proc/311/comm /proc/315/comm /proc/316/comm /proc/317/comm /proc/318/comm /proc/319/comm /proc/32/comm /proc/320/comm /proc/322/comm /proc/33/comm /proc/34/comm /proc/34312/comm /proc/34596/comm /proc/34613/comm /proc/34638/comm /proc/34650/comm /proc/35570/comm /proc/36/comm /proc/361/comm /proc/37/comm /proc/38/comm /proc/380/comm /proc/38902/comm /proc/38904/comm /proc/39/comm /proc/39019/comm /proc/39040/comm /proc/39066/comm /proc/39114/comm /proc/39129/comm /proc/393/comm /proc/397/comm /proc/4/comm /proc/40/comm /proc/41595/comm /proc/41627/comm /proc/41630/comm /proc/41656/comm /proc/41664/comm /proc/41693/comm /proc/41736/comm /proc/41744/comm /proc/41756/comm /proc/41773/comm /proc/41837/comm /proc/41856/comm /proc/41874/comm /proc/41903/comm /proc/42/comm /proc/42001/comm /proc/42063/comm /proc/42220/comm /proc/42245/comm /proc/42271/comm /proc/42949/comm /proc/42951/comm /proc/42996/comm /proc/43/comm /proc/43003/comm /proc/43265/comm /proc/43475/comm /proc/43854/comm /proc/44/comm /proc/44307/comm /proc/44334/comm /proc/44360/comm /proc/44755/comm /proc/44783/comm /proc/44789/comm /proc/44818/comm /proc/44850/comm /proc/44868/comm /proc/45/comm /proc/45221/comm /proc/45245/comm /proc/45416/comm /proc/456/comm /proc/45737/comm /proc/45763/comm /proc/45778/comm /proc/45813/comm /proc/45815/comm /proc/45846/comm /proc/45966/comm /proc/46/comm /proc/46011/comm /proc/46057/comm /proc/47873/comm /proc/47913/comm /proc/47978/comm /proc/48/comm /proc/48003/comm /proc/48252/comm /proc/48271/comm /proc/48328/comm /proc/48373/comm /proc/48898/comm /proc/48921/comm /proc/48994/comm /proc/49/comm /proc/49017/comm /proc/49064/comm /proc/49186/comm /proc/49353/comm /proc/49376/comm /proc/49496/comm /proc/49637/comm /proc/49664/comm /proc/5/comm /proc/50/comm /proc/50035/comm /proc/50059/comm /proc/50157/comm /proc/50216/comm /proc/50313/comm /proc/50342/comm /proc/50411/comm /proc/50459/comm /proc/51/comm /proc/51372/comm /proc/52/comm /proc/52242/comm /proc/52276/comm /proc/52413/comm /proc/52439/comm /proc/525/comm /proc/52512/comm /proc/52622/comm /proc/52814/comm /proc/52895/comm /proc/54/comm /proc/55/comm /proc/56/comm /proc/57/comm /proc/57352/comm /proc/57376/comm /proc/58/comm /proc/58024/comm /proc/58062/comm /proc/58096/comm /proc/58131/comm /proc/58137/comm /proc/58165/comm /proc/58360/comm /proc/58430/comm /proc/58454/comm /proc/58486/comm /proc/58514/comm /proc/58643/comm /proc/6/comm /proc/60/comm /proc/61/comm /proc/617/comm /proc/62/comm /proc/621/comm /proc/623/comm /proc/629/comm /proc/63/comm /proc/630/comm /proc/63364/comm /proc/63399/comm /proc/63454/comm /proc/63482/comm /proc/63507/comm /proc/63532/comm /proc/63549/comm /proc/63569/comm /proc/63788/comm /proc/63789/comm /proc/64/comm /proc/64013/comm /proc/64133/comm /proc/64157/comm /proc/64313/comm /proc/64409/comm /proc/64410/comm /proc/64445/comm /proc/64446/comm /proc/64788/comm /proc/649/comm /proc/65251/comm /proc/65278/comm /proc/65308/comm /proc/65332/comm /proc/65364/comm /proc/65389/comm /proc/654/comm /proc/65488/comm /proc/65512/comm /proc/65636/comm /proc/65662/comm /proc/65987/comm /proc/66/comm /proc/66011/comm /proc/66202/comm /proc/66272/comm /proc/66296/comm /proc/66531/comm /proc/66546/comm /proc/66547/comm /proc/66548/comm /proc/66549/comm /proc/66550/comm /proc/66664/comm /proc/66694/comm /proc/66960/comm /proc/66991/comm /proc/67/comm /proc/67014/comm /proc/67047/comm /proc/67325/comm /proc/67326/comm /proc/67327/comm /proc/67779/comm /proc/67805/comm /proc/67878/comm /proc/67914/comm /proc/67928/comm /proc/67966/comm /proc/68/comm /proc/68165/comm /proc/68224/comm /proc/68273/comm /proc/68477/comm /proc/68513/comm /proc/68823/comm /proc/68862/comm /proc/68908/comm /proc/69/comm /proc/69061/comm /proc/69104/comm /proc/69140/comm /proc/69262/comm /proc/69296/comm /proc/69535/comm /proc/69570/comm /proc/70/comm /proc/70027/comm /proc/70045/comm /proc/70051/comm /proc/70111/comm /proc/70112/comm /proc/70122/comm /proc/70280/comm /proc/708/comm /proc/711/comm /proc/712/comm /proc/71416/comm /proc/71440/comm /proc/72/comm /proc/725/comm /proc/72677/comm /proc/73/comm /proc/74/comm /proc/74900/comm /proc/74938/comm /proc/74939/comm /proc/74940/comm /proc/74941/comm /proc/74942/comm /proc/74944/comm /proc/74946/comm /proc/74947/comm /proc/74948/comm /proc/74949/comm /proc/74953/comm /proc/74954/comm /proc/74955/comm /proc/74956/comm /proc/75/comm /proc/76/comm /proc/78/comm /proc/78591/comm /proc/79/comm /proc/8/comm /proc/80/comm /proc/80914/comm /proc/80939/comm /proc/81/comm /proc/81028/comm /proc/81046/comm /proc/81052/comm /proc/81193/comm /proc/81194/comm /proc/81204/comm /proc/81331/comm /proc/82/comm /proc/82514/comm /proc/82536/comm /proc/83746/comm /proc/84/comm /proc/85/comm /proc/86/comm /proc/87/comm /proc/870/comm /proc/87675/comm /proc/88/comm /proc/88084/comm /proc/88097/comm /proc/88757/comm /proc/88781/comm /proc/89732/comm /proc/90/comm /proc/91/comm /proc/92/comm /proc/92240/comm /proc/92241/comm /proc/9238/comm /proc/9255/comm /proc/9271/comm /proc/93/comm /proc/9354/comm /proc/94/comm /proc/95481/comm /proc/95693/comm /proc/95714/comm /proc/95957/comm /proc/95992/comm /proc/95998/comm /proc/96/comm /proc/96188/comm /proc/96189/comm /proc/96200/comm /proc/96339/comm /proc/97/comm /proc/98/comm /proc/98941/comm /proc/98965/comm /proc/98981/comm /proc/99/comm /proc/99010/comm /proc/99310/comm /proc/99440/comm /proc/9971/comm /proc/self/comm /proc/thread-self/comm
+ '[' -n '' ']'
+ rm -f /var/run/libvirtd.pid
+ [[ -c /dev/kvm ]]
+ chmod 660 /dev/kvm
+ chown root:kvm /dev/kvm
+ CGROUPS=
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/blkio ']'
+ grep -w blkio /sys/fs/cgroup/cgroup.controllers
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/cpu ']'
+ grep -w cpu /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=cpu,
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/devices ']'
+ grep -w devices /sys/fs/cgroup/cgroup.controllers
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/freezer ']'
+ grep -w freezer /sys/fs/cgroup/cgroup.controllers
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/hugetlb ']'
+ grep -w hugetlb /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=hugetlb,
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/memory ']'
+ grep -w memory /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=memory,
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/net_cls ']'
+ grep -w net_cls /sys/fs/cgroup/cgroup.controllers
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/perf_event ']'
+ grep -w perf_event /sys/fs/cgroup/cgroup.controllers
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/rdma ']'
+ grep -w rdma /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=rdma,
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/misc ']'
+ grep -w misc /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=misc,
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/pids ']'
+ grep -w pids /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=pids,
+ cgcreate -g cpu,hugetlb,memory,rdma,misc,pids:/osh-libvirt
++ cat /proc/meminfo
++ grep HugePages_Total
++ tr -cd '[:digit:]'
+ hp_count=0
+ '[' 00 -gt 0 ']'
+ '[' -n 457eb676-33da-42ec-9a8c-9293d545c337 ']'
+ cgexec -g cpu,hugetlb,memory,rdma,misc,pids:/osh-libvirt systemd-run --scope --slice=system libvirtd --listen
++ mktemp --suffix .xml
+ tmpsecret=/tmp/tmp.AsqkMuVoEA.xml
+ '[' -n '' ']'
+ trap cleanup EXIT
+ TIMEOUT=60
+ [[ ! -f /var/run/libvirtd.pid ]]
+ [[ 60 -gt 0 ]]
+ let TIMEOUT-=1
+ sleep 1
Running as unit: run-r9e501aa6f10b49429e933cf6812fd28f.scope; invocation ID: 71889162f12546158c803c9d0123006d
+ [[ ! -f /var/run/libvirtd.pid ]]
+ TIMEOUT=10
+ [[ ! -e /var/run/libvirt/libvirt-sock ]]
+ '[' -z '' ']'
+ '[' -n cinder ']'
++ awk '/key/{print $3}' /etc/ceph/ceph.client.cinder.keyring
+ CEPH_CINDER_KEYRING=AQAMjstq/zzdNRAA9oNXDWIchKZfp8/OSYtUkQ==
+ '[' -n cinder ']'
+ create_virsh_libvirt_secret cinder 457eb676-33da-42ec-9a8c-9293d545c337 AQAMjstq/zzdNRAA9oNXDWIchKZfp8/OSYtUkQ==
+ sec_user=cinder
+ sec_uuid=457eb676-33da-42ec-9a8c-9293d545c337
+ sec_ceph_keyring=AQAMjstq/zzdNRAA9oNXDWIchKZfp8/OSYtUkQ==
+ cat
+ virsh secret-define --file /tmp/tmp.AsqkMuVoEA.xml
Secret 457eb676-33da-42ec-9a8c-9293d545c337 created

+ virsh secret-set-value --secret 457eb676-33da-42ec-9a8c-9293d545c337 --base64 AQAMjstq/zzdNRAA9oNXDWIchKZfp8/OSYtUkQ==
error: Passing secret value as command-line argument is insecure!
Secret value set

+ '[' -n '' ']'
+ '[' -n '' ']'
+ cleanup
+ rm -f /tmp/tmp.AsqkMuVoEA.xml
+ '[' -n '' ']'
++ cat /var/run/libvirtd.pid
+ LIBVIRTD_PID=194562
+ kill 194562
+ tail --pid=194562 -f /dev/null
+ cgexec -g cpu,hugetlb,memory,rdma,misc,pids:/osh-libvirt systemd-run --scope --slice=system libvirtd --listen
Running as unit: run-redd953675d044285a904231879b26f07.scope; invocation ID: a10f853ae2ef4be6ac6b921b6cc26985