+ wait_for_file /etc/pki/CA/cacert.pem
+ local file=/etc/pki/CA/cacert.pem
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ sleep 1
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ sleep 1
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ sleep 1
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ sleep 1
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ sleep 1
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ wait_for_file /etc/pki/qemu/ca-cert.pem
+ local file=/etc/pki/qemu/ca-cert.pem
+ '[' '!' -f /etc/pki/qemu/ca-cert.pem ']'
+ wait_for_file /etc/pki/libvirt/servercert.pem
+ local file=/etc/pki/libvirt/servercert.pem
+ '[' '!' -f /etc/pki/libvirt/servercert.pem ']'
+ wait_for_file /etc/pki/libvirt/clientcert.pem
+ local file=/etc/pki/libvirt/clientcert.pem
+ '[' '!' -f /etc/pki/libvirt/clientcert.pem ']'
+ wait_for_file /etc/pki/qemu/server-cert.pem
+ local file=/etc/pki/qemu/server-cert.pem
+ '[' '!' -f /etc/pki/qemu/server-cert.pem ']'
+ wait_for_file /etc/pki/qemu/client-cert.pem
+ local file=/etc/pki/qemu/client-cert.pem
+ '[' '!' -f /etc/pki/qemu/client-cert.pem ']'
+ wait_for_file /etc/pki/libvirt/private/serverkey.pem
+ local file=/etc/pki/libvirt/private/serverkey.pem
+ '[' '!' -f /etc/pki/libvirt/private/serverkey.pem ']'
+ wait_for_file /etc/pki/libvirt/private/clientkey.pem
+ local file=/etc/pki/libvirt/private/clientkey.pem
+ '[' '!' -f /etc/pki/libvirt/private/clientkey.pem ']'
+ wait_for_file /etc/pki/qemu/server-key.pem
+ local file=/etc/pki/qemu/server-key.pem
+ '[' '!' -f /etc/pki/qemu/server-key.pem ']'
+ wait_for_file /etc/pki/qemu/client-key.pem
+ local file=/etc/pki/qemu/client-key.pem
+ '[' '!' -f /etc/pki/qemu/client-key.pem ']'
+ wait_for_file /etc/pki/libvirt-vnc/ca-cert.pem
+ local file=/etc/pki/libvirt-vnc/ca-cert.pem
+ '[' '!' -f /etc/pki/libvirt-vnc/ca-cert.pem ']'
+ wait_for_file /etc/pki/libvirt-vnc/server-cert.pem
+ local file=/etc/pki/libvirt-vnc/server-cert.pem
+ '[' '!' -f /etc/pki/libvirt-vnc/server-cert.pem ']'
+ wait_for_file /etc/pki/libvirt-vnc/server-key.pem
+ local file=/etc/pki/libvirt-vnc/server-key.pem
+ '[' '!' -f /etc/pki/libvirt-vnc/server-key.pem ']'
++ grep -w libvirtd
++ cat /proc/1/comm /proc/10/comm /proc/100/comm /proc/10171/comm /proc/102/comm /proc/103/comm /proc/103038/comm /proc/103064/comm /proc/103383/comm /proc/103395/comm /proc/103396/comm /proc/104/comm /proc/104427/comm /proc/104452/comm /proc/104481/comm /proc/104506/comm /proc/104838/comm /proc/104991/comm /proc/104993/comm /proc/105/comm /proc/106/comm /proc/106216/comm /proc/106393/comm /proc/106537/comm /proc/106560/comm /proc/106701/comm /proc/106719/comm /proc/106725/comm /proc/10680/comm /proc/10681/comm /proc/106914/comm /proc/106917/comm /proc/106935/comm /proc/107205/comm /proc/108/comm /proc/108515/comm /proc/108543/comm /proc/108570/comm /proc/108601/comm /proc/108813/comm /proc/109/comm /proc/109486/comm /proc/11/comm /proc/110/comm /proc/111/comm /proc/112/comm /proc/113/comm /proc/113379/comm /proc/113380/comm /proc/113381/comm /proc/113473/comm /proc/114/comm /proc/115/comm /proc/116/comm /proc/116101/comm /proc/116894/comm /proc/117/comm /proc/118507/comm /proc/118519/comm /proc/118520/comm /proc/1192/comm /proc/12/comm /proc/120158/comm /proc/12136/comm /proc/121598/comm /proc/121623/comm /proc/121642/comm /proc/12165/comm /proc/121679/comm /proc/12202/comm /proc/122231/comm /proc/12247/comm /proc/12260/comm /proc/122653/comm /proc/122769/comm /proc/124265/comm /proc/124291/comm /proc/124467/comm /proc/124732/comm /proc/12499/comm /proc/12529/comm /proc/12583/comm /proc/12607/comm /proc/12628/comm /proc/126599/comm /proc/127975/comm /proc/127976/comm /proc/127981/comm /proc/128838/comm /proc/129020/comm /proc/129037/comm /proc/129447/comm /proc/129473/comm /proc/129474/comm /proc/1297/comm /proc/1298/comm /proc/1299/comm /proc/13/comm /proc/1300/comm /proc/130856/comm /proc/130857/comm /proc/137922/comm /proc/137923/comm /proc/137925/comm /proc/137926/comm /proc/138042/comm /proc/1381/comm /proc/1385/comm /proc/138698/comm /proc/138721/comm /proc/139066/comm /proc/139082/comm /proc/139128/comm /proc/139141/comm /proc/139173/comm /proc/139174/comm /proc/139175/comm /proc/139176/comm /proc/14/comm /proc/140217/comm /proc/140240/comm /proc/140567/comm /proc/140590/comm /proc/140698/comm /proc/141238/comm /proc/141239/comm /proc/141392/comm /proc/141416/comm /proc/141500/comm /proc/141519/comm /proc/141532/comm /proc/141806/comm /proc/141807/comm /proc/141817/comm /proc/141887/comm /proc/143/comm /proc/143492/comm /proc/143520/comm /proc/143641/comm /proc/143676/comm /proc/143757/comm /proc/143777/comm /proc/143815/comm /proc/143827/comm /proc/143855/comm /proc/143945/comm /proc/144065/comm /proc/144293/comm /proc/144322/comm /proc/144387/comm /proc/144421/comm /proc/144447/comm /proc/144654/comm /proc/144698/comm /proc/145039/comm /proc/1452/comm /proc/1456/comm /proc/1465/comm /proc/14813/comm /proc/15/comm /proc/16/comm /proc/162713/comm /proc/163327/comm /proc/16344/comm /proc/163501/comm /proc/164654/comm /proc/166/comm /proc/166013/comm /proc/166091/comm /proc/166114/comm /proc/167/comm /proc/167388/comm /proc/167510/comm /proc/167512/comm /proc/167532/comm /proc/168/comm /proc/168058/comm /proc/168092/comm /proc/168093/comm /proc/168094/comm /proc/168095/comm /proc/168248/comm /proc/168260/comm /proc/168261/comm /proc/16859/comm /proc/168774/comm /proc/168925/comm /proc/168962/comm /proc/168985/comm /proc/169/comm /proc/169087/comm /proc/169088/comm /proc/169391/comm /proc/169397/comm /proc/169675/comm /proc/169723/comm /proc/169740/comm /proc/169865/comm /proc/169889/comm /proc/170/comm /proc/170006/comm /proc/170023/comm /proc/170029/comm /proc/170200/comm /proc/170201/comm /proc/170221/comm /proc/170340/comm /proc/170817/comm /proc/170902/comm /proc/171/comm /proc/171630/comm /proc/171639/comm /proc/171694/comm /proc/171701/comm /proc/171703/comm /proc/171744/comm /proc/171789/comm /proc/171791/comm /proc/171872/comm /proc/171887/comm /proc/172/comm /proc/172146/comm /proc/172181/comm /proc/172197/comm /proc/172228/comm /proc/172745/comm /proc/172758/comm /proc/172789/comm /proc/172861/comm /proc/173/comm /proc/174/comm /proc/176/comm /proc/177/comm /proc/177507/comm /proc/177731/comm /proc/178714/comm /proc/179/comm /proc/18/comm /proc/180/comm /proc/180161/comm /proc/180168/comm /proc/180172/comm /proc/180405/comm /proc/180406/comm /proc/180407/comm /proc/180739/comm /proc/180741/comm /proc/180774/comm /proc/180775/comm /proc/180803/comm /proc/180818/comm /proc/180819/comm /proc/181304/comm /proc/181307/comm /proc/181310/comm /proc/181776/comm /proc/182/comm /proc/182052/comm /proc/182282/comm /proc/182589/comm /proc/183282/comm /proc/183540/comm /proc/183563/comm /proc/183570/comm /proc/183623/comm /proc/183801/comm /proc/183812/comm /proc/184/comm /proc/184089/comm /proc/184090/comm /proc/184091/comm /proc/184379/comm /proc/184396/comm /proc/184397/comm /proc/184398/comm /proc/184399/comm /proc/184400/comm /proc/184401/comm /proc/184402/comm /proc/184586/comm /proc/184943/comm /proc/184952/comm /proc/185002/comm /proc/185019/comm /proc/185066/comm /proc/185093/comm /proc/185179/comm /proc/185202/comm /proc/185427/comm /proc/185444/comm /proc/185450/comm /proc/185588/comm /proc/185591/comm /proc/185592/comm /proc/185593/comm /proc/185603/comm /proc/185653/comm /proc/185664/comm /proc/185665/comm /proc/185666/comm /proc/186/comm /proc/187/comm /proc/188/comm /proc/189/comm /proc/19/comm /proc/191/comm /proc/192/comm /proc/19282/comm /proc/193/comm /proc/19303/comm /proc/19327/comm /proc/19355/comm /proc/19372/comm /proc/194/comm /proc/2/comm /proc/20/comm /proc/200/comm /proc/206/comm /proc/21/comm /proc/21409/comm /proc/21412/comm /proc/21414/comm /proc/21434/comm /proc/217/comm /proc/21824/comm /proc/22/comm /proc/220/comm /proc/221/comm /proc/226/comm /proc/24/comm /proc/24249/comm /proc/24515/comm /proc/24532/comm /proc/24555/comm /proc/24568/comm /proc/248/comm /proc/25/comm /proc/26/comm /proc/27/comm /proc/276/comm /proc/28/comm /proc/28687/comm /proc/289/comm /proc/28964/comm /proc/28981/comm /proc/29004/comm /proc/29017/comm /proc/292/comm /proc/293/comm /proc/3/comm /proc/30/comm /proc/31/comm /proc/313/comm /proc/314/comm /proc/318/comm /proc/319/comm /proc/32/comm /proc/328/comm /proc/33/comm /proc/33475/comm /proc/33743/comm /proc/33760/comm /proc/33784/comm /proc/33797/comm /proc/34/comm /proc/347/comm /proc/35380/comm /proc/35382/comm /proc/36/comm /proc/361/comm /proc/37/comm /proc/372/comm /proc/38/comm /proc/380/comm /proc/39/comm /proc/39276/comm /proc/39291/comm /proc/39330/comm /proc/39346/comm /proc/39350/comm /proc/39367/comm /proc/39397/comm /proc/39427/comm /proc/39443/comm /proc/39446/comm /proc/395/comm /proc/39513/comm /proc/39537/comm /proc/39558/comm /proc/39571/comm /proc/39675/comm /proc/39736/comm /proc/398/comm /proc/39897/comm /proc/39922/comm /proc/39947/comm /proc/4/comm /proc/40/comm /proc/40628/comm /proc/40646/comm /proc/40670/comm /proc/40690/comm /proc/40924/comm /proc/41132/comm /proc/41215/comm /proc/41515/comm /proc/41994/comm /proc/42/comm /proc/42017/comm /proc/42057/comm /proc/42393/comm /proc/42417/comm /proc/42431/comm /proc/42456/comm /proc/42494/comm /proc/42508/comm /proc/42872/comm /proc/42895/comm /proc/43/comm /proc/43117/comm /proc/43161/comm /proc/43367/comm /proc/43391/comm /proc/43405/comm /proc/43446/comm /proc/43449/comm /proc/43478/comm /proc/43592/comm /proc/43639/comm /proc/43686/comm /proc/44/comm /proc/45/comm /proc/452/comm /proc/455/comm /proc/45722/comm /proc/45748/comm /proc/45784/comm /proc/45847/comm /proc/45870/comm /proc/46/comm /proc/46097/comm /proc/46110/comm /proc/46137/comm /proc/46256/comm /proc/46590/comm /proc/46614/comm /proc/46708/comm /proc/46732/comm /proc/46777/comm /proc/46898/comm /proc/47070/comm /proc/47095/comm /proc/47217/comm /proc/47566/comm /proc/47593/comm /proc/479/comm /proc/47981/comm /proc/48/comm /proc/48006/comm /proc/48039/comm /proc/48118/comm /proc/48197/comm /proc/48293/comm /proc/48318/comm /proc/48404/comm /proc/49/comm /proc/493/comm /proc/5/comm /proc/50/comm /proc/50024/comm /proc/50049/comm /proc/50200/comm /proc/50223/comm /proc/50304/comm /proc/50409/comm /proc/50626/comm /proc/50685/comm /proc/50739/comm /proc/51/comm /proc/52/comm /proc/523/comm /proc/54/comm /proc/54539/comm /proc/54562/comm /proc/55/comm /proc/55190/comm /proc/55223/comm /proc/55255/comm /proc/55281/comm /proc/55294/comm /proc/55320/comm /proc/55458/comm /proc/55506/comm /proc/55583/comm /proc/55623/comm /proc/55658/comm /proc/55713/comm /proc/56/comm /proc/57/comm /proc/58/comm /proc/59230/comm /proc/59232/comm /proc/59233/comm /proc/59499/comm /proc/59558/comm /proc/59612/comm /proc/59639/comm /proc/59652/comm /proc/59676/comm /proc/59690/comm /proc/59721/comm /proc/6/comm /proc/60/comm /proc/60053/comm /proc/60175/comm /proc/60595/comm /proc/60621/comm /proc/60656/comm /proc/60956/comm /proc/60990/comm /proc/60991/comm /proc/61/comm /proc/61016/comm /proc/61017/comm /proc/61185/comm /proc/61233/comm /proc/61248/comm /proc/61277/comm /proc/61424/comm /proc/61448/comm /proc/61462/comm /proc/61489/comm /proc/616/comm /proc/61769/comm /proc/61791/comm /proc/62/comm /proc/620/comm /proc/62087/comm /proc/62118/comm /proc/622/comm /proc/62216/comm /proc/62302/comm /proc/62327/comm /proc/625/comm /proc/62826/comm /proc/62852/comm /proc/62886/comm /proc/629/comm /proc/62979/comm /proc/63/comm /proc/63002/comm /proc/63038/comm /proc/63298/comm /proc/63313/comm /proc/63314/comm /proc/63315/comm /proc/63316/comm /proc/63317/comm /proc/63599/comm /proc/63623/comm /proc/63759/comm /proc/63802/comm /proc/63839/comm /proc/63871/comm /proc/63909/comm /proc/63965/comm /proc/64/comm /proc/64023/comm /proc/64066/comm /proc/64302/comm /proc/64346/comm /proc/64394/comm /proc/64576/comm /proc/64589/comm /proc/64632/comm /proc/648/comm /proc/64831/comm /proc/64849/comm /proc/64865/comm /proc/64909/comm /proc/64940/comm /proc/65020/comm /proc/65039/comm /proc/65128/comm /proc/65152/comm /proc/654/comm /proc/65542/comm /proc/65559/comm /proc/65565/comm /proc/65638/comm /proc/65639/comm /proc/65649/comm /proc/65785/comm /proc/66/comm /proc/67/comm /proc/67304/comm /proc/67329/comm /proc/68/comm /proc/68655/comm /proc/69/comm /proc/70/comm /proc/705/comm /proc/70505/comm /proc/70520/comm /proc/70521/comm /proc/70522/comm /proc/70523/comm /proc/70524/comm /proc/70526/comm /proc/70531/comm /proc/70532/comm /proc/70533/comm /proc/70534/comm /proc/70535/comm /proc/70536/comm /proc/70537/comm /proc/70539/comm /proc/708/comm /proc/709/comm /proc/72/comm /proc/722/comm /proc/73/comm /proc/74/comm /proc/74084/comm /proc/75/comm /proc/76/comm /proc/76675/comm /proc/76704/comm /proc/76794/comm /proc/76810/comm /proc/76819/comm /proc/76991/comm /proc/76992/comm /proc/77002/comm /proc/77085/comm /proc/78/comm /proc/78218/comm /proc/78241/comm /proc/79/comm /proc/79579/comm /proc/8/comm /proc/80/comm /proc/81/comm /proc/82/comm /proc/82953/comm /proc/83418/comm /proc/83431/comm /proc/84/comm /proc/84140/comm /proc/84173/comm /proc/84928/comm /proc/85/comm /proc/86/comm /proc/867/comm /proc/87/comm /proc/87550/comm /proc/87551/comm /proc/88/comm /proc/89067/comm /proc/9/comm /proc/90/comm /proc/90120/comm /proc/90144/comm /proc/90300/comm /proc/90317/comm /proc/90323/comm /proc/90559/comm /proc/90560/comm /proc/90570/comm /proc/9063/comm /proc/90753/comm /proc/9080/comm /proc/9097/comm /proc/91/comm /proc/9181/comm /proc/92/comm /proc/93/comm /proc/94/comm /proc/94343/comm /proc/94371/comm /proc/94393/comm /proc/94416/comm /proc/94673/comm /proc/94799/comm /proc/95674/comm /proc/96/comm /proc/97/comm /proc/9798/comm /proc/98/comm /proc/98274/comm /proc/98530/comm /proc/99/comm /proc/self/comm /proc/thread-self/comm
+ '[' -n '' ']'
+ rm -f /var/run/libvirtd.pid
+ [[ -c /dev/kvm ]]
+ chmod 660 /dev/kvm
+ chown root:kvm /dev/kvm
+ CGROUPS=
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/blkio ']'
+ grep -w blkio /sys/fs/cgroup/cgroup.controllers
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/cpu ']'
+ grep -w cpu /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=cpu,
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/devices ']'
+ grep -w devices /sys/fs/cgroup/cgroup.controllers
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/freezer ']'
+ grep -w freezer /sys/fs/cgroup/cgroup.controllers
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/hugetlb ']'
+ grep -w hugetlb /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=hugetlb,
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/memory ']'
+ grep -w memory /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=memory,
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/net_cls ']'
+ grep -w net_cls /sys/fs/cgroup/cgroup.controllers
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/perf_event ']'
+ grep -w perf_event /sys/fs/cgroup/cgroup.controllers
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/rdma ']'
+ grep -w rdma /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=rdma,
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/misc ']'
+ grep -w misc /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=misc,
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/pids ']'
+ grep -w pids /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=pids,
+ cgcreate -g cpu,hugetlb,memory,rdma,misc,pids:/osh-libvirt
++ cat /proc/meminfo
++ grep HugePages_Total
++ tr -cd '[:digit:]'
+ hp_count=0
+ '[' 00 -gt 0 ']'
+ '[' -n 457eb676-33da-42ec-9a8c-9293d545c337 ']'
+ cgexec -g cpu,hugetlb,memory,rdma,misc,pids:/osh-libvirt systemd-run --scope --slice=system libvirtd --listen
++ mktemp --suffix .xml
+ tmpsecret=/tmp/tmp.il5nT9kgve.xml
+ '[' -n '' ']'
+ trap cleanup EXIT
+ TIMEOUT=60
+ [[ ! -f /var/run/libvirtd.pid ]]
+ [[ 60 -gt 0 ]]
+ let TIMEOUT-=1
+ sleep 1
Running as unit: run-r59154024881848b3a8d7178f76b081c2.scope; invocation ID: 9e981215135848f79579723753c458a8
+ [[ ! -f /var/run/libvirtd.pid ]]
+ TIMEOUT=10
+ [[ ! -e /var/run/libvirt/libvirt-sock ]]
+ '[' -z '' ']'
+ '[' -n cinder ']'
++ awk '/key/{print $3}' /etc/ceph/ceph.client.cinder.keyring
+ CEPH_CINDER_KEYRING=AQAJ/AtqHVejABAAuID50MhdwkeRzrcoQWH9FA==
+ '[' -n cinder ']'
+ create_virsh_libvirt_secret cinder 457eb676-33da-42ec-9a8c-9293d545c337 AQAJ/AtqHVejABAAuID50MhdwkeRzrcoQWH9FA==
+ sec_user=cinder
+ sec_uuid=457eb676-33da-42ec-9a8c-9293d545c337
+ sec_ceph_keyring=AQAJ/AtqHVejABAAuID50MhdwkeRzrcoQWH9FA==
+ cat
+ virsh secret-define --file /tmp/tmp.il5nT9kgve.xml
Secret 457eb676-33da-42ec-9a8c-9293d545c337 created

+ virsh secret-set-value --secret 457eb676-33da-42ec-9a8c-9293d545c337 --base64 AQAJ/AtqHVejABAAuID50MhdwkeRzrcoQWH9FA==
error: Passing secret value as command-line argument is insecure!
Secret value set

+ '[' -n '' ']'
+ '[' -n '' ']'
+ cleanup
+ rm -f /tmp/tmp.il5nT9kgve.xml
+ '[' -n '' ']'
++ cat /var/run/libvirtd.pid
+ LIBVIRTD_PID=185686
+ kill 185686
+ tail --pid=185686 -f /dev/null
+ cgexec -g cpu,hugetlb,memory,rdma,misc,pids:/osh-libvirt systemd-run --scope --slice=system libvirtd --listen
Running as unit: run-r90f8239049f94061a5cb324e8e8bf828.scope; invocation ID: 1ebf94b9074349f9871129a38b6b6f17