+ wait_for_file /etc/pki/CA/cacert.pem
+ local file=/etc/pki/CA/cacert.pem
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ sleep 1
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ sleep 1
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ sleep 1
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ sleep 1
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ sleep 1
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ wait_for_file /etc/pki/qemu/ca-cert.pem
+ local file=/etc/pki/qemu/ca-cert.pem
+ '[' '!' -f /etc/pki/qemu/ca-cert.pem ']'
+ wait_for_file /etc/pki/libvirt/servercert.pem
+ local file=/etc/pki/libvirt/servercert.pem
+ '[' '!' -f /etc/pki/libvirt/servercert.pem ']'
+ wait_for_file /etc/pki/libvirt/clientcert.pem
+ local file=/etc/pki/libvirt/clientcert.pem
+ '[' '!' -f /etc/pki/libvirt/clientcert.pem ']'
+ wait_for_file /etc/pki/qemu/server-cert.pem
+ local file=/etc/pki/qemu/server-cert.pem
+ '[' '!' -f /etc/pki/qemu/server-cert.pem ']'
+ wait_for_file /etc/pki/qemu/client-cert.pem
+ local file=/etc/pki/qemu/client-cert.pem
+ '[' '!' -f /etc/pki/qemu/client-cert.pem ']'
+ wait_for_file /etc/pki/libvirt/private/serverkey.pem
+ local file=/etc/pki/libvirt/private/serverkey.pem
+ '[' '!' -f /etc/pki/libvirt/private/serverkey.pem ']'
+ wait_for_file /etc/pki/libvirt/private/clientkey.pem
+ local file=/etc/pki/libvirt/private/clientkey.pem
+ '[' '!' -f /etc/pki/libvirt/private/clientkey.pem ']'
+ wait_for_file /etc/pki/qemu/server-key.pem
+ local file=/etc/pki/qemu/server-key.pem
+ '[' '!' -f /etc/pki/qemu/server-key.pem ']'
+ wait_for_file /etc/pki/qemu/client-key.pem
+ local file=/etc/pki/qemu/client-key.pem
+ '[' '!' -f /etc/pki/qemu/client-key.pem ']'
+ wait_for_file /etc/pki/libvirt-vnc/ca-cert.pem
+ local file=/etc/pki/libvirt-vnc/ca-cert.pem
+ '[' '!' -f /etc/pki/libvirt-vnc/ca-cert.pem ']'
+ wait_for_file /etc/pki/libvirt-vnc/server-cert.pem
+ local file=/etc/pki/libvirt-vnc/server-cert.pem
+ '[' '!' -f /etc/pki/libvirt-vnc/server-cert.pem ']'
+ wait_for_file /etc/pki/libvirt-vnc/server-key.pem
+ local file=/etc/pki/libvirt-vnc/server-key.pem
+ '[' '!' -f /etc/pki/libvirt-vnc/server-key.pem ']'
++ grep -w libvirtd
++ cat /proc/1/comm /proc/10/comm /proc/100/comm /proc/100524/comm /proc/101669/comm /proc/102/comm /proc/103/comm /proc/10331/comm /proc/10355/comm /proc/104/comm /proc/105/comm /proc/106/comm /proc/106221/comm /proc/106359/comm /proc/106373/comm /proc/106680/comm /proc/106693/comm /proc/106694/comm /proc/107161/comm /proc/108/comm /proc/109/comm /proc/109550/comm /proc/109574/comm /proc/109594/comm /proc/1096/comm /proc/109618/comm /proc/109938/comm /proc/109940/comm /proc/11/comm /proc/110/comm /proc/110182/comm /proc/110395/comm /proc/110614/comm /proc/11095/comm /proc/11096/comm /proc/111/comm /proc/111215/comm /proc/111857/comm /proc/111881/comm /proc/112/comm /proc/112307/comm /proc/112577/comm /proc/113/comm /proc/113683/comm /proc/114/comm /proc/114634/comm /proc/115/comm /proc/115409/comm /proc/115539/comm /proc/115761/comm /proc/115883/comm /proc/115912/comm /proc/115913/comm /proc/116/comm /proc/117/comm /proc/117128/comm /proc/117129/comm /proc/12/comm /proc/124077/comm /proc/124078/comm /proc/124080/comm /proc/124081/comm /proc/124099/comm /proc/124556/comm /proc/124583/comm /proc/12488/comm /proc/12517/comm /proc/125202/comm /proc/125265/comm /proc/125290/comm /proc/125336/comm /proc/125337/comm /proc/125338/comm /proc/125339/comm /proc/12573/comm /proc/12599/comm /proc/126015/comm /proc/126043/comm /proc/12618/comm /proc/126449/comm /proc/126473/comm /proc/126641/comm /proc/126983/comm /proc/127179/comm /proc/127263/comm /proc/127285/comm /proc/127347/comm /proc/127368/comm /proc/127385/comm /proc/127392/comm /proc/127504/comm /proc/127555/comm /proc/127557/comm /proc/12852/comm /proc/128796/comm /proc/12883/comm /proc/129176/comm /proc/129203/comm /proc/129322/comm /proc/129394/comm /proc/12940/comm /proc/129419/comm /proc/129439/comm /proc/129466/comm /proc/129484/comm /proc/129510/comm /proc/129593/comm /proc/12964/comm /proc/129643/comm /proc/129690/comm /proc/12982/comm /proc/129855/comm /proc/129878/comm /proc/13/comm /proc/130315/comm /proc/130376/comm /proc/130487/comm /proc/130511/comm /proc/134222/comm /proc/134372/comm /proc/134390/comm /proc/135444/comm /proc/135447/comm /proc/135460/comm /proc/14/comm /proc/1427/comm /proc/148849/comm /proc/15/comm /proc/150057/comm /proc/150125/comm /proc/150174/comm /proc/150534/comm /proc/150547/comm /proc/150561/comm /proc/150562/comm /proc/150728/comm /proc/150741/comm /proc/150742/comm /proc/151211/comm /proc/151218/comm /proc/151375/comm /proc/151394/comm /proc/151397/comm /proc/151483/comm /proc/151484/comm /proc/151487/comm /proc/151488/comm /proc/152147/comm /proc/152148/comm /proc/152310/comm /proc/152334/comm /proc/152432/comm /proc/152453/comm /proc/152460/comm /proc/152523/comm /proc/152600/comm /proc/152601/comm /proc/153816/comm /proc/153825/comm /proc/153873/comm /proc/153888/comm /proc/153999/comm /proc/154001/comm /proc/154047/comm /proc/154052/comm /proc/154291/comm /proc/154318/comm /proc/154342/comm /proc/154384/comm /proc/154410/comm /proc/154440/comm /proc/1545/comm /proc/1546/comm /proc/1547/comm /proc/1548/comm /proc/154941/comm /proc/154974/comm /proc/1552/comm /proc/157456/comm /proc/157466/comm /proc/157470/comm /proc/158026/comm /proc/158336/comm /proc/159119/comm /proc/159868/comm /proc/16/comm /proc/160072/comm /proc/160083/comm /proc/160423/comm /proc/161194/comm /proc/161360/comm /proc/161361/comm /proc/161362/comm /proc/161534/comm /proc/161535/comm /proc/161666/comm /proc/161685/comm /proc/161708/comm /proc/161709/comm /proc/161727/comm /proc/161739/comm /proc/161740/comm /proc/1619/comm /proc/161905/comm /proc/161906/comm /proc/161907/comm /proc/1623/comm /proc/162538/comm /proc/162883/comm /proc/162912/comm /proc/163199/comm /proc/1632/comm /proc/163799/comm /proc/163817/comm /proc/163835/comm /proc/163926/comm /proc/164058/comm /proc/164059/comm /proc/164284/comm /proc/164321/comm /proc/164322/comm /proc/164323/comm /proc/164324/comm /proc/164325/comm /proc/164326/comm /proc/164336/comm /proc/164516/comm /proc/164752/comm /proc/164844/comm /proc/164886/comm /proc/164951/comm /proc/165029/comm /proc/165065/comm /proc/165211/comm /proc/165233/comm /proc/165243/comm /proc/165367/comm /proc/165410/comm /proc/165411/comm /proc/165424/comm /proc/165450/comm /proc/165480/comm /proc/165491/comm /proc/165554/comm /proc/165555/comm /proc/165587/comm /proc/165728/comm /proc/165732/comm /proc/165766/comm /proc/165767/comm /proc/165768/comm /proc/167/comm /proc/16796/comm /proc/168/comm /proc/169/comm /proc/170/comm /proc/171/comm /proc/172/comm /proc/173/comm /proc/174/comm /proc/175/comm /proc/178/comm /proc/18/comm /proc/180/comm /proc/181/comm /proc/183/comm /proc/185/comm /proc/187/comm /proc/18762/comm /proc/18781/comm /proc/188/comm /proc/18803/comm /proc/18832/comm /proc/18849/comm /proc/189/comm /proc/19/comm /proc/190/comm /proc/192/comm /proc/2/comm /proc/20/comm /proc/203/comm /proc/204/comm /proc/205/comm /proc/206/comm /proc/207/comm /proc/21/comm /proc/216/comm /proc/21773/comm /proc/21850/comm /proc/21851/comm /proc/21865/comm /proc/22/comm /proc/220/comm /proc/221/comm /proc/226/comm /proc/24/comm /proc/248/comm /proc/25/comm /proc/25115/comm /proc/25381/comm /proc/25399/comm /proc/25422/comm /proc/25435/comm /proc/26/comm /proc/269/comm /proc/27/comm /proc/28/comm /proc/290/comm /proc/294/comm /proc/295/comm /proc/296/comm /proc/29612/comm /proc/298/comm /proc/29888/comm /proc/299/comm /proc/29905/comm /proc/29930/comm /proc/29943/comm /proc/3/comm /proc/30/comm /proc/30438/comm /proc/31/comm /proc/318/comm /proc/319/comm /proc/32/comm /proc/323/comm /proc/324/comm /proc/325/comm /proc/326/comm /proc/327/comm /proc/328/comm /proc/33/comm /proc/34/comm /proc/34259/comm /proc/34527/comm /proc/34545/comm /proc/34570/comm /proc/34582/comm /proc/35380/comm /proc/36/comm /proc/368/comm /proc/37/comm /proc/38/comm /proc/38848/comm /proc/38850/comm /proc/38956/comm /proc/38978/comm /proc/39/comm /proc/39022/comm /proc/39050/comm /proc/39065/comm /proc/399/comm /proc/4/comm /proc/40/comm /proc/404/comm /proc/41538/comm /proc/41562/comm /proc/41585/comm /proc/41602/comm /proc/41605/comm /proc/41623/comm /proc/41677/comm /proc/41701/comm /proc/41703/comm /proc/41705/comm /proc/41777/comm /proc/41798/comm /proc/41816/comm /proc/41841/comm /proc/41940/comm /proc/42/comm /proc/42002/comm /proc/42138/comm /proc/42163/comm /proc/42191/comm /proc/42881/comm /proc/42897/comm /proc/42928/comm /proc/42943/comm /proc/43/comm /proc/43202/comm /proc/43408/comm /proc/43500/comm /proc/43782/comm /proc/44/comm /proc/44253/comm /proc/44276/comm /proc/44301/comm /proc/44662/comm /proc/44686/comm /proc/44740/comm /proc/44783/comm /proc/44806/comm /proc/44836/comm /proc/45/comm /proc/45195/comm /proc/45221/comm /proc/45384/comm /proc/457/comm /proc/45757/comm /proc/45782/comm /proc/45799/comm /proc/45827/comm /proc/45839/comm /proc/45868/comm /proc/45983/comm /proc/46/comm /proc/46027/comm /proc/46072/comm /proc/46226/comm /proc/47671/comm /proc/47699/comm /proc/47732/comm /proc/47815/comm /proc/47838/comm /proc/48/comm /proc/48203/comm /proc/48216/comm /proc/48252/comm /proc/48324/comm /proc/48675/comm /proc/48703/comm /proc/48798/comm /proc/48821/comm /proc/48872/comm /proc/48995/comm /proc/49/comm /proc/49187/comm /proc/49212/comm /proc/49329/comm /proc/49469/comm /proc/49501/comm /proc/49659/comm /proc/49740/comm /proc/49786/comm /proc/49881/comm /proc/49904/comm /proc/49998/comm /proc/5/comm /proc/50/comm /proc/50094/comm /proc/50202/comm /proc/51/comm /proc/51707/comm /proc/51730/comm /proc/51912/comm /proc/51967/comm /proc/52/comm /proc/52427/comm /proc/525/comm /proc/54/comm /proc/54051/comm /proc/54074/comm /proc/54639/comm /proc/54663/comm /proc/54692/comm /proc/54716/comm /proc/54858/comm /proc/54883/comm /proc/54991/comm /proc/55/comm /proc/55024/comm /proc/55114/comm /proc/56/comm /proc/57/comm /proc/57844/comm /proc/57886/comm /proc/57980/comm /proc/58/comm /proc/580/comm /proc/58000/comm /proc/58027/comm /proc/58055/comm /proc/58077/comm /proc/58094/comm /proc/58124/comm /proc/58327/comm /proc/58343/comm /proc/58480/comm /proc/58877/comm /proc/58988/comm /proc/59212/comm /proc/59213/comm /proc/59223/comm /proc/59224/comm /proc/59265/comm /proc/59307/comm /proc/59328/comm /proc/59523/comm /proc/59550/comm /proc/59739/comm /proc/59773/comm /proc/6/comm /proc/60/comm /proc/60049/comm /proc/60072/comm /proc/60126/comm /proc/60234/comm /proc/60261/comm /proc/60362/comm /proc/60392/comm /proc/60405/comm /proc/60679/comm /proc/60680/comm /proc/60819/comm /proc/60833/comm /proc/60834/comm /proc/60835/comm /proc/60836/comm /proc/60837/comm /proc/61/comm /proc/61375/comm /proc/61398/comm /proc/61637/comm /proc/61675/comm /proc/61863/comm /proc/62/comm /proc/620/comm /proc/62066/comm /proc/62090/comm /proc/62193/comm /proc/62238/comm /proc/62276/comm /proc/62315/comm /proc/624/comm /proc/62480/comm /proc/62520/comm /proc/62564/comm /proc/626/comm /proc/62657/comm /proc/62915/comm /proc/63/comm /proc/63003/comm /proc/63016/comm /proc/63035/comm /proc/63189/comm /proc/632/comm /proc/63212/comm /proc/63234/comm /proc/633/comm /proc/63435/comm /proc/63453/comm /proc/63488/comm /proc/63551/comm /proc/63602/comm /proc/63603/comm /proc/64/comm /proc/64574/comm /proc/64597/comm /proc/651/comm /proc/655/comm /proc/66/comm /proc/66048/comm /proc/67/comm /proc/67159/comm /proc/67180/comm /proc/67181/comm /proc/67182/comm /proc/67183/comm /proc/67184/comm /proc/67185/comm /proc/67187/comm /proc/67188/comm /proc/67192/comm /proc/67194/comm /proc/67195/comm /proc/67196/comm /proc/67198/comm /proc/67199/comm /proc/68/comm /proc/69/comm /proc/70/comm /proc/710/comm /proc/713/comm /proc/714/comm /proc/71867/comm /proc/71890/comm /proc/72/comm /proc/72036/comm /proc/72054/comm /proc/72061/comm /proc/72117/comm /proc/72168/comm /proc/72169/comm /proc/727/comm /proc/73/comm /proc/73103/comm /proc/73126/comm /proc/74/comm /proc/75/comm /proc/76/comm /proc/76104/comm /proc/76835/comm /proc/77225/comm /proc/77237/comm /proc/77793/comm /proc/77822/comm /proc/78/comm /proc/78613/comm /proc/79/comm /proc/8/comm /proc/80/comm /proc/81/comm /proc/82/comm /proc/82334/comm /proc/82510/comm /proc/82536/comm /proc/82798/comm /proc/82831/comm /proc/82843/comm /proc/83007/comm /proc/83062/comm /proc/83063/comm /proc/83065/comm /proc/84/comm /proc/84894/comm /proc/84956/comm /proc/85/comm /proc/85982/comm /proc/85985/comm /proc/86/comm /proc/86164/comm /proc/87/comm /proc/872/comm /proc/88/comm /proc/90/comm /proc/91/comm /proc/91329/comm /proc/91356/comm /proc/91366/comm /proc/91393/comm /proc/91545/comm /proc/91591/comm /proc/91714/comm /proc/92/comm /proc/9229/comm /proc/92392/comm /proc/9246/comm /proc/9262/comm /proc/92848/comm /proc/92849/comm /proc/93/comm /proc/9344/comm /proc/94/comm /proc/94225/comm /proc/94252/comm /proc/94551/comm /proc/94564/comm /proc/94565/comm /proc/95485/comm /proc/95509/comm /proc/95582/comm /proc/95614/comm /proc/95911/comm /proc/96/comm /proc/96004/comm /proc/96212/comm /proc/96214/comm /proc/96556/comm /proc/97/comm /proc/97028/comm /proc/97145/comm /proc/97235/comm /proc/97258/comm /proc/97341/comm /proc/97358/comm /proc/97365/comm /proc/97419/comm /proc/97470/comm /proc/97471/comm /proc/98/comm /proc/98710/comm /proc/98736/comm /proc/98760/comm /proc/98801/comm /proc/99/comm /proc/99205/comm /proc/9962/comm /proc/self/comm /proc/thread-self/comm
+ '[' -n '' ']'
+ rm -f /var/run/libvirtd.pid
+ [[ -c /dev/kvm ]]
+ chmod 660 /dev/kvm
+ chown root:kvm /dev/kvm
+ CGROUPS=
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/blkio ']'
+ grep -w blkio /sys/fs/cgroup/cgroup.controllers
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/cpu ']'
+ grep -w cpu /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=cpu,
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/devices ']'
+ grep -w devices /sys/fs/cgroup/cgroup.controllers
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/freezer ']'
+ grep -w freezer /sys/fs/cgroup/cgroup.controllers
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/hugetlb ']'
+ grep -w hugetlb /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=hugetlb,
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/memory ']'
+ grep -w memory /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=memory,
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/net_cls ']'
+ grep -w net_cls /sys/fs/cgroup/cgroup.controllers
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/perf_event ']'
+ grep -w perf_event /sys/fs/cgroup/cgroup.controllers
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/rdma ']'
+ grep -w rdma /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=rdma,
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/misc ']'
+ grep -w misc /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=misc,
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/pids ']'
+ grep -w pids /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=pids,
+ cgcreate -g cpu,hugetlb,memory,rdma,misc,pids:/osh-libvirt
++ cat /proc/meminfo
++ grep HugePages_Total
++ tr -cd '[:digit:]'
+ hp_count=0
+ '[' 00 -gt 0 ']'
+ '[' -n 457eb676-33da-42ec-9a8c-9293d545c337 ']'
+ cgexec -g cpu,hugetlb,memory,rdma,misc,pids:/osh-libvirt systemd-run --scope --slice=system libvirtd --listen
++ mktemp --suffix .xml
+ tmpsecret=/tmp/tmp.vRX1ugbZ96.xml
+ '[' -n '' ']'
+ trap cleanup EXIT
+ TIMEOUT=60
+ [[ ! -f /var/run/libvirtd.pid ]]
+ [[ 60 -gt 0 ]]
+ let TIMEOUT-=1
+ sleep 1
Running scope as unit: run-raf0d86d0c0b2471cb4251f4d625c9b36.scope
+ [[ ! -f /var/run/libvirtd.pid ]]
+ TIMEOUT=10
+ [[ ! -e /var/run/libvirt/libvirt-sock ]]
+ '[' -z '' ']'
+ '[' -n cinder ']'
++ awk '/key/{print $3}' /etc/ceph/ceph.client.cinder.keyring
+ CEPH_CINDER_KEYRING=AQCff8hqaPCSHhAA8m5wuaZjYDfkF9Cr/PX8xQ==
+ '[' -n cinder ']'
+ create_virsh_libvirt_secret cinder 457eb676-33da-42ec-9a8c-9293d545c337 AQCff8hqaPCSHhAA8m5wuaZjYDfkF9Cr/PX8xQ==
+ sec_user=cinder
+ sec_uuid=457eb676-33da-42ec-9a8c-9293d545c337
+ sec_ceph_keyring=AQCff8hqaPCSHhAA8m5wuaZjYDfkF9Cr/PX8xQ==
+ cat
+ virsh secret-define --file /tmp/tmp.vRX1ugbZ96.xml
Secret 457eb676-33da-42ec-9a8c-9293d545c337 created

+ virsh secret-set-value --secret 457eb676-33da-42ec-9a8c-9293d545c337 --base64 AQCff8hqaPCSHhAA8m5wuaZjYDfkF9Cr/PX8xQ==
error: Passing secret value as command-line argument is insecure!
Secret value set

+ '[' -n '' ']'
+ cleanup
+ rm -f /tmp/tmp.vRX1ugbZ96.xml
+ '[' -n '' ']'
++ cat /var/run/libvirtd.pid
+ LIBVIRTD_PID=165791
+ kill 165791
+ tail --pid=165791 -f /dev/null
+ cgexec -g cpu,hugetlb,memory,rdma,misc,pids:/osh-libvirt systemd-run --scope --slice=system libvirtd --listen
Running scope as unit: run-rfb6eeeefdea74da9842e3984006f37c6.scope