+ wait_for_file /etc/pki/CA/cacert.pem
+ local file=/etc/pki/CA/cacert.pem
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ sleep 1
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ sleep 1
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ sleep 1
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ sleep 1
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ sleep 1
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ wait_for_file /etc/pki/qemu/ca-cert.pem
+ local file=/etc/pki/qemu/ca-cert.pem
+ '[' '!' -f /etc/pki/qemu/ca-cert.pem ']'
+ wait_for_file /etc/pki/libvirt/servercert.pem
+ local file=/etc/pki/libvirt/servercert.pem
+ '[' '!' -f /etc/pki/libvirt/servercert.pem ']'
+ wait_for_file /etc/pki/libvirt/clientcert.pem
+ local file=/etc/pki/libvirt/clientcert.pem
+ '[' '!' -f /etc/pki/libvirt/clientcert.pem ']'
+ wait_for_file /etc/pki/qemu/server-cert.pem
+ local file=/etc/pki/qemu/server-cert.pem
+ '[' '!' -f /etc/pki/qemu/server-cert.pem ']'
+ wait_for_file /etc/pki/qemu/client-cert.pem
+ local file=/etc/pki/qemu/client-cert.pem
+ '[' '!' -f /etc/pki/qemu/client-cert.pem ']'
+ wait_for_file /etc/pki/libvirt/private/serverkey.pem
+ local file=/etc/pki/libvirt/private/serverkey.pem
+ '[' '!' -f /etc/pki/libvirt/private/serverkey.pem ']'
+ wait_for_file /etc/pki/libvirt/private/clientkey.pem
+ local file=/etc/pki/libvirt/private/clientkey.pem
+ '[' '!' -f /etc/pki/libvirt/private/clientkey.pem ']'
+ wait_for_file /etc/pki/qemu/server-key.pem
+ local file=/etc/pki/qemu/server-key.pem
+ '[' '!' -f /etc/pki/qemu/server-key.pem ']'
+ wait_for_file /etc/pki/qemu/client-key.pem
+ local file=/etc/pki/qemu/client-key.pem
+ '[' '!' -f /etc/pki/qemu/client-key.pem ']'
+ wait_for_file /etc/pki/libvirt-vnc/ca-cert.pem
+ local file=/etc/pki/libvirt-vnc/ca-cert.pem
+ '[' '!' -f /etc/pki/libvirt-vnc/ca-cert.pem ']'
+ wait_for_file /etc/pki/libvirt-vnc/server-cert.pem
+ local file=/etc/pki/libvirt-vnc/server-cert.pem
+ '[' '!' -f /etc/pki/libvirt-vnc/server-cert.pem ']'
+ wait_for_file /etc/pki/libvirt-vnc/server-key.pem
+ local file=/etc/pki/libvirt-vnc/server-key.pem
+ '[' '!' -f /etc/pki/libvirt-vnc/server-key.pem ']'
++ grep -w libvirtd
++ cat /proc/1/comm /proc/10/comm /proc/100/comm /proc/100745/comm /proc/100861/comm /proc/10158/comm /proc/101730/comm /proc/101828/comm /proc/102/comm /proc/102745/comm /proc/103/comm /proc/103385/comm /proc/104/comm /proc/104340/comm /proc/104687/comm /proc/104699/comm /proc/104700/comm /proc/105/comm /proc/105234/comm /proc/106/comm /proc/10672/comm /proc/10673/comm /proc/107471/comm /proc/107494/comm /proc/107509/comm /proc/107538/comm /proc/107985/comm /proc/108/comm /proc/108281/comm /proc/108437/comm /proc/108927/comm /proc/109/comm /proc/109574/comm /proc/109597/comm /proc/109930/comm /proc/11/comm /proc/110/comm /proc/110825/comm /proc/111/comm /proc/112/comm /proc/112172/comm /proc/112202/comm /proc/112866/comm /proc/113/comm /proc/113360/comm /proc/113386/comm /proc/113387/comm /proc/114/comm /proc/114343/comm /proc/114571/comm /proc/114572/comm /proc/115/comm /proc/116/comm /proc/117/comm /proc/1184/comm /proc/12/comm /proc/12105/comm /proc/12138/comm /proc/121417/comm /proc/121418/comm /proc/121421/comm /proc/121423/comm /proc/121562/comm /proc/12175/comm /proc/122093/comm /proc/122118/comm /proc/12216/comm /proc/12230/comm /proc/122416/comm /proc/122442/comm /proc/122477/comm /proc/122490/comm /proc/122522/comm /proc/122523/comm /proc/122524/comm /proc/122526/comm /proc/123015/comm /proc/123041/comm /proc/123283/comm /proc/123284/comm /proc/123286/comm /proc/123824/comm /proc/123845/comm /proc/123851/comm /proc/123852/comm /proc/124062/comm /proc/124085/comm /proc/124105/comm /proc/124134/comm /proc/124391/comm /proc/124396/comm /proc/124432/comm /proc/124461/comm /proc/124497/comm /proc/124510/comm /proc/12468/comm /proc/124710/comm /proc/124736/comm /proc/124804/comm /proc/124829/comm /proc/124917/comm /proc/124973/comm /proc/12498/comm /proc/12504/comm /proc/125185/comm /proc/125190/comm /proc/12555/comm /proc/125588/comm /proc/125589/comm /proc/125753/comm /proc/125776/comm /proc/12580/comm /proc/125883/comm /proc/125899/comm /proc/125905/comm /proc/12600/comm /proc/126076/comm /proc/126147/comm /proc/126148/comm /proc/126221/comm /proc/127463/comm /proc/127572/comm /proc/127660/comm /proc/127773/comm /proc/127801/comm /proc/127831/comm /proc/127859/comm /proc/127926/comm /proc/127951/comm /proc/127966/comm /proc/127997/comm /proc/128003/comm /proc/128033/comm /proc/128059/comm /proc/128433/comm /proc/128457/comm /proc/128864/comm /proc/1289/comm /proc/1290/comm /proc/1291/comm /proc/1292/comm /proc/13/comm /proc/132150/comm /proc/132152/comm /proc/132530/comm /proc/132907/comm /proc/1373/comm /proc/1377/comm /proc/14/comm /proc/143629/comm /proc/1442/comm /proc/1446/comm /proc/145324/comm /proc/1455/comm /proc/149272/comm /proc/149338/comm /proc/149787/comm /proc/149821/comm /proc/149822/comm /proc/149885/comm /proc/149935/comm /proc/149936/comm /proc/15/comm /proc/150566/comm /proc/150605/comm /proc/150694/comm /proc/151081/comm /proc/151090/comm /proc/151100/comm /proc/151219/comm /proc/151220/comm /proc/151310/comm /proc/151311/comm /proc/151405/comm /proc/151549/comm /proc/151573/comm /proc/151740/comm /proc/151757/comm /proc/151763/comm /proc/151820/comm /proc/151872/comm /proc/151873/comm /proc/151978/comm /proc/152973/comm /proc/152994/comm /proc/153006/comm /proc/153063/comm /proc/153070/comm /proc/153261/comm /proc/153284/comm /proc/153698/comm /proc/153732/comm /proc/153775/comm /proc/155894/comm /proc/156452/comm /proc/156564/comm /proc/158371/comm /proc/158400/comm /proc/158512/comm /proc/158531/comm /proc/159823/comm /proc/159915/comm /proc/159938/comm /proc/16/comm /proc/160045/comm /proc/160046/comm /proc/160047/comm /proc/160424/comm /proc/160488/comm /proc/160508/comm /proc/160509/comm /proc/160571/comm /proc/160646/comm /proc/160681/comm /proc/160755/comm /proc/160778/comm /proc/160857/comm /proc/160868/comm /proc/161074/comm /proc/161075/comm /proc/161077/comm /proc/161078/comm /proc/161079/comm /proc/161080/comm /proc/161081/comm /proc/161764/comm /proc/161766/comm /proc/161849/comm /proc/161872/comm /proc/162030/comm /proc/162046/comm /proc/162052/comm /proc/162172/comm /proc/162223/comm /proc/162224/comm /proc/162451/comm /proc/163152/comm /proc/163167/comm /proc/163168/comm /proc/163169/comm /proc/163170/comm /proc/163171/comm /proc/163172/comm /proc/163241/comm /proc/163562/comm /proc/163598/comm /proc/163637/comm /proc/163661/comm /proc/163693/comm /proc/163711/comm /proc/163738/comm /proc/163769/comm /proc/163796/comm /proc/163815/comm /proc/163840/comm /proc/163894/comm /proc/164424/comm /proc/164430/comm /proc/164829/comm /proc/165012/comm /proc/165169/comm /proc/165170/comm /proc/165238/comm /proc/165313/comm /proc/165319/comm /proc/165330/comm /proc/165549/comm /proc/165730/comm /proc/165777/comm /proc/165802/comm /proc/165897/comm /proc/165957/comm /proc/165958/comm /proc/165968/comm /proc/166/comm /proc/166069/comm /proc/166096/comm /proc/166103/comm /proc/166126/comm /proc/166129/comm /proc/166130/comm /proc/166131/comm /proc/167/comm /proc/168/comm /proc/169/comm /proc/170/comm /proc/171/comm /proc/172/comm /proc/173/comm /proc/174/comm /proc/176/comm /proc/178/comm /proc/179/comm /proc/18/comm /proc/181/comm /proc/183/comm /proc/184/comm /proc/186/comm /proc/187/comm /proc/188/comm /proc/189/comm /proc/19/comm /proc/191/comm /proc/192/comm /proc/19297/comm /proc/193/comm /proc/19317/comm /proc/19340/comm /proc/19369/comm /proc/19383/comm /proc/194/comm /proc/195/comm /proc/198/comm /proc/2/comm /proc/20/comm /proc/201/comm /proc/21/comm /proc/21198/comm /proc/21201/comm /proc/21202/comm /proc/21215/comm /proc/217/comm /proc/22/comm /proc/220/comm /proc/221/comm /proc/226/comm /proc/24/comm /proc/24226/comm /proc/24503/comm /proc/24520/comm /proc/24545/comm /proc/24558/comm /proc/248/comm /proc/25/comm /proc/26/comm /proc/265/comm /proc/27/comm /proc/28/comm /proc/285/comm /proc/288/comm /proc/28851/comm /proc/289/comm /proc/290/comm /proc/29114/comm /proc/29132/comm /proc/29155/comm /proc/29168/comm /proc/3/comm /proc/30/comm /proc/31/comm /proc/310/comm /proc/311/comm /proc/315/comm /proc/32/comm /proc/33/comm /proc/33515/comm /proc/33793/comm /proc/33812/comm /proc/33836/comm /proc/33848/comm /proc/34/comm /proc/342/comm /proc/35423/comm /proc/35425/comm /proc/356/comm /proc/36/comm /proc/360/comm /proc/363/comm /proc/37/comm /proc/376/comm /proc/38/comm /proc/386/comm /proc/387/comm /proc/39/comm /proc/393/comm /proc/39461/comm /proc/39489/comm /proc/39506/comm /proc/39531/comm /proc/39532/comm /proc/39534/comm /proc/39589/comm /proc/396/comm /proc/39614/comm /proc/39628/comm /proc/39631/comm /proc/39700/comm /proc/39719/comm /proc/39743/comm /proc/39757/comm /proc/39860/comm /proc/39926/comm /proc/4/comm /proc/40/comm /proc/40086/comm /proc/40109/comm /proc/40134/comm /proc/40787/comm /proc/40812/comm /proc/40824/comm /proc/40849/comm /proc/41127/comm /proc/41291/comm /proc/41714/comm /proc/42/comm /proc/42171/comm /proc/42196/comm /proc/42241/comm /proc/42546/comm /proc/42573/comm /proc/42607/comm /proc/42610/comm /proc/42638/comm /proc/42688/comm /proc/43/comm /proc/43045/comm /proc/43070/comm /proc/43293/comm /proc/43560/comm /proc/43592/comm /proc/43598/comm /proc/43622/comm /proc/43638/comm /proc/43663/comm /proc/43783/comm /proc/43829/comm /proc/43875/comm /proc/44/comm /proc/44036/comm /proc/45/comm /proc/454/comm /proc/455/comm /proc/45653/comm /proc/45678/comm /proc/45709/comm /proc/45732/comm /proc/45951/comm /proc/45980/comm /proc/46/comm /proc/46045/comm /proc/46109/comm /proc/46423/comm /proc/46446/comm /proc/46529/comm /proc/46553/comm /proc/46613/comm /proc/46667/comm /proc/46924/comm /proc/46947/comm /proc/47070/comm /proc/47457/comm /proc/47488/comm /proc/47798/comm /proc/47822/comm /proc/47951/comm /proc/48/comm /proc/48012/comm /proc/48110/comm /proc/48139/comm /proc/48178/comm /proc/48253/comm /proc/49/comm /proc/49173/comm /proc/49664/comm /proc/49688/comm /proc/49799/comm /proc/5/comm /proc/50/comm /proc/51/comm /proc/52/comm /proc/520/comm /proc/53213/comm /proc/53237/comm /proc/53755/comm /proc/53794/comm /proc/53828/comm /proc/53851/comm /proc/53867/comm /proc/53890/comm /proc/54/comm /proc/54037/comm /proc/54058/comm /proc/54099/comm /proc/54137/comm /proc/54179/comm /proc/54291/comm /proc/55/comm /proc/56/comm /proc/56482/comm /proc/56483/comm /proc/56484/comm /proc/56485/comm /proc/56486/comm /proc/56581/comm /proc/56643/comm /proc/56706/comm /proc/56808/comm /proc/56831/comm /proc/56849/comm /proc/56879/comm /proc/56893/comm /proc/56920/comm /proc/57/comm /proc/57130/comm /proc/57143/comm /proc/57271/comm /proc/57705/comm /proc/57757/comm /proc/57983/comm /proc/58/comm /proc/58015/comm /proc/58016/comm /proc/58052/comm /proc/58053/comm /proc/58219/comm /proc/58246/comm /proc/58267/comm /proc/58292/comm /proc/58516/comm /proc/58553/comm /proc/58583/comm /proc/58608/comm /proc/58622/comm /proc/58648/comm /proc/58983/comm /proc/59007/comm /proc/59074/comm /proc/59368/comm /proc/59447/comm /proc/59472/comm /proc/59569/comm /proc/59589/comm /proc/59590/comm /proc/59591/comm /proc/59592/comm /proc/59593/comm /proc/59661/comm /proc/59683/comm /proc/59855/comm /proc/59877/comm /proc/6/comm /proc/60/comm /proc/60036/comm /proc/60193/comm /proc/60503/comm /proc/60529/comm /proc/60647/comm /proc/60685/comm /proc/60718/comm /proc/60752/comm /proc/60793/comm /proc/60813/comm /proc/60964/comm /proc/61/comm /proc/61021/comm /proc/61070/comm /proc/612/comm /proc/61346/comm /proc/61463/comm /proc/615/comm /proc/61559/comm /proc/61628/comm /proc/61653/comm /proc/61676/comm /proc/61696/comm /proc/61733/comm /proc/61781/comm /proc/61799/comm /proc/618/comm /proc/62/comm /proc/62029/comm /proc/62046/comm /proc/62052/comm /proc/62133/comm /proc/62184/comm /proc/62185/comm /proc/62239/comm /proc/624/comm /proc/625/comm /proc/63/comm /proc/63267/comm /proc/63292/comm /proc/634/comm /proc/64/comm /proc/646/comm /proc/65634/comm /proc/65649/comm /proc/65650/comm /proc/65651/comm /proc/65652/comm /proc/65654/comm /proc/65655/comm /proc/65658/comm /proc/65659/comm /proc/65661/comm /proc/65663/comm /proc/65664/comm /proc/65665/comm /proc/65667/comm /proc/65668/comm /proc/66/comm /proc/67/comm /proc/68/comm /proc/69/comm /proc/69575/comm /proc/69598/comm /proc/69682/comm /proc/69747/comm /proc/69753/comm /proc/698/comm /proc/69830/comm /proc/69924/comm /proc/69925/comm /proc/69980/comm /proc/70/comm /proc/701/comm /proc/702/comm /proc/70644/comm /proc/70668/comm /proc/70826/comm /proc/70827/comm /proc/715/comm /proc/71517/comm /proc/71681/comm /proc/72/comm /proc/72760/comm /proc/73/comm /proc/73373/comm /proc/74/comm /proc/74322/comm /proc/74381/comm /proc/74941/comm /proc/74965/comm /proc/75/comm /proc/75520/comm /proc/76/comm /proc/77743/comm /proc/78/comm /proc/79/comm /proc/79255/comm /proc/79280/comm /proc/79419/comm /proc/79503/comm /proc/79509/comm /proc/79694/comm /proc/79745/comm /proc/79746/comm /proc/79976/comm /proc/8/comm /proc/80/comm /proc/81/comm /proc/82/comm /proc/83226/comm /proc/83227/comm /proc/83228/comm /proc/83435/comm /proc/84/comm /proc/84601/comm /proc/85/comm /proc/85109/comm /proc/85131/comm /proc/85147/comm /proc/85170/comm /proc/85273/comm /proc/85581/comm /proc/85796/comm /proc/86/comm /proc/860/comm /proc/86462/comm /proc/86973/comm /proc/87/comm /proc/88/comm /proc/89657/comm /proc/90/comm /proc/9052/comm /proc/9069/comm /proc/9085/comm /proc/91/comm /proc/91162/comm /proc/9167/comm /proc/92/comm /proc/92299/comm /proc/92939/comm /proc/92963/comm /proc/93/comm /proc/93303/comm /proc/93316/comm /proc/93317/comm /proc/94/comm /proc/94097/comm /proc/94123/comm /proc/94192/comm /proc/94222/comm /proc/94521/comm /proc/94718/comm /proc/94720/comm /proc/94722/comm /proc/95602/comm /proc/95827/comm /proc/95851/comm /proc/95960/comm /proc/95977/comm /proc/95983/comm /proc/96/comm /proc/96042/comm /proc/96142/comm /proc/96143/comm /proc/96216/comm /proc/97/comm /proc/97202/comm /proc/97225/comm /proc/97251/comm /proc/97282/comm /proc/9783/comm /proc/98/comm /proc/98806/comm /proc/99/comm /proc/self/comm /proc/thread-self/comm
+ '[' -n '' ']'
+ rm -f /var/run/libvirtd.pid
+ [[ -c /dev/kvm ]]
+ chmod 660 /dev/kvm
+ chown root:kvm /dev/kvm
+ CGROUPS=
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/blkio ']'
+ grep -w blkio /sys/fs/cgroup/cgroup.controllers
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/cpu ']'
+ grep -w cpu /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=cpu,
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/devices ']'
+ grep -w devices /sys/fs/cgroup/cgroup.controllers
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/freezer ']'
+ grep -w freezer /sys/fs/cgroup/cgroup.controllers
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/hugetlb ']'
+ grep -w hugetlb /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=hugetlb,
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/memory ']'
+ grep -w memory /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=memory,
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/net_cls ']'
+ grep -w net_cls /sys/fs/cgroup/cgroup.controllers
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/perf_event ']'
+ grep -w perf_event /sys/fs/cgroup/cgroup.controllers
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/rdma ']'
+ grep -w rdma /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=rdma,
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/misc ']'
+ grep -w misc /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=misc,
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/pids ']'
+ grep -w pids /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=pids,
+ cgcreate -g cpu,hugetlb,memory,rdma,misc,pids:/osh-libvirt
++ cat /proc/meminfo
++ grep HugePages_Total
++ tr -cd '[:digit:]'
+ hp_count=0
+ '[' 00 -gt 0 ']'
+ '[' -n 457eb676-33da-42ec-9a8c-9293d545c337 ']'
+ cgexec -g cpu,hugetlb,memory,rdma,misc,pids:/osh-libvirt systemd-run --scope --slice=system libvirtd --listen
++ mktemp --suffix .xml
+ tmpsecret=/tmp/tmp.8c3KGF3TP2.xml
+ '[' -n '' ']'
+ trap cleanup EXIT
+ TIMEOUT=60
+ [[ ! -f /var/run/libvirtd.pid ]]
+ [[ 60 -gt 0 ]]
+ let TIMEOUT-=1
+ sleep 1
Running scope as unit: run-r7a948592a2a94189b1ec0786ac958fe4.scope
+ [[ ! -f /var/run/libvirtd.pid ]]
+ TIMEOUT=10
+ [[ ! -e /var/run/libvirt/libvirt-sock ]]
+ '[' -z '' ']'
+ '[' -n cinder ']'
++ awk '/key/{print $3}' /etc/ceph/ceph.client.cinder.keyring
+ CEPH_CINDER_KEYRING=AQBlLgFqIbcWBxAAkj2ZsS7Cxx1fsIys+e4qVg==
+ '[' -n cinder ']'
+ create_virsh_libvirt_secret cinder 457eb676-33da-42ec-9a8c-9293d545c337 AQBlLgFqIbcWBxAAkj2ZsS7Cxx1fsIys+e4qVg==
+ sec_user=cinder
+ sec_uuid=457eb676-33da-42ec-9a8c-9293d545c337
+ sec_ceph_keyring=AQBlLgFqIbcWBxAAkj2ZsS7Cxx1fsIys+e4qVg==
+ cat
+ virsh secret-define --file /tmp/tmp.8c3KGF3TP2.xml
Secret 457eb676-33da-42ec-9a8c-9293d545c337 created

+ virsh secret-set-value --secret 457eb676-33da-42ec-9a8c-9293d545c337 --base64 AQBlLgFqIbcWBxAAkj2ZsS7Cxx1fsIys+e4qVg==
error: Passing secret value as command-line argument is insecure!
Secret value set

+ '[' -n '' ']'
+ cleanup
+ rm -f /tmp/tmp.8c3KGF3TP2.xml
+ '[' -n '' ']'
++ cat /var/run/libvirtd.pid
+ LIBVIRTD_PID=166151
+ kill 166151
+ tail --pid=166151 -f /dev/null
+ cgexec -g cpu,hugetlb,memory,rdma,misc,pids:/osh-libvirt systemd-run --scope --slice=system libvirtd --listen
Running scope as unit: run-r3a3342e8653744b496dd47f749504427.scope