+ wait_for_file /etc/pki/CA/cacert.pem
+ local file=/etc/pki/CA/cacert.pem
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ sleep 1
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ sleep 1
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ sleep 1
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ sleep 1
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ sleep 1
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ wait_for_file /etc/pki/qemu/ca-cert.pem
+ local file=/etc/pki/qemu/ca-cert.pem
+ '[' '!' -f /etc/pki/qemu/ca-cert.pem ']'
+ wait_for_file /etc/pki/libvirt/servercert.pem
+ local file=/etc/pki/libvirt/servercert.pem
+ '[' '!' -f /etc/pki/libvirt/servercert.pem ']'
+ wait_for_file /etc/pki/libvirt/clientcert.pem
+ local file=/etc/pki/libvirt/clientcert.pem
+ '[' '!' -f /etc/pki/libvirt/clientcert.pem ']'
+ wait_for_file /etc/pki/qemu/server-cert.pem
+ local file=/etc/pki/qemu/server-cert.pem
+ '[' '!' -f /etc/pki/qemu/server-cert.pem ']'
+ wait_for_file /etc/pki/qemu/client-cert.pem
+ local file=/etc/pki/qemu/client-cert.pem
+ '[' '!' -f /etc/pki/qemu/client-cert.pem ']'
+ wait_for_file /etc/pki/libvirt/private/serverkey.pem
+ local file=/etc/pki/libvirt/private/serverkey.pem
+ '[' '!' -f /etc/pki/libvirt/private/serverkey.pem ']'
+ wait_for_file /etc/pki/libvirt/private/clientkey.pem
+ local file=/etc/pki/libvirt/private/clientkey.pem
+ '[' '!' -f /etc/pki/libvirt/private/clientkey.pem ']'
+ wait_for_file /etc/pki/qemu/server-key.pem
+ local file=/etc/pki/qemu/server-key.pem
+ '[' '!' -f /etc/pki/qemu/server-key.pem ']'
+ wait_for_file /etc/pki/qemu/client-key.pem
+ local file=/etc/pki/qemu/client-key.pem
+ '[' '!' -f /etc/pki/qemu/client-key.pem ']'
+ wait_for_file /etc/pki/libvirt-vnc/ca-cert.pem
+ local file=/etc/pki/libvirt-vnc/ca-cert.pem
+ '[' '!' -f /etc/pki/libvirt-vnc/ca-cert.pem ']'
+ wait_for_file /etc/pki/libvirt-vnc/server-cert.pem
+ local file=/etc/pki/libvirt-vnc/server-cert.pem
+ '[' '!' -f /etc/pki/libvirt-vnc/server-cert.pem ']'
+ wait_for_file /etc/pki/libvirt-vnc/server-key.pem
+ local file=/etc/pki/libvirt-vnc/server-key.pem
+ '[' '!' -f /etc/pki/libvirt-vnc/server-key.pem ']'
++ grep -w libvirtd
++ cat /proc/1/comm /proc/10/comm /proc/100/comm /proc/100051/comm /proc/100777/comm /proc/102/comm /proc/102788/comm /proc/103/comm /proc/10334/comm /proc/10357/comm /proc/104/comm /proc/105/comm /proc/106/comm /proc/107032/comm /proc/107700/comm /proc/108/comm /proc/10841/comm /proc/10842/comm /proc/109/comm /proc/1092/comm /proc/11/comm /proc/110/comm /proc/111/comm /proc/112/comm /proc/113/comm /proc/113527/comm /proc/113550/comm /proc/113982/comm /proc/113995/comm /proc/113996/comm /proc/114/comm /proc/115/comm /proc/115101/comm /proc/115126/comm /proc/115139/comm /proc/115165/comm /proc/115513/comm /proc/115707/comm /proc/115709/comm /proc/116/comm /proc/116868/comm /proc/117/comm /proc/117152/comm /proc/117175/comm /proc/117318/comm /proc/117335/comm /proc/117341/comm /proc/117423/comm /proc/117424/comm /proc/117434/comm /proc/117611/comm /proc/118711/comm /proc/118880/comm /proc/118919/comm /proc/119066/comm /proc/119095/comm /proc/12/comm /proc/120870/comm /proc/121188/comm /proc/121789/comm /proc/12231/comm /proc/12262/comm /proc/12304/comm /proc/12345/comm /proc/12357/comm /proc/123799/comm /proc/124042/comm /proc/125616/comm /proc/125625/comm /proc/12594/comm /proc/12626/comm /proc/12681/comm /proc/126817/comm /proc/12711/comm /proc/12724/comm /proc/128807/comm /proc/128881/comm /proc/129331/comm /proc/129343/comm /proc/129344/comm /proc/13/comm /proc/130979/comm /proc/14/comm /proc/141806/comm /proc/1425/comm /proc/142635/comm /proc/142660/comm /proc/142675/comm /proc/142704/comm /proc/142949/comm /proc/143419/comm /proc/143800/comm /proc/143831/comm /proc/144038/comm /proc/145548/comm /proc/145572/comm /proc/146126/comm /proc/149529/comm /proc/149663/comm /proc/15/comm /proc/150683/comm /proc/151402/comm /proc/151431/comm /proc/151432/comm /proc/152708/comm /proc/152709/comm /proc/1543/comm /proc/1544/comm /proc/1545/comm /proc/1546/comm /proc/1550/comm /proc/159752/comm /proc/159753/comm /proc/159755/comm /proc/159756/comm /proc/159977/comm /proc/16/comm /proc/160696/comm /proc/160721/comm /proc/161107/comm /proc/161140/comm /proc/161153/comm /proc/161161/comm /proc/161162/comm /proc/161163/comm /proc/161164/comm /proc/1617/comm /proc/1621/comm /proc/162180/comm /proc/162204/comm /proc/162710/comm /proc/162734/comm /proc/162884/comm /proc/1630/comm /proc/163033/comm /proc/163034/comm /proc/163439/comm /proc/163523/comm /proc/163531/comm /proc/163712/comm /proc/163738/comm /proc/163896/comm /proc/163914/comm /proc/163920/comm /proc/163979/comm /proc/163980/comm /proc/163990/comm /proc/164098/comm /proc/165/comm /proc/165799/comm /proc/165832/comm /proc/165960/comm /proc/166/comm /proc/166053/comm /proc/166078/comm /proc/166178/comm /proc/166220/comm /proc/166236/comm /proc/166269/comm /proc/166502/comm /proc/166527/comm /proc/166535/comm /proc/166555/comm /proc/166588/comm /proc/166612/comm /proc/166717/comm /proc/166789/comm /proc/166812/comm /proc/167/comm /proc/168/comm /proc/169/comm /proc/169706/comm /proc/170/comm /proc/170925/comm /proc/170960/comm /proc/171/comm /proc/172/comm /proc/172011/comm /proc/172047/comm /proc/172715/comm /proc/173/comm /proc/174102/comm /proc/175086/comm /proc/175092/comm /proc/177/comm /proc/177366/comm /proc/177400/comm /proc/177401/comm /proc/177530/comm /proc/177543/comm /proc/177544/comm /proc/177655/comm /proc/178111/comm /proc/178118/comm /proc/178236/comm /proc/178355/comm /proc/178371/comm /proc/178401/comm /proc/178496/comm /proc/178497/comm /proc/178567/comm /proc/178569/comm /proc/178903/comm /proc/178904/comm /proc/178930/comm /proc/178933/comm /proc/179/comm /proc/179200/comm /proc/179226/comm /proc/179409/comm /proc/179437/comm /proc/179443/comm /proc/179537/comm /proc/179538/comm /proc/179562/comm /proc/179701/comm /proc/18/comm /proc/180/comm /proc/181019/comm /proc/181052/comm /proc/181099/comm /proc/181126/comm /proc/181131/comm /proc/181156/comm /proc/181191/comm /proc/181207/comm /proc/181214/comm /proc/181258/comm /proc/181579/comm /proc/181662/comm /proc/181683/comm /proc/181716/comm /proc/182/comm /proc/182240/comm /proc/182260/comm /proc/182434/comm /proc/183/comm /proc/185/comm /proc/185119/comm /proc/185133/comm /proc/185188/comm /proc/185201/comm /proc/185202/comm /proc/18591/comm /proc/185936/comm /proc/186/comm /proc/18627/comm /proc/18648/comm /proc/18676/comm /proc/18694/comm /proc/187/comm /proc/187002/comm /proc/187164/comm /proc/187166/comm /proc/187207/comm /proc/188/comm /proc/188712/comm /proc/19/comm /proc/190/comm /proc/190273/comm /proc/190274/comm /proc/190275/comm /proc/190443/comm /proc/190452/comm /proc/190485/comm /proc/190486/comm /proc/190505/comm /proc/190517/comm /proc/190518/comm /proc/190983/comm /proc/190986/comm /proc/190989/comm /proc/191609/comm /proc/191836/comm /proc/192244/comm /proc/192513/comm /proc/193255/comm /proc/193391/comm /proc/193411/comm /proc/193429/comm /proc/193691/comm /proc/193700/comm /proc/194018/comm /proc/194156/comm /proc/194353/comm /proc/194498/comm /proc/194513/comm /proc/194514/comm /proc/194515/comm /proc/194516/comm /proc/194517/comm /proc/194518/comm /proc/194546/comm /proc/194989/comm /proc/195009/comm /proc/195059/comm /proc/195085/comm /proc/195182/comm /proc/195205/comm /proc/195480/comm /proc/195503/comm /proc/195520/comm /proc/195526/comm /proc/195600/comm /proc/195638/comm /proc/195676/comm /proc/195701/comm /proc/195702/comm /proc/195703/comm /proc/2/comm /proc/20/comm /proc/202/comm /proc/203/comm /proc/206/comm /proc/207/comm /proc/21/comm /proc/215/comm /proc/21583/comm /proc/21651/comm /proc/21652/comm /proc/21665/comm /proc/219/comm /proc/22/comm /proc/220/comm /proc/225/comm /proc/24/comm /proc/247/comm /proc/24911/comm /proc/25/comm /proc/25188/comm /proc/25205/comm /proc/25231/comm /proc/25243/comm /proc/26/comm /proc/26007/comm /proc/266/comm /proc/27/comm /proc/28/comm /proc/290/comm /proc/292/comm /proc/29598/comm /proc/29862/comm /proc/29880/comm /proc/29906/comm /proc/29918/comm /proc/3/comm /proc/30/comm /proc/31/comm /proc/311/comm /proc/312/comm /proc/316/comm /proc/317/comm /proc/318/comm /proc/319/comm /proc/32/comm /proc/320/comm /proc/321/comm /proc/322/comm /proc/323/comm /proc/325/comm /proc/326/comm /proc/327/comm /proc/33/comm /proc/34/comm /proc/34222/comm /proc/34498/comm /proc/34516/comm /proc/34541/comm /proc/34553/comm /proc/35350/comm /proc/36/comm /proc/366/comm /proc/37/comm /proc/38/comm /proc/39/comm /proc/39102/comm /proc/39104/comm /proc/39209/comm /proc/39252/comm /proc/39278/comm /proc/39304/comm /proc/39329/comm /proc/397/comm /proc/4/comm /proc/40/comm /proc/401/comm /proc/41801/comm /proc/41821/comm /proc/41856/comm /proc/41857/comm /proc/41875/comm /proc/41904/comm /proc/41914/comm /proc/41948/comm /proc/41969/comm /proc/41971/comm /proc/42/comm /proc/42043/comm /proc/42064/comm /proc/42081/comm /proc/42108/comm /proc/42209/comm /proc/42263/comm /proc/42411/comm /proc/42435/comm /proc/42461/comm /proc/43/comm /proc/43145/comm /proc/43168/comm /proc/43197/comm /proc/43223/comm /proc/43458/comm /proc/43668/comm /proc/44/comm /proc/44046/comm /proc/44513/comm /proc/44538/comm /proc/44564/comm /proc/44904/comm /proc/44928/comm /proc/44950/comm /proc/44973/comm /proc/44992/comm /proc/45/comm /proc/45037/comm /proc/45369/comm /proc/45394/comm /proc/45617/comm /proc/458/comm /proc/45857/comm /proc/45885/comm /proc/45907/comm /proc/45944/comm /proc/45946/comm /proc/45974/comm /proc/46/comm /proc/46083/comm /proc/46131/comm /proc/46174/comm /proc/48/comm /proc/48030/comm /proc/48062/comm /proc/48142/comm /proc/48166/comm /proc/48639/comm /proc/48652/comm /proc/48686/comm /proc/48736/comm /proc/49/comm /proc/49064/comm /proc/49088/comm /proc/49105/comm /proc/49131/comm /proc/49202/comm /proc/49330/comm /proc/49496/comm /proc/49519/comm /proc/49644/comm /proc/49856/comm /proc/49881/comm /proc/5/comm /proc/50/comm /proc/50144/comm /proc/50168/comm /proc/50329/comm /proc/50398/comm /proc/50497/comm /proc/50548/comm /proc/50616/comm /proc/50688/comm /proc/51/comm /proc/51938/comm /proc/52/comm /proc/522/comm /proc/52775/comm /proc/52798/comm /proc/52926/comm /proc/52950/comm /proc/53014/comm /proc/53134/comm /proc/53350/comm /proc/53432/comm /proc/54/comm /proc/55/comm /proc/56/comm /proc/57/comm /proc/57477/comm /proc/57709/comm /proc/57733/comm /proc/58/comm /proc/58384/comm /proc/58455/comm /proc/58481/comm /proc/58512/comm /proc/58518/comm /proc/58540/comm /proc/58666/comm /proc/58689/comm /proc/58742/comm /proc/58782/comm /proc/58824/comm /proc/58933/comm /proc/6/comm /proc/60/comm /proc/60989/comm /proc/61/comm /proc/614/comm /proc/618/comm /proc/62/comm /proc/620/comm /proc/623/comm /proc/626/comm /proc/63/comm /proc/63216/comm /proc/63448/comm /proc/63520/comm /proc/63602/comm /proc/63652/comm /proc/63681/comm /proc/63707/comm /proc/63730/comm /proc/63745/comm /proc/63769/comm /proc/63868/comm /proc/64/comm /proc/64019/comm /proc/64276/comm /proc/64302/comm /proc/64347/comm /proc/644/comm /proc/64433/comm /proc/64434/comm /proc/64444/comm /proc/64445/comm /proc/645/comm /proc/64920/comm /proc/65287/comm /proc/65338/comm /proc/65365/comm /proc/65391/comm /proc/65418/comm /proc/65429/comm /proc/65453/comm /proc/65656/comm /proc/65684/comm /proc/65872/comm /proc/65874/comm /proc/65898/comm /proc/65921/comm /proc/66/comm /proc/66052/comm /proc/66076/comm /proc/66095/comm /proc/66700/comm /proc/66723/comm /proc/66799/comm /proc/66820/comm /proc/66821/comm /proc/66822/comm /proc/66823/comm /proc/66824/comm /proc/66836/comm /proc/66859/comm /proc/67/comm /proc/67088/comm /proc/67158/comm /proc/67538/comm /proc/67567/comm /proc/68/comm /proc/68054/comm /proc/68090/comm /proc/68247/comm /proc/68270/comm /proc/68393/comm /proc/68441/comm /proc/68570/comm /proc/68601/comm /proc/68681/comm /proc/68749/comm /proc/68883/comm /proc/69/comm /proc/69176/comm /proc/69285/comm /proc/69564/comm /proc/69619/comm /proc/69657/comm /proc/69658/comm /proc/69696/comm /proc/69723/comm /proc/69783/comm /proc/70/comm /proc/70062/comm /proc/701/comm /proc/70280/comm /proc/70298/comm /proc/70304/comm /proc/704/comm /proc/70434/comm /proc/70435/comm /proc/70445/comm /proc/705/comm /proc/70543/comm /proc/718/comm /proc/72/comm /proc/72048/comm /proc/72072/comm /proc/73/comm /proc/74/comm /proc/75/comm /proc/75544/comm /proc/75577/comm /proc/75578/comm /proc/75579/comm /proc/75580/comm /proc/75583/comm /proc/75585/comm /proc/75586/comm /proc/75587/comm /proc/75591/comm /proc/75592/comm /proc/75593/comm /proc/75594/comm /proc/75595/comm /proc/75598/comm /proc/76/comm /proc/76043/comm /proc/78/comm /proc/79/comm /proc/8/comm /proc/80/comm /proc/81/comm /proc/81111/comm /proc/81409/comm /proc/81434/comm /proc/81593/comm /proc/81609/comm /proc/81615/comm /proc/81662/comm /proc/81663/comm /proc/81673/comm /proc/81826/comm /proc/82/comm /proc/82944/comm /proc/82969/comm /proc/84/comm /proc/85/comm /proc/86/comm /proc/863/comm /proc/87/comm /proc/88/comm /proc/88008/comm /proc/88476/comm /proc/88491/comm /proc/89233/comm /proc/89258/comm /proc/89877/comm /proc/9/comm /proc/90/comm /proc/90138/comm /proc/91/comm /proc/92/comm /proc/9229/comm /proc/9246/comm /proc/9262/comm /proc/93/comm /proc/93080/comm /proc/93082/comm /proc/93091/comm /proc/9344/comm /proc/94/comm /proc/96/comm /proc/96546/comm /proc/96569/comm /proc/96711/comm /proc/96810/comm /proc/96828/comm /proc/96851/comm /proc/97/comm /proc/97016/comm /proc/97017/comm /proc/97028/comm /proc/97215/comm /proc/98/comm /proc/99/comm /proc/99407/comm /proc/99432/comm /proc/99512/comm /proc/99541/comm /proc/9963/comm /proc/99943/comm /proc/self/comm /proc/thread-self/comm
+ '[' -n '' ']'
+ rm -f /var/run/libvirtd.pid
+ [[ -c /dev/kvm ]]
+ chmod 660 /dev/kvm
+ chown root:kvm /dev/kvm
+ CGROUPS=
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/blkio ']'
+ grep -w blkio /sys/fs/cgroup/cgroup.controllers
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/cpu ']'
+ grep -w cpu /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=cpu,
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/devices ']'
+ grep -w devices /sys/fs/cgroup/cgroup.controllers
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/freezer ']'
+ grep -w freezer /sys/fs/cgroup/cgroup.controllers
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/hugetlb ']'
+ grep -w hugetlb /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=hugetlb,
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/memory ']'
+ grep -w memory /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=memory,
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/net_cls ']'
+ grep -w net_cls /sys/fs/cgroup/cgroup.controllers
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/perf_event ']'
+ grep -w perf_event /sys/fs/cgroup/cgroup.controllers
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/rdma ']'
+ grep -w rdma /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=rdma,
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/misc ']'
+ grep -w misc /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=misc,
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/pids ']'
+ grep -w pids /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=pids,
+ cgcreate -g cpu,hugetlb,memory,rdma,misc,pids:/osh-libvirt
++ cat /proc/meminfo
++ grep HugePages_Total
++ tr -cd '[:digit:]'
+ hp_count=0
+ '[' 00 -gt 0 ']'
+ '[' -n 457eb676-33da-42ec-9a8c-9293d545c337 ']'
+ cgexec -g cpu,hugetlb,memory,rdma,misc,pids:/osh-libvirt systemd-run --scope --slice=system libvirtd --listen
++ mktemp --suffix .xml
+ tmpsecret=/tmp/tmp.yGM6xU9wZl.xml
+ '[' -n '' ']'
+ trap cleanup EXIT
+ TIMEOUT=60
+ [[ ! -f /var/run/libvirtd.pid ]]
+ [[ 60 -gt 0 ]]
+ let TIMEOUT-=1
+ sleep 1
Running as unit: run-rb658eed099664b0996b52a5a8ba656bd.scope; invocation ID: 9c66e1fbfcc140e8b7f0016346c9c613
+ [[ ! -f /var/run/libvirtd.pid ]]
+ TIMEOUT=10
+ [[ ! -e /var/run/libvirt/libvirt-sock ]]
+ '[' -z '' ']'
+ '[' -n cinder ']'
++ awk '/key/{print $3}' /etc/ceph/ceph.client.cinder.keyring
+ CEPH_CINDER_KEYRING=AQDQVNNqTAE0DxAAMyBIFXGeRoH56jFa3lqYTA==
+ '[' -n cinder ']'
+ create_virsh_libvirt_secret cinder 457eb676-33da-42ec-9a8c-9293d545c337 AQDQVNNqTAE0DxAAMyBIFXGeRoH56jFa3lqYTA==
+ sec_user=cinder
+ sec_uuid=457eb676-33da-42ec-9a8c-9293d545c337
+ sec_ceph_keyring=AQDQVNNqTAE0DxAAMyBIFXGeRoH56jFa3lqYTA==
+ cat
+ virsh secret-define --file /tmp/tmp.yGM6xU9wZl.xml
Secret 457eb676-33da-42ec-9a8c-9293d545c337 created

+ virsh secret-set-value --secret 457eb676-33da-42ec-9a8c-9293d545c337 --base64 AQDQVNNqTAE0DxAAMyBIFXGeRoH56jFa3lqYTA==
error: Passing secret value as command-line argument is insecure!
Secret value set

+ '[' -n '' ']'
+ '[' -n '' ']'
+ cleanup
+ rm -f /tmp/tmp.yGM6xU9wZl.xml
+ '[' -n '' ']'
++ cat /var/run/libvirtd.pid
+ LIBVIRTD_PID=195723
+ kill 195723
+ tail --pid=195723 -f /dev/null
+ cgexec -g cpu,hugetlb,memory,rdma,misc,pids:/osh-libvirt systemd-run --scope --slice=system libvirtd --listen
Running as unit: run-rd1a72cb92cfa44f29832a0eb22e3de5c.scope; invocation ID: 21dc1e6d74224bda8a641302af721736