+ wait_for_file /etc/pki/CA/cacert.pem
+ local file=/etc/pki/CA/cacert.pem
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ sleep 1
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ sleep 1
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ sleep 1
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ sleep 1
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ sleep 1
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ sleep 1
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ wait_for_file /etc/pki/qemu/ca-cert.pem
+ local file=/etc/pki/qemu/ca-cert.pem
+ '[' '!' -f /etc/pki/qemu/ca-cert.pem ']'
+ wait_for_file /etc/pki/libvirt/servercert.pem
+ local file=/etc/pki/libvirt/servercert.pem
+ '[' '!' -f /etc/pki/libvirt/servercert.pem ']'
+ wait_for_file /etc/pki/libvirt/clientcert.pem
+ local file=/etc/pki/libvirt/clientcert.pem
+ '[' '!' -f /etc/pki/libvirt/clientcert.pem ']'
+ wait_for_file /etc/pki/qemu/server-cert.pem
+ local file=/etc/pki/qemu/server-cert.pem
+ '[' '!' -f /etc/pki/qemu/server-cert.pem ']'
+ wait_for_file /etc/pki/qemu/client-cert.pem
+ local file=/etc/pki/qemu/client-cert.pem
+ '[' '!' -f /etc/pki/qemu/client-cert.pem ']'
+ wait_for_file /etc/pki/libvirt/private/serverkey.pem
+ local file=/etc/pki/libvirt/private/serverkey.pem
+ '[' '!' -f /etc/pki/libvirt/private/serverkey.pem ']'
+ wait_for_file /etc/pki/libvirt/private/clientkey.pem
+ local file=/etc/pki/libvirt/private/clientkey.pem
+ '[' '!' -f /etc/pki/libvirt/private/clientkey.pem ']'
+ wait_for_file /etc/pki/qemu/server-key.pem
+ local file=/etc/pki/qemu/server-key.pem
+ '[' '!' -f /etc/pki/qemu/server-key.pem ']'
+ wait_for_file /etc/pki/qemu/client-key.pem
+ local file=/etc/pki/qemu/client-key.pem
+ '[' '!' -f /etc/pki/qemu/client-key.pem ']'
+ wait_for_file /etc/pki/libvirt-vnc/ca-cert.pem
+ local file=/etc/pki/libvirt-vnc/ca-cert.pem
+ '[' '!' -f /etc/pki/libvirt-vnc/ca-cert.pem ']'
+ wait_for_file /etc/pki/libvirt-vnc/server-cert.pem
+ local file=/etc/pki/libvirt-vnc/server-cert.pem
+ '[' '!' -f /etc/pki/libvirt-vnc/server-cert.pem ']'
+ wait_for_file /etc/pki/libvirt-vnc/server-key.pem
+ local file=/etc/pki/libvirt-vnc/server-key.pem
+ '[' '!' -f /etc/pki/libvirt-vnc/server-key.pem ']'
++ grep -w libvirtd
++ cat /proc/1/comm /proc/10/comm /proc/100/comm /proc/101221/comm /proc/101245/comm /proc/101274/comm /proc/101300/comm /proc/101631/comm /proc/101731/comm /proc/102/comm /proc/102441/comm /proc/103/comm /proc/10343/comm /proc/104/comm /proc/104173/comm /proc/104230/comm /proc/104934/comm /proc/105/comm /proc/106/comm /proc/107198/comm /proc/108/comm /proc/10853/comm /proc/10854/comm /proc/109/comm /proc/109244/comm /proc/1096/comm /proc/11/comm /proc/110/comm /proc/110398/comm /proc/111/comm /proc/112/comm /proc/113/comm /proc/114/comm /proc/114918/comm /proc/114941/comm /proc/115/comm /proc/115067/comm /proc/115122/comm /proc/11519/comm /proc/115381/comm /proc/115395/comm /proc/115396/comm /proc/116/comm /proc/116703/comm /proc/116726/comm /proc/116806/comm /proc/116845/comm /proc/117/comm /proc/117174/comm /proc/117450/comm /proc/117452/comm /proc/117708/comm /proc/118441/comm /proc/118871/comm /proc/118894/comm /proc/119091/comm /proc/119112/comm /proc/119118/comm /proc/119252/comm /proc/119253/comm /proc/119264/comm /proc/119508/comm /proc/12/comm /proc/120659/comm /proc/120683/comm /proc/120704/comm /proc/120733/comm /proc/12250/comm /proc/12279/comm /proc/12321/comm /proc/12360/comm /proc/12372/comm /proc/124164/comm /proc/125323/comm /proc/12610/comm /proc/12640/comm /proc/126445/comm /proc/12698/comm /proc/12723/comm /proc/127241/comm /proc/12743/comm /proc/129014/comm /proc/129027/comm /proc/129075/comm /proc/12917/comm /proc/13/comm /proc/131165/comm /proc/131610/comm /proc/131623/comm /proc/131624/comm /proc/14/comm /proc/1431/comm /proc/143895/comm /proc/144282/comm /proc/144451/comm /proc/144478/comm /proc/144537/comm /proc/144561/comm /proc/145140/comm /proc/145683/comm /proc/145826/comm /proc/147344/comm /proc/147367/comm /proc/147870/comm /proc/149945/comm /proc/15/comm /proc/151646/comm /proc/151732/comm /proc/152772/comm /proc/152773/comm /proc/152820/comm /proc/153404/comm /proc/153430/comm /proc/153431/comm /proc/154805/comm /proc/154806/comm /proc/1549/comm /proc/1550/comm /proc/1551/comm /proc/1552/comm /proc/1556/comm /proc/16/comm /proc/161906/comm /proc/161907/comm /proc/161909/comm /proc/161910/comm /proc/162121/comm /proc/162130/comm /proc/1623/comm /proc/1627/comm /proc/162878/comm /proc/162906/comm /proc/163389/comm /proc/163424/comm /proc/163437/comm /proc/163469/comm /proc/163470/comm /proc/163471/comm /proc/163473/comm /proc/1636/comm /proc/164633/comm /proc/164657/comm /proc/165060/comm /proc/165084/comm /proc/165543/comm /proc/166/comm /proc/166250/comm /proc/166282/comm /proc/166417/comm /proc/166434/comm /proc/166440/comm /proc/166498/comm /proc/166499/comm /proc/166509/comm /proc/166661/comm /proc/167/comm /proc/168/comm /proc/168192/comm /proc/168226/comm /proc/168284/comm /proc/168480/comm /proc/168514/comm /proc/168590/comm /proc/168598/comm /proc/168661/comm /proc/168666/comm /proc/168778/comm /proc/168817/comm /proc/168848/comm /proc/169/comm /proc/169009/comm /proc/169032/comm /proc/169417/comm /proc/169437/comm /proc/169463/comm /proc/170/comm /proc/170183/comm /proc/170184/comm /proc/171/comm /proc/171410/comm /proc/172/comm /proc/173/comm /proc/174/comm /proc/174437/comm /proc/174506/comm /proc/174509/comm /proc/174996/comm /proc/174998/comm /proc/175408/comm /proc/175456/comm /proc/176726/comm /proc/176767/comm /proc/176769/comm /proc/176789/comm /proc/177/comm /proc/177974/comm /proc/178081/comm /proc/178121/comm /proc/178316/comm /proc/178317/comm /proc/179/comm /proc/179538/comm /proc/179660/comm /proc/179730/comm /proc/179734/comm /proc/18/comm /proc/180/comm /proc/180250/comm /proc/180305/comm /proc/180306/comm /proc/180383/comm /proc/180400/comm /proc/180401/comm /proc/181302/comm /proc/181311/comm /proc/181521/comm /proc/181528/comm /proc/181533/comm /proc/181580/comm /proc/181582/comm /proc/181706/comm /proc/181708/comm /proc/182/comm /proc/182207/comm /proc/182221/comm /proc/182237/comm /proc/182369/comm /proc/182395/comm /proc/182660/comm /proc/182676/comm /proc/182682/comm /proc/182758/comm /proc/182759/comm /proc/182769/comm /proc/182897/comm /proc/184/comm /proc/184209/comm /proc/184235/comm /proc/184262/comm /proc/184315/comm /proc/184323/comm /proc/184345/comm /proc/184383/comm /proc/184402/comm /proc/184404/comm /proc/184463/comm /proc/184736/comm /proc/184759/comm /proc/184774/comm /proc/184797/comm /proc/185239/comm /proc/185445/comm /proc/185465/comm /proc/186/comm /proc/18698/comm /proc/187/comm /proc/18717/comm /proc/18740/comm /proc/18767/comm /proc/18783/comm /proc/188/comm /proc/189/comm /proc/189178/comm /proc/19/comm /proc/190/comm /proc/191/comm /proc/191212/comm /proc/192/comm /proc/193/comm /proc/194/comm /proc/194182/comm /proc/194457/comm /proc/194458/comm /proc/194459/comm /proc/194593/comm /proc/194616/comm /proc/194617/comm /proc/194630/comm /proc/194643/comm /proc/194644/comm /proc/194867/comm /proc/195120/comm /proc/195124/comm /proc/195127/comm /proc/195669/comm /proc/196143/comm /proc/196334/comm /proc/196826/comm /proc/197/comm /proc/197327/comm /proc/197357/comm /proc/197359/comm /proc/197447/comm /proc/197665/comm /proc/197682/comm /proc/197992/comm /proc/198684/comm /proc/198699/comm /proc/198700/comm /proc/198701/comm /proc/198702/comm /proc/198703/comm /proc/198704/comm /proc/198808/comm /proc/199037/comm /proc/199214/comm /proc/199240/comm /proc/199260/comm /proc/199307/comm /proc/199336/comm /proc/199399/comm /proc/199420/comm /proc/199445/comm /proc/199798/comm /proc/199816/comm /proc/199819/comm /proc/199825/comm /proc/199872/comm /proc/199877/comm /proc/199878/comm /proc/199884/comm /proc/199885/comm /proc/199886/comm /proc/2/comm /proc/20/comm /proc/21/comm /proc/212/comm /proc/21702/comm /proc/21761/comm /proc/21762/comm /proc/21782/comm /proc/219/comm /proc/22/comm /proc/220/comm /proc/225/comm /proc/24/comm /proc/247/comm /proc/25/comm /proc/25035/comm /proc/25303/comm /proc/25320/comm /proc/25345/comm /proc/25357/comm /proc/25874/comm /proc/26/comm /proc/264/comm /proc/27/comm /proc/28/comm /proc/284/comm /proc/285/comm /proc/286/comm /proc/287/comm /proc/29817/comm /proc/3/comm /proc/30/comm /proc/30080/comm /proc/30099/comm /proc/30124/comm /proc/30136/comm /proc/307/comm /proc/308/comm /proc/30901/comm /proc/31/comm /proc/312/comm /proc/313/comm /proc/314/comm /proc/315/comm /proc/316/comm /proc/317/comm /proc/318/comm /proc/319/comm /proc/32/comm /proc/320/comm /proc/33/comm /proc/34/comm /proc/34628/comm /proc/34894/comm /proc/34912/comm /proc/34937/comm /proc/34949/comm /proc/36/comm /proc/360/comm /proc/37/comm /proc/38/comm /proc/39/comm /proc/391/comm /proc/394/comm /proc/39489/comm /proc/39491/comm /proc/39606/comm /proc/39626/comm /proc/39675/comm /proc/39701/comm /proc/39715/comm /proc/4/comm /proc/40/comm /proc/42/comm /proc/42216/comm /proc/42232/comm /proc/42279/comm /proc/42281/comm /proc/42312/comm /proc/42315/comm /proc/42317/comm /proc/42365/comm /proc/42386/comm /proc/42400/comm /proc/42463/comm /proc/42475/comm /proc/42493/comm /proc/42519/comm /proc/42622/comm /proc/42680/comm /proc/42827/comm /proc/42852/comm /proc/42880/comm /proc/43/comm /proc/43628/comm /proc/43632/comm /proc/43678/comm /proc/43681/comm /proc/43931/comm /proc/44/comm /proc/44140/comm /proc/44513/comm /proc/44966/comm /proc/44991/comm /proc/45/comm /proc/450/comm /proc/45033/comm /proc/45399/comm /proc/45422/comm /proc/45436/comm /proc/45461/comm /proc/45493/comm /proc/45523/comm /proc/45880/comm /proc/45904/comm /proc/46/comm /proc/46040/comm /proc/46377/comm /proc/46401/comm /proc/46433/comm /proc/46456/comm /proc/46471/comm /proc/46494/comm /proc/46611/comm /proc/46660/comm /proc/46706/comm /proc/48/comm /proc/48623/comm /proc/48675/comm /proc/48819/comm /proc/48847/comm /proc/49/comm /proc/49200/comm /proc/49218/comm /proc/49279/comm /proc/49310/comm /proc/49641/comm /proc/49665/comm /proc/49682/comm /proc/49707/comm /proc/49781/comm /proc/49829/comm /proc/5/comm /proc/50/comm /proc/50077/comm /proc/50101/comm /proc/50222/comm /proc/50371/comm /proc/50395/comm /proc/50786/comm /proc/50809/comm /proc/50839/comm /proc/50923/comm /proc/51/comm /proc/51206/comm /proc/51304/comm /proc/51329/comm /proc/51442/comm /proc/518/comm /proc/52/comm /proc/52477/comm /proc/53278/comm /proc/53304/comm /proc/53524/comm /proc/53547/comm /proc/53589/comm /proc/53718/comm /proc/53883/comm /proc/53992/comm /proc/54/comm /proc/55/comm /proc/56/comm /proc/57/comm /proc/58/comm /proc/58055/comm /proc/58088/comm /proc/58723/comm /proc/58746/comm /proc/58771/comm /proc/58796/comm /proc/58822/comm /proc/58856/comm /proc/58972/comm /proc/58994/comm /proc/59057/comm /proc/59096/comm /proc/59136/comm /proc/59248/comm /proc/6/comm /proc/60/comm /proc/61/comm /proc/610/comm /proc/614/comm /proc/616/comm /proc/619/comm /proc/62/comm /proc/620/comm /proc/63/comm /proc/63522/comm /proc/63754/comm /proc/63799/comm /proc/63895/comm /proc/63919/comm /proc/63934/comm /proc/63960/comm /proc/63977/comm /proc/64/comm /proc/640/comm /proc/64006/comm /proc/644/comm /proc/64430/comm /proc/64583/comm /proc/64609/comm /proc/64652/comm /proc/64891/comm /proc/64892/comm /proc/64934/comm /proc/64935/comm /proc/65174/comm /proc/65303/comm /proc/65505/comm /proc/65750/comm /proc/65773/comm /proc/65798/comm /proc/65822/comm /proc/65845/comm /proc/65869/comm /proc/66/comm /proc/66509/comm /proc/66517/comm /proc/66558/comm /proc/66565/comm /proc/66613/comm /proc/66672/comm /proc/66697/comm /proc/66744/comm /proc/66768/comm /proc/67/comm /proc/67039/comm /proc/67062/comm /proc/67135/comm /proc/67434/comm /proc/67543/comm /proc/67561/comm /proc/67562/comm /proc/67563/comm /proc/67564/comm /proc/67565/comm /proc/67575/comm /proc/67598/comm /proc/67703/comm /proc/68/comm /proc/68224/comm /proc/68247/comm /proc/68287/comm /proc/68363/comm /proc/68370/comm /proc/68373/comm /proc/68587/comm /proc/68700/comm /proc/69/comm /proc/69104/comm /proc/69339/comm /proc/69435/comm /proc/69710/comm /proc/69744/comm /proc/69774/comm /proc/69977/comm /proc/70/comm /proc/70019/comm /proc/70151/comm /proc/70174/comm /proc/70229/comm /proc/70338/comm /proc/70382/comm /proc/70459/comm /proc/70666/comm /proc/707/comm /proc/70947/comm /proc/70964/comm /proc/70970/comm /proc/710/comm /proc/71029/comm /proc/71030/comm /proc/71040/comm /proc/711/comm /proc/71196/comm /proc/72/comm /proc/724/comm /proc/72526/comm /proc/72550/comm /proc/73/comm /proc/74/comm /proc/75/comm /proc/75648/comm /proc/76/comm /proc/76335/comm /proc/76375/comm /proc/76376/comm /proc/76377/comm /proc/76378/comm /proc/76381/comm /proc/76384/comm /proc/76386/comm /proc/76388/comm /proc/76389/comm /proc/76390/comm /proc/76391/comm /proc/76392/comm /proc/76393/comm /proc/76394/comm /proc/78/comm /proc/79/comm /proc/8/comm /proc/80/comm /proc/81/comm /proc/82/comm /proc/82232/comm /proc/82256/comm /proc/82460/comm /proc/82476/comm /proc/82482/comm /proc/82572/comm /proc/82573/comm /proc/82585/comm /proc/82709/comm /proc/83812/comm /proc/83836/comm /proc/84/comm /proc/85/comm /proc/86/comm /proc/869/comm /proc/87/comm /proc/87788/comm /proc/87790/comm /proc/88/comm /proc/89084/comm /proc/89530/comm /proc/89545/comm /proc/90/comm /proc/90445/comm /proc/90469/comm /proc/91/comm /proc/91598/comm /proc/92/comm /proc/9237/comm /proc/9256/comm /proc/9272/comm /proc/93/comm /proc/9355/comm /proc/94/comm /proc/94800/comm /proc/95730/comm /proc/95877/comm /proc/96/comm /proc/97/comm /proc/97420/comm /proc/97443/comm /proc/97712/comm /proc/97729/comm /proc/97738/comm /proc/97906/comm /proc/97907/comm /proc/97917/comm /proc/98/comm /proc/98069/comm /proc/99/comm /proc/9972/comm /proc/self/comm /proc/thread-self/comm
+ '[' -n '' ']'
+ rm -f /var/run/libvirtd.pid
+ [[ -c /dev/kvm ]]
+ chmod 660 /dev/kvm
+ chown root:kvm /dev/kvm
+ CGROUPS=
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/blkio ']'
+ grep -w blkio /sys/fs/cgroup/cgroup.controllers
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/cpu ']'
+ grep -w cpu /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=cpu,
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/devices ']'
+ grep -w devices /sys/fs/cgroup/cgroup.controllers
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/freezer ']'
+ grep -w freezer /sys/fs/cgroup/cgroup.controllers
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/hugetlb ']'
+ grep -w hugetlb /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=hugetlb,
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/memory ']'
+ grep -w memory /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=memory,
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/net_cls ']'
+ grep -w net_cls /sys/fs/cgroup/cgroup.controllers
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/perf_event ']'
+ grep -w perf_event /sys/fs/cgroup/cgroup.controllers
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/rdma ']'
+ grep -w rdma /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=rdma,
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/misc ']'
+ grep -w misc /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=misc,
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/pids ']'
+ grep -w pids /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=pids,
+ cgcreate -g cpu,hugetlb,memory,rdma,misc,pids:/osh-libvirt
++ cat /proc/meminfo
++ grep HugePages_Total
++ tr -cd '[:digit:]'
+ hp_count=0
+ '[' 00 -gt 0 ']'
+ '[' -n 457eb676-33da-42ec-9a8c-9293d545c337 ']'
+ cgexec -g cpu,hugetlb,memory,rdma,misc,pids:/osh-libvirt systemd-run --scope --slice=system libvirtd --listen
++ mktemp --suffix .xml
+ tmpsecret=/tmp/tmp.SUA9p3xRem.xml
+ '[' -n '' ']'
+ trap cleanup EXIT
+ TIMEOUT=60
+ [[ ! -f /var/run/libvirtd.pid ]]
+ [[ 60 -gt 0 ]]
+ let TIMEOUT-=1
+ sleep 1
Running as unit: run-rdeb9e35103c642b7859993842f3e6cd8.scope; invocation ID: 05bdfac72c1641b096b3fdc66d855bda
+ [[ ! -f /var/run/libvirtd.pid ]]
+ TIMEOUT=10
+ [[ ! -e /var/run/libvirt/libvirt-sock ]]
+ '[' -z '' ']'
+ '[' -n cinder ']'
++ awk '/key/{print $3}' /etc/ceph/ceph.client.cinder.keyring
+ CEPH_CINDER_KEYRING=AQAVWHxqLn5YFRAAvBvMwUtm5ineJUYHJcAtZg==
+ '[' -n cinder ']'
+ create_virsh_libvirt_secret cinder 457eb676-33da-42ec-9a8c-9293d545c337 AQAVWHxqLn5YFRAAvBvMwUtm5ineJUYHJcAtZg==
+ sec_user=cinder
+ sec_uuid=457eb676-33da-42ec-9a8c-9293d545c337
+ sec_ceph_keyring=AQAVWHxqLn5YFRAAvBvMwUtm5ineJUYHJcAtZg==
+ cat
+ virsh secret-define --file /tmp/tmp.SUA9p3xRem.xml
Secret 457eb676-33da-42ec-9a8c-9293d545c337 created

+ virsh secret-set-value --secret 457eb676-33da-42ec-9a8c-9293d545c337 --base64 AQAVWHxqLn5YFRAAvBvMwUtm5ineJUYHJcAtZg==
error: Passing secret value as command-line argument is insecure!
Secret value set

+ '[' -n '' ']'
+ '[' -n '' ']'
+ cleanup
+ rm -f /tmp/tmp.SUA9p3xRem.xml
+ '[' -n '' ']'
++ cat /var/run/libvirtd.pid
+ LIBVIRTD_PID=199906
+ kill 199906
+ tail --pid=199906 -f /dev/null
+ cgexec -g cpu,hugetlb,memory,rdma,misc,pids:/osh-libvirt systemd-run --scope --slice=system libvirtd --listen
Running as unit: run-rd0eef95b87e943ef86ec3bcece35576e.scope; invocation ID: 75001dea730141a78bcd898dbdd11449