+ wait_for_file /etc/pki/CA/cacert.pem
+ local file=/etc/pki/CA/cacert.pem
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ sleep 1
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ sleep 1
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ sleep 1
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ sleep 1
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ sleep 1
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ wait_for_file /etc/pki/qemu/ca-cert.pem
+ local file=/etc/pki/qemu/ca-cert.pem
+ '[' '!' -f /etc/pki/qemu/ca-cert.pem ']'
+ wait_for_file /etc/pki/libvirt/servercert.pem
+ local file=/etc/pki/libvirt/servercert.pem
+ '[' '!' -f /etc/pki/libvirt/servercert.pem ']'
+ wait_for_file /etc/pki/libvirt/clientcert.pem
+ local file=/etc/pki/libvirt/clientcert.pem
+ '[' '!' -f /etc/pki/libvirt/clientcert.pem ']'
+ wait_for_file /etc/pki/qemu/server-cert.pem
+ local file=/etc/pki/qemu/server-cert.pem
+ '[' '!' -f /etc/pki/qemu/server-cert.pem ']'
+ wait_for_file /etc/pki/qemu/client-cert.pem
+ local file=/etc/pki/qemu/client-cert.pem
+ '[' '!' -f /etc/pki/qemu/client-cert.pem ']'
+ wait_for_file /etc/pki/libvirt/private/serverkey.pem
+ local file=/etc/pki/libvirt/private/serverkey.pem
+ '[' '!' -f /etc/pki/libvirt/private/serverkey.pem ']'
+ wait_for_file /etc/pki/libvirt/private/clientkey.pem
+ local file=/etc/pki/libvirt/private/clientkey.pem
+ '[' '!' -f /etc/pki/libvirt/private/clientkey.pem ']'
+ wait_for_file /etc/pki/qemu/server-key.pem
+ local file=/etc/pki/qemu/server-key.pem
+ '[' '!' -f /etc/pki/qemu/server-key.pem ']'
+ wait_for_file /etc/pki/qemu/client-key.pem
+ local file=/etc/pki/qemu/client-key.pem
+ '[' '!' -f /etc/pki/qemu/client-key.pem ']'
+ wait_for_file /etc/pki/libvirt-vnc/ca-cert.pem
+ local file=/etc/pki/libvirt-vnc/ca-cert.pem
+ '[' '!' -f /etc/pki/libvirt-vnc/ca-cert.pem ']'
+ wait_for_file /etc/pki/libvirt-vnc/server-cert.pem
+ local file=/etc/pki/libvirt-vnc/server-cert.pem
+ '[' '!' -f /etc/pki/libvirt-vnc/server-cert.pem ']'
+ wait_for_file /etc/pki/libvirt-vnc/server-key.pem
+ local file=/etc/pki/libvirt-vnc/server-key.pem
+ '[' '!' -f /etc/pki/libvirt-vnc/server-key.pem ']'
++ grep -w libvirtd
++ cat /proc/1/comm /proc/10/comm /proc/100/comm /proc/101118/comm /proc/101198/comm /proc/10170/comm /proc/101867/comm /proc/101872/comm /proc/10193/comm /proc/102/comm /proc/103/comm /proc/104/comm /proc/105/comm /proc/106/comm /proc/108/comm /proc/108063/comm /proc/108086/comm /proc/108205/comm /proc/108466/comm /proc/108480/comm /proc/108481/comm /proc/108785/comm /proc/109/comm /proc/10930/comm /proc/10931/comm /proc/1094/comm /proc/109620/comm /proc/109645/comm /proc/109668/comm /proc/109691/comm /proc/109946/comm /proc/11/comm /proc/110/comm /proc/110184/comm /proc/110186/comm /proc/111/comm /proc/111434/comm /proc/111593/comm /proc/111595/comm /proc/111740/comm /proc/111765/comm /proc/111905/comm /proc/111921/comm /proc/111927/comm /proc/111974/comm /proc/111975/comm /proc/111985/comm /proc/112/comm /proc/112149/comm /proc/113/comm /proc/113552/comm /proc/113577/comm /proc/113602/comm /proc/113638/comm /proc/113858/comm /proc/114/comm /proc/114153/comm /proc/115/comm /proc/116/comm /proc/116292/comm /proc/116384/comm /proc/117/comm /proc/118022/comm /proc/118674/comm /proc/1191/comm /proc/12/comm /proc/120126/comm /proc/120160/comm /proc/121239/comm /proc/122019/comm /proc/122295/comm /proc/12364/comm /proc/123676/comm /proc/123688/comm /proc/123689/comm /proc/12394/comm /proc/12417/comm /proc/12465/comm /proc/12488/comm /proc/125136/comm /proc/126588/comm /proc/126612/comm /proc/126633/comm /proc/126663/comm /proc/12725/comm /proc/127265/comm /proc/12757/comm /proc/127703/comm /proc/127985/comm /proc/12812/comm /proc/12836/comm /proc/12857/comm /proc/128584/comm /proc/128595/comm /proc/128621/comm /proc/129244/comm /proc/129275/comm /proc/1296/comm /proc/1297/comm /proc/129761/comm /proc/129762/comm /proc/1298/comm /proc/1299/comm /proc/13/comm /proc/130620/comm /proc/131763/comm /proc/131765/comm /proc/134082/comm /proc/134269/comm /proc/134274/comm /proc/134873/comm /proc/134888/comm /proc/134889/comm /proc/136092/comm /proc/136093/comm /proc/1363/comm /proc/1384/comm /proc/1388/comm /proc/14/comm /proc/143202/comm /proc/143203/comm /proc/143205/comm /proc/143206/comm /proc/143420/comm /proc/1453/comm /proc/1457/comm /proc/1466/comm /proc/146671/comm /proc/146746/comm /proc/15/comm /proc/150111/comm /proc/155671/comm /proc/155765/comm /proc/155788/comm /proc/155821/comm /proc/155822/comm /proc/155823/comm /proc/155824/comm /proc/156881/comm /proc/156909/comm /proc/157200/comm /proc/157225/comm /proc/157481/comm /proc/157918/comm /proc/157945/comm /proc/157974/comm /proc/158047/comm /proc/158069/comm /proc/158258/comm /proc/158275/comm /proc/158281/comm /proc/158471/comm /proc/158472/comm /proc/158482/comm /proc/158591/comm /proc/16/comm /proc/160056/comm /proc/160207/comm /proc/160243/comm /proc/160357/comm /proc/160524/comm /proc/160548/comm /proc/160576/comm /proc/160620/comm /proc/160663/comm /proc/160689/comm /proc/160787/comm /proc/160824/comm /proc/160936/comm /proc/160971/comm /proc/161009/comm /proc/161703/comm /proc/161735/comm /proc/161749/comm /proc/165610/comm /proc/165664/comm /proc/166/comm /proc/166314/comm /proc/166412/comm /proc/166651/comm /proc/167/comm /proc/167644/comm /proc/168/comm /proc/168804/comm /proc/168810/comm /proc/169/comm /proc/170/comm /proc/170325/comm /proc/170326/comm /proc/170817/comm /proc/170850/comm /proc/170851/comm /proc/170902/comm /proc/170914/comm /proc/170915/comm /proc/171/comm /proc/171664/comm /proc/171674/comm /proc/171975/comm /proc/171976/comm /proc/172/comm /proc/172137/comm /proc/172139/comm /proc/172196/comm /proc/172518/comm /proc/172609/comm /proc/172632/comm /proc/172820/comm /proc/172837/comm /proc/172843/comm /proc/173/comm /proc/173009/comm /proc/173010/comm /proc/173020/comm /proc/173154/comm /proc/174/comm /proc/174271/comm /proc/174272/comm /proc/174341/comm /proc/174344/comm /proc/174371/comm /proc/174409/comm /proc/174497/comm /proc/174563/comm /proc/174652/comm /proc/174720/comm /proc/174745/comm /proc/174783/comm /proc/174814/comm /proc/174856/comm /proc/174887/comm /proc/175195/comm /proc/175463/comm /proc/175476/comm /proc/175500/comm /proc/175511/comm /proc/175533/comm /proc/177/comm /proc/178924/comm /proc/178955/comm /proc/178994/comm /proc/179/comm /proc/179139/comm /proc/18/comm /proc/180/comm /proc/180618/comm /proc/181554/comm /proc/181555/comm /proc/181556/comm /proc/181557/comm /proc/181558/comm /proc/181559/comm /proc/181560/comm /proc/181561/comm /proc/181562/comm /proc/181563/comm /proc/181564/comm /proc/181565/comm /proc/181566/comm /proc/181567/comm /proc/181568/comm /proc/181569/comm /proc/181671/comm /proc/183/comm /proc/183292/comm /proc/183467/comm /proc/183468/comm /proc/183469/comm /proc/183617/comm /proc/183706/comm /proc/183728/comm /proc/183775/comm /proc/183776/comm /proc/183790/comm /proc/183812/comm /proc/183813/comm /proc/184/comm /proc/184082/comm /proc/184085/comm /proc/184088/comm /proc/184813/comm /proc/185/comm /proc/185113/comm /proc/185378/comm /proc/185746/comm /proc/186/comm /proc/186456/comm /proc/186476/comm /proc/186496/comm /proc/186786/comm /proc/186801/comm /proc/187/comm /proc/187176/comm /proc/187253/comm /proc/187396/comm /proc/187432/comm /proc/187433/comm /proc/187434/comm /proc/187435/comm /proc/187436/comm /proc/187437/comm /proc/187438/comm /proc/187621/comm /proc/188/comm /proc/188020/comm /proc/188029/comm /proc/188053/comm /proc/188224/comm /proc/188241/comm /proc/188250/comm /proc/188408/comm /proc/188409/comm /proc/188432/comm /proc/188433/comm /proc/188534/comm /proc/188559/comm /proc/188606/comm /proc/188754/comm /proc/188759/comm /proc/188863/comm /proc/188876/comm /proc/188948/comm /proc/188966/comm /proc/188977/comm /proc/189/comm /proc/189000/comm /proc/189002/comm /proc/189003/comm /proc/189004/comm /proc/189005/comm /proc/19/comm /proc/190/comm /proc/191/comm /proc/192/comm /proc/193/comm /proc/194/comm /proc/19449/comm /proc/19477/comm /proc/19499/comm /proc/195/comm /proc/19524/comm /proc/19543/comm /proc/197/comm /proc/2/comm /proc/20/comm /proc/21/comm /proc/211/comm /proc/21591/comm /proc/21600/comm /proc/21601/comm /proc/21615/comm /proc/219/comm /proc/22/comm /proc/220/comm /proc/225/comm /proc/24/comm /proc/24392/comm /proc/24669/comm /proc/24686/comm /proc/247/comm /proc/24711/comm /proc/24723/comm /proc/25/comm /proc/26/comm /proc/27/comm /proc/28/comm /proc/288/comm /proc/29010/comm /proc/29288/comm /proc/293/comm /proc/29305/comm /proc/29328/comm /proc/29341/comm /proc/294/comm /proc/3/comm /proc/30/comm /proc/31/comm /proc/314/comm /proc/315/comm /proc/319/comm /proc/32/comm /proc/33/comm /proc/33691/comm /proc/33960/comm /proc/33977/comm /proc/34/comm /proc/34002/comm /proc/34014/comm /proc/34513/comm /proc/34514/comm /proc/346/comm /proc/354/comm /proc/35595/comm /proc/35597/comm /proc/357/comm /proc/36/comm /proc/362/comm /proc/37/comm /proc/38/comm /proc/381/comm /proc/39/comm /proc/390/comm /proc/396/comm /proc/39647/comm /proc/39663/comm /proc/39704/comm /proc/39705/comm /proc/39707/comm /proc/39747/comm /proc/39769/comm /proc/39807/comm /proc/39815/comm /proc/39822/comm /proc/39881/comm /proc/399/comm /proc/39900/comm /proc/39932/comm /proc/39933/comm /proc/4/comm /proc/40/comm /proc/40054/comm /proc/40107/comm /proc/40262/comm /proc/40286/comm /proc/403/comm /proc/40312/comm /proc/40985/comm /proc/40991/comm /proc/41027/comm /proc/41042/comm /proc/41727/comm /proc/41940/comm /proc/42/comm /proc/42501/comm /proc/42665/comm /proc/42689/comm /proc/42756/comm /proc/42778/comm /proc/42793/comm /proc/42844/comm /proc/42846/comm /proc/42897/comm /proc/42922/comm /proc/42980/comm /proc/43/comm /proc/43058/comm /proc/43082/comm /proc/43112/comm /proc/43137/comm /proc/43213/comm /proc/43261/comm /proc/43304/comm /proc/43346/comm /proc/44/comm /proc/45/comm /proc/45476/comm /proc/45510/comm /proc/45541/comm /proc/45565/comm /proc/457/comm /proc/45785/comm /proc/45798/comm /proc/45833/comm /proc/459/comm /proc/45944/comm /proc/46/comm /proc/460/comm /proc/46280/comm /proc/46308/comm /proc/46369/comm /proc/46393/comm /proc/46441/comm /proc/46561/comm /proc/46731/comm /proc/46755/comm /proc/46875/comm /proc/47096/comm /proc/47119/comm /proc/47379/comm /proc/47401/comm /proc/47538/comm /proc/47752/comm /proc/47849/comm /proc/47877/comm /proc/47944/comm /proc/47993/comm /proc/48/comm /proc/48869/comm /proc/49/comm /proc/49457/comm /proc/49625/comm /proc/49711/comm /proc/49738/comm /proc/49912/comm /proc/49935/comm /proc/49975/comm /proc/5/comm /proc/50/comm /proc/50070/comm /proc/50259/comm /proc/50385/comm /proc/508/comm /proc/51/comm /proc/52/comm /proc/526/comm /proc/54/comm /proc/54259/comm /proc/54283/comm /proc/54908/comm /proc/54935/comm /proc/54969/comm /proc/54993/comm /proc/55/comm /proc/55009/comm /proc/55032/comm /proc/55208/comm /proc/55230/comm /proc/55269/comm /proc/55320/comm /proc/55362/comm /proc/55507/comm /proc/56/comm /proc/57/comm /proc/58/comm /proc/59472/comm /proc/59524/comm /proc/59582/comm /proc/59605/comm /proc/59621/comm /proc/59646/comm /proc/59668/comm /proc/59691/comm /proc/59921/comm /proc/6/comm /proc/60/comm /proc/60039/comm /proc/60547/comm /proc/60572/comm /proc/60819/comm /proc/60820/comm /proc/60833/comm /proc/60868/comm /proc/60869/comm /proc/61/comm /proc/61076/comm /proc/61100/comm /proc/61150/comm /proc/61173/comm /proc/61409/comm /proc/61434/comm /proc/61539/comm /proc/61565/comm /proc/61581/comm /proc/61614/comm /proc/617/comm /proc/61888/comm /proc/61924/comm /proc/62/comm /proc/620/comm /proc/62160/comm /proc/62249/comm /proc/62274/comm /proc/623/comm /proc/62576/comm /proc/626/comm /proc/62601/comm /proc/62736/comm /proc/62762/comm /proc/62763/comm /proc/62764/comm /proc/62765/comm /proc/62766/comm /proc/62825/comm /proc/62849/comm /proc/63/comm /proc/630/comm /proc/63194/comm /proc/63247/comm /proc/63519/comm /proc/63544/comm /proc/63739/comm /proc/63776/comm /proc/63808/comm /proc/63894/comm /proc/63934/comm /proc/64/comm /proc/64173/comm /proc/64238/comm /proc/64282/comm /proc/64456/comm /proc/64486/comm /proc/64530/comm /proc/646/comm /proc/64733/comm /proc/64863/comm /proc/64892/comm /proc/64915/comm /proc/64976/comm /proc/65016/comm /proc/65046/comm /proc/65080/comm /proc/65099/comm /proc/652/comm /proc/65567/comm /proc/65583/comm /proc/65589/comm /proc/65664/comm /proc/65665/comm /proc/65675/comm /proc/65947/comm /proc/66/comm /proc/67/comm /proc/67615/comm /proc/67639/comm /proc/68/comm /proc/69/comm /proc/69555/comm /proc/70/comm /proc/703/comm /proc/706/comm /proc/707/comm /proc/71016/comm /proc/71030/comm /proc/71031/comm /proc/71032/comm /proc/71033/comm /proc/71034/comm /proc/71035/comm /proc/71036/comm /proc/71037/comm /proc/71043/comm /proc/71044/comm /proc/71045/comm /proc/71046/comm /proc/71047/comm /proc/71049/comm /proc/72/comm /proc/721/comm /proc/73/comm /proc/74/comm /proc/75/comm /proc/76/comm /proc/76894/comm /proc/76917/comm /proc/76996/comm /proc/77014/comm /proc/77028/comm /proc/77163/comm /proc/77164/comm /proc/77174/comm /proc/77301/comm /proc/78/comm /proc/78486/comm /proc/78510/comm /proc/79/comm /proc/79716/comm /proc/79827/comm /proc/8/comm /proc/80/comm /proc/81/comm /proc/82/comm /proc/83726/comm /proc/83753/comm /proc/84/comm /proc/84448/comm /proc/84472/comm /proc/85/comm /proc/85443/comm /proc/86/comm /proc/866/comm /proc/87/comm /proc/88/comm /proc/90/comm /proc/9065/comm /proc/90743/comm /proc/90766/comm /proc/9082/comm /proc/90926/comm /proc/90943/comm /proc/90952/comm /proc/9098/comm /proc/91/comm /proc/91112/comm /proc/91113/comm /proc/91132/comm /proc/91334/comm /proc/9167/comm /proc/9181/comm /proc/92/comm /proc/93/comm /proc/94/comm /proc/94606/comm /proc/94629/comm /proc/94652/comm /proc/94677/comm /proc/94880/comm /proc/95064/comm /proc/95704/comm /proc/95840/comm /proc/96/comm /proc/97/comm /proc/97748/comm /proc/9798/comm /proc/98/comm /proc/99/comm /proc/99825/comm /proc/99829/comm /proc/99832/comm /proc/self/comm /proc/thread-self/comm
+ '[' -n '' ']'
+ rm -f /var/run/libvirtd.pid
+ [[ -c /dev/kvm ]]
+ chmod 660 /dev/kvm
+ chown root:kvm /dev/kvm
+ CGROUPS=
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/blkio ']'
+ grep -w blkio /sys/fs/cgroup/cgroup.controllers
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/cpu ']'
+ grep -w cpu /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=cpu,
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/devices ']'
+ grep -w devices /sys/fs/cgroup/cgroup.controllers
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/freezer ']'
+ grep -w freezer /sys/fs/cgroup/cgroup.controllers
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/hugetlb ']'
+ grep -w hugetlb /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=hugetlb,
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/memory ']'
+ grep -w memory /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=memory,
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/net_cls ']'
+ grep -w net_cls /sys/fs/cgroup/cgroup.controllers
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/perf_event ']'
+ grep -w perf_event /sys/fs/cgroup/cgroup.controllers
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/rdma ']'
+ grep -w rdma /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=rdma,
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/misc ']'
+ grep -w misc /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=misc,
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/pids ']'
+ grep -w pids /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=pids,
+ cgcreate -g cpu,hugetlb,memory,rdma,misc,pids:/osh-libvirt
++ cat /proc/meminfo
++ grep HugePages_Total
++ tr -cd '[:digit:]'
+ hp_count=0
+ '[' 00 -gt 0 ']'
+ '[' -n 457eb676-33da-42ec-9a8c-9293d545c337 ']'
+ cgexec -g cpu,hugetlb,memory,rdma,misc,pids:/osh-libvirt systemd-run --scope --slice=system libvirtd --listen
++ mktemp --suffix .xml
+ tmpsecret=/tmp/tmp.xLtz8yhlbc.xml
+ '[' -n '' ']'
+ trap cleanup EXIT
+ TIMEOUT=60
+ [[ ! -f /var/run/libvirtd.pid ]]
+ [[ 60 -gt 0 ]]
+ let TIMEOUT-=1
+ sleep 1
Running as unit: run-r24de686074934011bd652b8ffa1449a8.scope; invocation ID: a23347e31d7c47d8985c88c5a21abb10
+ [[ ! -f /var/run/libvirtd.pid ]]
+ TIMEOUT=10
+ [[ ! -e /var/run/libvirt/libvirt-sock ]]
+ '[' -z '' ']'
+ '[' -n cinder ']'
++ awk '/key/{print $3}' /etc/ceph/ceph.client.cinder.keyring
+ CEPH_CINDER_KEYRING=AQCxVKhp8ochBxAAUBx9QovaWYLD9n65YuZ7tA==
+ '[' -n cinder ']'
+ create_virsh_libvirt_secret cinder 457eb676-33da-42ec-9a8c-9293d545c337 AQCxVKhp8ochBxAAUBx9QovaWYLD9n65YuZ7tA==
+ sec_user=cinder
+ sec_uuid=457eb676-33da-42ec-9a8c-9293d545c337
+ sec_ceph_keyring=AQCxVKhp8ochBxAAUBx9QovaWYLD9n65YuZ7tA==
+ cat
+ virsh secret-define --file /tmp/tmp.xLtz8yhlbc.xml
Secret 457eb676-33da-42ec-9a8c-9293d545c337 created

+ virsh secret-set-value --secret 457eb676-33da-42ec-9a8c-9293d545c337 --base64 AQCxVKhp8ochBxAAUBx9QovaWYLD9n65YuZ7tA==
error: Passing secret value as command-line argument is insecure!
Secret value set

+ '[' -n '' ']'
+ '[' -n '' ']'
+ cleanup
+ rm -f /tmp/tmp.xLtz8yhlbc.xml
+ '[' -n '' ']'
++ cat /var/run/libvirtd.pid
+ LIBVIRTD_PID=189025
+ kill 189025
+ tail --pid=189025 -f /dev/null
+ cgexec -g cpu,hugetlb,memory,rdma,misc,pids:/osh-libvirt systemd-run --scope --slice=system libvirtd --listen
Running as unit: run-r5e46448d8919475c98ec54b5823f2a1c.scope; invocation ID: 8f05a8bab9bd4f35bd9bed1326d5d98f