+ wait_for_file /etc/pki/CA/cacert.pem
+ local file=/etc/pki/CA/cacert.pem
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ sleep 1
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ sleep 1
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ sleep 1
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ sleep 1
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ sleep 1
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ wait_for_file /etc/pki/qemu/ca-cert.pem
+ local file=/etc/pki/qemu/ca-cert.pem
+ '[' '!' -f /etc/pki/qemu/ca-cert.pem ']'
+ wait_for_file /etc/pki/libvirt/servercert.pem
+ local file=/etc/pki/libvirt/servercert.pem
+ '[' '!' -f /etc/pki/libvirt/servercert.pem ']'
+ wait_for_file /etc/pki/libvirt/clientcert.pem
+ local file=/etc/pki/libvirt/clientcert.pem
+ '[' '!' -f /etc/pki/libvirt/clientcert.pem ']'
+ wait_for_file /etc/pki/qemu/server-cert.pem
+ local file=/etc/pki/qemu/server-cert.pem
+ '[' '!' -f /etc/pki/qemu/server-cert.pem ']'
+ wait_for_file /etc/pki/qemu/client-cert.pem
+ local file=/etc/pki/qemu/client-cert.pem
+ '[' '!' -f /etc/pki/qemu/client-cert.pem ']'
+ wait_for_file /etc/pki/libvirt/private/serverkey.pem
+ local file=/etc/pki/libvirt/private/serverkey.pem
+ '[' '!' -f /etc/pki/libvirt/private/serverkey.pem ']'
+ wait_for_file /etc/pki/libvirt/private/clientkey.pem
+ local file=/etc/pki/libvirt/private/clientkey.pem
+ '[' '!' -f /etc/pki/libvirt/private/clientkey.pem ']'
+ wait_for_file /etc/pki/qemu/server-key.pem
+ local file=/etc/pki/qemu/server-key.pem
+ '[' '!' -f /etc/pki/qemu/server-key.pem ']'
+ wait_for_file /etc/pki/qemu/client-key.pem
+ local file=/etc/pki/qemu/client-key.pem
+ '[' '!' -f /etc/pki/qemu/client-key.pem ']'
+ wait_for_file /etc/pki/libvirt-vnc/ca-cert.pem
+ local file=/etc/pki/libvirt-vnc/ca-cert.pem
+ '[' '!' -f /etc/pki/libvirt-vnc/ca-cert.pem ']'
+ wait_for_file /etc/pki/libvirt-vnc/server-cert.pem
+ local file=/etc/pki/libvirt-vnc/server-cert.pem
+ '[' '!' -f /etc/pki/libvirt-vnc/server-cert.pem ']'
+ wait_for_file /etc/pki/libvirt-vnc/server-key.pem
+ local file=/etc/pki/libvirt-vnc/server-key.pem
+ '[' '!' -f /etc/pki/libvirt-vnc/server-key.pem ']'
++ grep -w libvirtd
++ cat /proc/1/comm /proc/10/comm /proc/100/comm /proc/10183/comm /proc/102/comm /proc/10205/comm /proc/102075/comm /proc/102099/comm /proc/102751/comm /proc/102769/comm /proc/102770/comm /proc/103/comm /proc/103758/comm /proc/103786/comm /proc/103812/comm /proc/103855/comm /proc/104/comm /proc/104188/comm /proc/104312/comm /proc/104314/comm /proc/104357/comm /proc/105/comm /proc/105086/comm /proc/105450/comm /proc/105535/comm /proc/105759/comm /proc/105785/comm /proc/105966/comm /proc/105983/comm /proc/105989/comm /proc/106/comm /proc/106048/comm /proc/106049/comm /proc/106059/comm /proc/106305/comm /proc/10690/comm /proc/10691/comm /proc/107566/comm /proc/107588/comm /proc/107644/comm /proc/107682/comm /proc/108/comm /proc/109/comm /proc/109769/comm /proc/11/comm /proc/110/comm /proc/111/comm /proc/111573/comm /proc/111574/comm /proc/112/comm /proc/113/comm /proc/114/comm /proc/115/comm /proc/115121/comm /proc/116/comm /proc/117/comm /proc/117601/comm /proc/117614/comm /proc/117615/comm /proc/119140/comm /proc/1193/comm /proc/12/comm /proc/120587/comm /proc/120612/comm /proc/120642/comm /proc/120667/comm /proc/12127/comm /proc/121309/comm /proc/12157/comm /proc/121674/comm /proc/121878/comm /proc/12211/comm /proc/12235/comm /proc/12254/comm /proc/122563/comm /proc/123147/comm /proc/123172/comm /proc/123558/comm /proc/12483/comm /proc/12511/comm /proc/125513/comm /proc/125514/comm /proc/12568/comm /proc/12592/comm /proc/12612/comm /proc/126859/comm /proc/126986/comm /proc/127970/comm /proc/1298/comm /proc/1299/comm /proc/13/comm /proc/1300/comm /proc/1301/comm /proc/130155/comm /proc/130156/comm /proc/130215/comm /proc/130216/comm /proc/137325/comm /proc/137326/comm /proc/137328/comm /proc/137334/comm /proc/137536/comm /proc/137545/comm /proc/137715/comm /proc/139466/comm /proc/139500/comm /proc/139881/comm /proc/1399/comm /proc/139919/comm /proc/139932/comm /proc/139964/comm /proc/139965/comm /proc/139966/comm /proc/139967/comm /proc/14/comm /proc/1403/comm /proc/141024/comm /proc/141052/comm /proc/141768/comm /proc/141836/comm /proc/142172/comm /proc/142199/comm /proc/142220/comm /proc/142243/comm /proc/142380/comm /proc/142387/comm /proc/142434/comm /proc/142462/comm /proc/142515/comm /proc/142528/comm /proc/142638/comm /proc/142660/comm /proc/142717/comm /proc/142741/comm /proc/143014/comm /proc/143286/comm /proc/143291/comm /proc/143732/comm /proc/143788/comm /proc/143811/comm /proc/144043/comm /proc/144089/comm /proc/144095/comm /proc/144167/comm /proc/144168/comm /proc/144178/comm /proc/144272/comm /proc/145465/comm /proc/146106/comm /proc/146296/comm /proc/146349/comm /proc/146397/comm /proc/146483/comm /proc/146511/comm /proc/146613/comm /proc/146638/comm /proc/146659/comm /proc/146708/comm /proc/146777/comm /proc/1468/comm /proc/146810/comm /proc/146923/comm /proc/146964/comm /proc/147022/comm /proc/147094/comm /proc/1472/comm /proc/147268/comm /proc/147307/comm /proc/1481/comm /proc/15/comm /proc/155388/comm /proc/156294/comm /proc/15775/comm /proc/16/comm /proc/165226/comm /proc/165233/comm /proc/165234/comm /proc/165643/comm /proc/165950/comm /proc/166/comm /proc/166368/comm /proc/167/comm /proc/167175/comm /proc/168/comm /proc/168297/comm /proc/168298/comm /proc/168446/comm /proc/169/comm /proc/169567/comm /proc/170/comm /proc/170061/comm /proc/170500/comm /proc/170528/comm /proc/170529/comm /proc/170579/comm /proc/170592/comm /proc/170593/comm /proc/171/comm /proc/171227/comm /proc/171242/comm /proc/171435/comm /proc/171465/comm /proc/171587/comm /proc/172/comm /proc/172652/comm /proc/172676/comm /proc/172768/comm /proc/172809/comm /proc/172816/comm /proc/172901/comm /proc/172902/comm /proc/172912/comm /proc/173/comm /proc/173156/comm /proc/174/comm /proc/174470/comm /proc/174489/comm /proc/174540/comm /proc/174549/comm /proc/174566/comm /proc/174601/comm /proc/174725/comm /proc/174749/comm /proc/174833/comm /proc/174856/comm /proc/175339/comm /proc/175376/comm /proc/175729/comm /proc/176021/comm /proc/176034/comm /proc/177/comm /proc/178564/comm /proc/179/comm /proc/179199/comm /proc/179206/comm /proc/179273/comm /proc/18/comm /proc/180/comm /proc/181490/comm /proc/181513/comm /proc/182060/comm /proc/182095/comm /proc/182179/comm /proc/182196/comm /proc/182288/comm /proc/182300/comm /proc/182325/comm /proc/182363/comm /proc/182372/comm /proc/183/comm /proc/183869/comm /proc/184021/comm /proc/184022/comm /proc/184023/comm /proc/184285/comm /proc/184384/comm /proc/184405/comm /proc/184406/comm /proc/184419/comm /proc/184432/comm /proc/184433/comm /proc/185/comm /proc/185602/comm /proc/186/comm /proc/186540/comm /proc/186981/comm /proc/187/comm /proc/187546/comm /proc/188/comm /proc/188024/comm /proc/188081/comm /proc/188128/comm /proc/188172/comm /proc/188402/comm /proc/188406/comm /proc/188408/comm /proc/188411/comm /proc/188418/comm /proc/188419/comm /proc/188452/comm /proc/188455/comm /proc/188456/comm /proc/188457/comm /proc/189/comm /proc/19/comm /proc/190/comm /proc/191/comm /proc/192/comm /proc/19200/comm /proc/19220/comm /proc/19240/comm /proc/19267/comm /proc/19286/comm /proc/193/comm /proc/194/comm /proc/195/comm /proc/196/comm /proc/19729/comm /proc/2/comm /proc/20/comm /proc/201/comm /proc/21/comm /proc/21286/comm /proc/21289/comm /proc/21290/comm /proc/21303/comm /proc/217/comm /proc/22/comm /proc/220/comm /proc/221/comm /proc/226/comm /proc/24/comm /proc/24136/comm /proc/24409/comm /proc/24426/comm /proc/24448/comm /proc/24462/comm /proc/248/comm /proc/25/comm /proc/26/comm /proc/266/comm /proc/27/comm /proc/28/comm /proc/28844/comm /proc/290/comm /proc/291/comm /proc/29122/comm /proc/29139/comm /proc/29163/comm /proc/29175/comm /proc/292/comm /proc/294/comm /proc/3/comm /proc/30/comm /proc/31/comm /proc/313/comm /proc/314/comm /proc/318/comm /proc/32/comm /proc/33/comm /proc/33338/comm /proc/33617/comm /proc/33637/comm /proc/33662/comm /proc/33674/comm /proc/34/comm /proc/345/comm /proc/34909/comm /proc/35252/comm /proc/35254/comm /proc/355/comm /proc/36/comm /proc/360/comm /proc/36714/comm /proc/37/comm /proc/379/comm /proc/38/comm /proc/388/comm /proc/389/comm /proc/39/comm /proc/39015/comm /proc/39028/comm /proc/39064/comm /proc/39066/comm /proc/39092/comm /proc/39093/comm /proc/39145/comm /proc/39155/comm /proc/39175/comm /proc/39189/comm /proc/39258/comm /proc/39278/comm /proc/39306/comm /proc/39314/comm /proc/39447/comm /proc/395/comm /proc/39547/comm /proc/39628/comm /proc/39652/comm /proc/39676/comm /proc/398/comm /proc/4/comm /proc/40/comm /proc/402/comm /proc/40351/comm /proc/40373/comm /proc/40399/comm /proc/40417/comm /proc/41111/comm /proc/41340/comm /proc/41878/comm /proc/42/comm /proc/42015/comm /proc/42038/comm /proc/42098/comm /proc/42120/comm /proc/42121/comm /proc/42178/comm /proc/42184/comm /proc/42198/comm /proc/42219/comm /proc/42236/comm /proc/42319/comm /proc/42336/comm /proc/42460/comm /proc/42483/comm /proc/42509/comm /proc/42560/comm /proc/42608/comm /proc/42689/comm /proc/43/comm /proc/44/comm /proc/44793/comm /proc/44832/comm /proc/44901/comm /proc/44924/comm /proc/45/comm /proc/45155/comm /proc/45167/comm /proc/45195/comm /proc/45318/comm /proc/454/comm /proc/45644/comm /proc/45667/comm /proc/45741/comm /proc/45765/comm /proc/45826/comm /proc/45985/comm /proc/46/comm /proc/46106/comm /proc/46130/comm /proc/46263/comm /proc/46425/comm /proc/46448/comm /proc/46549/comm /proc/46818/comm /proc/46842/comm /proc/46960/comm /proc/47184/comm /proc/47281/comm /proc/47309/comm /proc/47376/comm /proc/47449/comm /proc/48/comm /proc/48372/comm /proc/49/comm /proc/49208/comm /proc/49233/comm /proc/49393/comm /proc/49416/comm /proc/49481/comm /proc/49599/comm /proc/496/comm /proc/49764/comm /proc/49876/comm /proc/5/comm /proc/50/comm /proc/51/comm /proc/52/comm /proc/523/comm /proc/53607/comm /proc/53631/comm /proc/54/comm /proc/54226/comm /proc/54254/comm /proc/54280/comm /proc/54305/comm /proc/54325/comm /proc/54356/comm /proc/54519/comm /proc/54542/comm /proc/54959/comm /proc/55/comm /proc/55001/comm /proc/55042/comm /proc/55114/comm /proc/56/comm /proc/57/comm /proc/58/comm /proc/58731/comm /proc/58755/comm /proc/58871/comm /proc/58898/comm /proc/58928/comm /proc/58951/comm /proc/59098/comm /proc/59120/comm /proc/59271/comm /proc/59363/comm /proc/59560/comm /proc/59594/comm /proc/59595/comm /proc/59596/comm /proc/59597/comm /proc/59658/comm /proc/59805/comm /proc/59817/comm /proc/6/comm /proc/60/comm /proc/60488/comm /proc/60521/comm /proc/60528/comm /proc/60551/comm /proc/60572/comm /proc/60596/comm /proc/61/comm /proc/61048/comm /proc/61067/comm /proc/61100/comm /proc/61155/comm /proc/61426/comm /proc/61450/comm /proc/61603/comm /proc/61627/comm /proc/61677/comm /proc/617/comm /proc/61700/comm /proc/61772/comm /proc/61992/comm /proc/62/comm /proc/62021/comm /proc/62057/comm /proc/62081/comm /proc/621/comm /proc/62206/comm /proc/62227/comm /proc/62228/comm /proc/62229/comm /proc/62230/comm /proc/62231/comm /proc/623/comm /proc/62419/comm /proc/626/comm /proc/627/comm /proc/62704/comm /proc/62785/comm /proc/62796/comm /proc/62820/comm /proc/62865/comm /proc/63/comm /proc/63111/comm /proc/63152/comm /proc/63254/comm /proc/63362/comm /proc/63556/comm /proc/63592/comm /proc/63849/comm /proc/63892/comm /proc/63914/comm /proc/63986/comm /proc/64/comm /proc/64186/comm /proc/64225/comm /proc/64286/comm /proc/64305/comm /proc/64393/comm /proc/64419/comm /proc/648/comm /proc/64991/comm /proc/65009/comm /proc/65015/comm /proc/65062/comm /proc/65063/comm /proc/65073/comm /proc/65165/comm /proc/654/comm /proc/66/comm /proc/66591/comm /proc/66613/comm /proc/67/comm /proc/68/comm /proc/68620/comm /proc/69/comm /proc/69960/comm /proc/70/comm /proc/70003/comm /proc/70004/comm /proc/70005/comm /proc/70006/comm /proc/70007/comm /proc/70011/comm /proc/70013/comm /proc/70014/comm /proc/70016/comm /proc/70017/comm /proc/70019/comm /proc/70020/comm /proc/70021/comm /proc/70022/comm /proc/704/comm /proc/707/comm /proc/708/comm /proc/72/comm /proc/722/comm /proc/73/comm /proc/74/comm /proc/75/comm /proc/75427/comm /proc/75429/comm /proc/75732/comm /proc/75756/comm /proc/75940/comm /proc/75958/comm /proc/75964/comm /proc/76/comm /proc/76017/comm /proc/76018/comm /proc/76028/comm /proc/76116/comm /proc/77273/comm /proc/77296/comm /proc/78/comm /proc/78931/comm /proc/78940/comm /proc/79/comm /proc/79452/comm /proc/8/comm /proc/80/comm /proc/81/comm /proc/81172/comm /proc/82/comm /proc/82337/comm /proc/82701/comm /proc/82714/comm /proc/83503/comm /proc/83526/comm /proc/84/comm /proc/84232/comm /proc/85/comm /proc/86/comm /proc/867/comm /proc/87/comm /proc/88/comm /proc/89072/comm /proc/89502/comm /proc/89525/comm /proc/89708/comm /proc/89725/comm /proc/89731/comm /proc/89801/comm /proc/89802/comm /proc/89812/comm /proc/9/comm /proc/90/comm /proc/90076/comm /proc/9075/comm /proc/9092/comm /proc/91/comm /proc/9108/comm /proc/9191/comm /proc/92/comm /proc/93/comm /proc/93580/comm /proc/93604/comm /proc/93618/comm /proc/93641/comm /proc/94/comm /proc/94117/comm /proc/94309/comm /proc/94443/comm /proc/95843/comm /proc/95845/comm /proc/96/comm /proc/97/comm /proc/98/comm /proc/9808/comm /proc/99/comm /proc/self/comm /proc/thread-self/comm
+ '[' -n '' ']'
+ rm -f /var/run/libvirtd.pid
+ [[ -c /dev/kvm ]]
+ chmod 660 /dev/kvm
+ chown root:kvm /dev/kvm
+ CGROUPS=
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/blkio ']'
+ grep -w blkio /sys/fs/cgroup/cgroup.controllers
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/cpu ']'
+ grep -w cpu /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=cpu,
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/devices ']'
+ grep -w devices /sys/fs/cgroup/cgroup.controllers
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/freezer ']'
+ grep -w freezer /sys/fs/cgroup/cgroup.controllers
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/hugetlb ']'
+ grep -w hugetlb /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=hugetlb,
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/memory ']'
+ grep -w memory /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=memory,
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/net_cls ']'
+ grep -w net_cls /sys/fs/cgroup/cgroup.controllers
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/perf_event ']'
+ grep -w perf_event /sys/fs/cgroup/cgroup.controllers
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/rdma ']'
+ grep -w rdma /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=rdma,
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/misc ']'
+ grep -w misc /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=misc,
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/pids ']'
+ grep -w pids /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=pids,
+ cgcreate -g cpu,hugetlb,memory,rdma,misc,pids:/osh-libvirt
++ cat /proc/meminfo
++ grep HugePages_Total
++ tr -cd '[:digit:]'
+ hp_count=0
+ '[' 00 -gt 0 ']'
+ '[' -n 457eb676-33da-42ec-9a8c-9293d545c337 ']'
+ cgexec -g cpu,hugetlb,memory,rdma,misc,pids:/osh-libvirt systemd-run --scope --slice=system libvirtd --listen
++ mktemp --suffix .xml
+ tmpsecret=/tmp/tmp.r1vyCOMNqO.xml
+ '[' -n '' ']'
+ trap cleanup EXIT
+ TIMEOUT=60
+ [[ ! -f /var/run/libvirtd.pid ]]
+ [[ 60 -gt 0 ]]
+ let TIMEOUT-=1
+ sleep 1
Running as unit: run-r90096fc99c8a4096be862e0aa63558ee.scope; invocation ID: bb67ceccfb1d4598bbeacd5d48f39bd7
+ [[ ! -f /var/run/libvirtd.pid ]]
+ TIMEOUT=10
+ [[ ! -e /var/run/libvirt/libvirt-sock ]]
+ '[' -z '' ']'
+ '[' -n cinder ']'
++ awk '/key/{print $3}' /etc/ceph/ceph.client.cinder.keyring
+ CEPH_CINDER_KEYRING=AQBrVqlpdqJeFRAAozFyZb1wHJy405x6mxkndQ==
+ '[' -n cinder ']'
+ create_virsh_libvirt_secret cinder 457eb676-33da-42ec-9a8c-9293d545c337 AQBrVqlpdqJeFRAAozFyZb1wHJy405x6mxkndQ==
+ sec_user=cinder
+ sec_uuid=457eb676-33da-42ec-9a8c-9293d545c337
+ sec_ceph_keyring=AQBrVqlpdqJeFRAAozFyZb1wHJy405x6mxkndQ==
+ cat
+ virsh secret-define --file /tmp/tmp.r1vyCOMNqO.xml
Secret 457eb676-33da-42ec-9a8c-9293d545c337 created

+ virsh secret-set-value --secret 457eb676-33da-42ec-9a8c-9293d545c337 --base64 AQBrVqlpdqJeFRAAozFyZb1wHJy405x6mxkndQ==
error: Passing secret value as command-line argument is insecure!
Secret value set

+ '[' -n '' ']'
+ '[' -n '' ']'
+ cleanup
+ rm -f /tmp/tmp.r1vyCOMNqO.xml
+ '[' -n '' ']'
++ cat /var/run/libvirtd.pid
+ LIBVIRTD_PID=188477
+ kill 188477
+ tail --pid=188477 -f /dev/null
+ cgexec -g cpu,hugetlb,memory,rdma,misc,pids:/osh-libvirt systemd-run --scope --slice=system libvirtd --listen
Running as unit: run-r3bd15df8b1ad4231864c63b4b26fdd4f.scope; invocation ID: d41ef64733d444e3b2434b48a61902ed