+ wait_for_file /etc/pki/CA/cacert.pem
+ local file=/etc/pki/CA/cacert.pem
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ sleep 1
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ sleep 1
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ sleep 1
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ sleep 1
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ sleep 1
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ wait_for_file /etc/pki/qemu/ca-cert.pem
+ local file=/etc/pki/qemu/ca-cert.pem
+ '[' '!' -f /etc/pki/qemu/ca-cert.pem ']'
+ wait_for_file /etc/pki/libvirt/servercert.pem
+ local file=/etc/pki/libvirt/servercert.pem
+ '[' '!' -f /etc/pki/libvirt/servercert.pem ']'
+ wait_for_file /etc/pki/libvirt/clientcert.pem
+ local file=/etc/pki/libvirt/clientcert.pem
+ '[' '!' -f /etc/pki/libvirt/clientcert.pem ']'
+ wait_for_file /etc/pki/qemu/server-cert.pem
+ local file=/etc/pki/qemu/server-cert.pem
+ '[' '!' -f /etc/pki/qemu/server-cert.pem ']'
+ wait_for_file /etc/pki/qemu/client-cert.pem
+ local file=/etc/pki/qemu/client-cert.pem
+ '[' '!' -f /etc/pki/qemu/client-cert.pem ']'
+ wait_for_file /etc/pki/libvirt/private/serverkey.pem
+ local file=/etc/pki/libvirt/private/serverkey.pem
+ '[' '!' -f /etc/pki/libvirt/private/serverkey.pem ']'
+ wait_for_file /etc/pki/libvirt/private/clientkey.pem
+ local file=/etc/pki/libvirt/private/clientkey.pem
+ '[' '!' -f /etc/pki/libvirt/private/clientkey.pem ']'
+ wait_for_file /etc/pki/qemu/server-key.pem
+ local file=/etc/pki/qemu/server-key.pem
+ '[' '!' -f /etc/pki/qemu/server-key.pem ']'
+ wait_for_file /etc/pki/qemu/client-key.pem
+ local file=/etc/pki/qemu/client-key.pem
+ '[' '!' -f /etc/pki/qemu/client-key.pem ']'
+ wait_for_file /etc/pki/libvirt-vnc/ca-cert.pem
+ local file=/etc/pki/libvirt-vnc/ca-cert.pem
+ '[' '!' -f /etc/pki/libvirt-vnc/ca-cert.pem ']'
+ wait_for_file /etc/pki/libvirt-vnc/server-cert.pem
+ local file=/etc/pki/libvirt-vnc/server-cert.pem
+ '[' '!' -f /etc/pki/libvirt-vnc/server-cert.pem ']'
+ wait_for_file /etc/pki/libvirt-vnc/server-key.pem
+ local file=/etc/pki/libvirt-vnc/server-key.pem
+ '[' '!' -f /etc/pki/libvirt-vnc/server-key.pem ']'
++ grep -w libvirtd
++ cat /proc/1/comm /proc/10/comm /proc/100/comm /proc/100238/comm /proc/102/comm /proc/103/comm /proc/10353/comm /proc/104/comm /proc/105/comm /proc/105351/comm /proc/105355/comm /proc/105952/comm /proc/105975/comm /proc/106/comm /proc/106317/comm /proc/106517/comm /proc/106532/comm /proc/106533/comm /proc/107520/comm /proc/107548/comm /proc/107638/comm /proc/107661/comm /proc/108/comm /proc/108007/comm /proc/108218/comm /proc/108220/comm /proc/108797/comm /proc/109/comm /proc/109203/comm /proc/109596/comm /proc/109620/comm /proc/109752/comm /proc/109769/comm /proc/109775/comm /proc/109904/comm /proc/109905/comm /proc/109915/comm /proc/11/comm /proc/110/comm /proc/110075/comm /proc/1108/comm /proc/111/comm /proc/11116/comm /proc/11117/comm /proc/111645/comm /proc/111671/comm /proc/111710/comm /proc/111741/comm /proc/112/comm /proc/113/comm /proc/114/comm /proc/115/comm /proc/116/comm /proc/116782/comm /proc/117/comm /proc/118097/comm /proc/12/comm /proc/120184/comm /proc/120599/comm /proc/121849/comm /proc/121870/comm /proc/121871/comm /proc/123321/comm /proc/124800/comm /proc/124824/comm /proc/124885/comm /proc/124910/comm /proc/125099/comm /proc/125407/comm /proc/12545/comm /proc/12575/comm /proc/125847/comm /proc/125878/comm /proc/126097/comm /proc/12623/comm /proc/12656/comm /proc/12668/comm /proc/126876/comm /proc/127466/comm /proc/127490/comm /proc/127937/comm /proc/12906/comm /proc/12936/comm /proc/129839/comm /proc/12991/comm /proc/13/comm /proc/13015/comm /proc/13036/comm /proc/131255/comm /proc/131331/comm /proc/132432/comm /proc/133060/comm /proc/133085/comm /proc/133086/comm /proc/134368/comm /proc/134369/comm /proc/14/comm /proc/141516/comm /proc/141517/comm /proc/141519/comm /proc/141524/comm /proc/141646/comm /proc/142211/comm /proc/142242/comm /proc/142371/comm /proc/142530/comm /proc/142641/comm /proc/142675/comm /proc/142688/comm /proc/142721/comm /proc/142722/comm /proc/142723/comm /proc/142724/comm /proc/143863/comm /proc/143886/comm /proc/144201/comm /proc/144225/comm /proc/1443/comm /proc/144409/comm /proc/144932/comm /proc/145121/comm /proc/145146/comm /proc/145329/comm /proc/145346/comm /proc/145372/comm /proc/145443/comm /proc/145444/comm /proc/145454/comm /proc/145677/comm /proc/146174/comm /proc/15/comm /proc/1561/comm /proc/1562/comm /proc/1563/comm /proc/1564/comm /proc/1568/comm /proc/159133/comm /proc/159238/comm /proc/159336/comm /proc/159473/comm /proc/159517/comm /proc/159540/comm /proc/159572/comm /proc/159596/comm /proc/159628/comm /proc/159644/comm /proc/159686/comm /proc/159839/comm /proc/159930/comm /proc/159954/comm /proc/16/comm /proc/160707/comm /proc/160730/comm /proc/160737/comm /proc/161008/comm /proc/1635/comm /proc/1639/comm /proc/1648/comm /proc/165/comm /proc/165102/comm /proc/165115/comm /proc/165407/comm /proc/165711/comm /proc/165756/comm /proc/165839/comm /proc/166/comm /proc/167/comm /proc/167205/comm /proc/167228/comm /proc/167248/comm /proc/168/comm /proc/168115/comm /proc/168514/comm /proc/169/comm /proc/170/comm /proc/170024/comm /proc/170099/comm /proc/170110/comm /proc/170363/comm /proc/170364/comm /proc/170535/comm /proc/170568/comm /proc/170605/comm /proc/170606/comm /proc/170607/comm /proc/170608/comm /proc/171/comm /proc/171469/comm /proc/171475/comm /proc/171763/comm /proc/171764/comm /proc/171767/comm /proc/171768/comm /proc/172/comm /proc/172299/comm /proc/172493/comm /proc/172518/comm /proc/172742/comm /proc/172760/comm /proc/172771/comm /proc/172825/comm /proc/172826/comm /proc/172836/comm /proc/173/comm /proc/173017/comm /proc/174/comm /proc/174375/comm /proc/174431/comm /proc/174443/comm /proc/174487/comm /proc/174509/comm /proc/174510/comm /proc/174606/comm /proc/174615/comm /proc/174616/comm /proc/174655/comm /proc/174918/comm /proc/174928/comm /proc/174970/comm /proc/174990/comm /proc/175/comm /proc/175012/comm /proc/175337/comm /proc/175662/comm /proc/175687/comm /proc/175934/comm /proc/175947/comm /proc/177/comm /proc/178/comm /proc/178835/comm /proc/179259/comm /proc/179444/comm /proc/179466/comm /proc/18/comm /proc/180/comm /proc/180691/comm /proc/180692/comm /proc/180701/comm /proc/181918/comm /proc/181923/comm /proc/182/comm /proc/183630/comm /proc/183724/comm /proc/183876/comm /proc/183877/comm /proc/183878/comm /proc/184/comm /proc/184134/comm /proc/184151/comm /proc/184177/comm /proc/184178/comm /proc/184193/comm /proc/184205/comm /proc/184206/comm /proc/184457/comm /proc/184460/comm /proc/184463/comm /proc/184768/comm /proc/185/comm /proc/185161/comm /proc/185493/comm /proc/185792/comm /proc/186/comm /proc/186050/comm /proc/186371/comm /proc/186763/comm /proc/186788/comm /proc/186800/comm /proc/186930/comm /proc/187/comm /proc/187174/comm /proc/187185/comm /proc/187487/comm /proc/187798/comm /proc/187813/comm /proc/187814/comm /proc/187815/comm /proc/187816/comm /proc/187817/comm /proc/187818/comm /proc/187877/comm /proc/18808/comm /proc/188130/comm /proc/18828/comm /proc/188305/comm /proc/18848/comm /proc/188525/comm /proc/188550/comm /proc/188638/comm /proc/188705/comm /proc/188746/comm /proc/18875/comm /proc/188774/comm /proc/188821/comm /proc/188837/comm /proc/188845/comm /proc/18893/comm /proc/189/comm /proc/189014/comm /proc/189015/comm /proc/189028/comm /proc/189101/comm /proc/189102/comm /proc/189107/comm /proc/189141/comm /proc/189154/comm /proc/189168/comm /proc/189169/comm /proc/189170/comm /proc/19/comm /proc/190/comm /proc/191/comm /proc/192/comm /proc/193/comm /proc/195/comm /proc/2/comm /proc/20/comm /proc/209/comm /proc/21/comm /proc/21823/comm /proc/21875/comm /proc/21876/comm /proc/21889/comm /proc/219/comm /proc/22/comm /proc/220/comm /proc/225/comm /proc/24/comm /proc/247/comm /proc/25/comm /proc/25141/comm /proc/25417/comm /proc/25436/comm /proc/25460/comm /proc/25472/comm /proc/25963/comm /proc/26/comm /proc/262/comm /proc/27/comm /proc/28/comm /proc/288/comm /proc/289/comm /proc/290/comm /proc/292/comm /proc/29644/comm /proc/29906/comm /proc/29923/comm /proc/29947/comm /proc/29960/comm /proc/3/comm /proc/30/comm /proc/31/comm /proc/311/comm /proc/312/comm /proc/316/comm /proc/317/comm /proc/318/comm /proc/319/comm /proc/32/comm /proc/320/comm /proc/321/comm /proc/322/comm /proc/323/comm /proc/324/comm /proc/33/comm /proc/34/comm /proc/34140/comm /proc/34421/comm /proc/34439/comm /proc/34464/comm /proc/34476/comm /proc/35413/comm /proc/36/comm /proc/364/comm /proc/37/comm /proc/38/comm /proc/38917/comm /proc/38919/comm /proc/39/comm /proc/39043/comm /proc/39065/comm /proc/39088/comm /proc/39117/comm /proc/39132/comm /proc/396/comm /proc/4/comm /proc/40/comm /proc/400/comm /proc/41664/comm /proc/41665/comm /proc/41696/comm /proc/41724/comm /proc/41731/comm /proc/41745/comm /proc/41777/comm /proc/41804/comm /proc/41822/comm /proc/41823/comm /proc/41898/comm /proc/41917/comm /proc/41940/comm /proc/41955/comm /proc/42/comm /proc/42065/comm /proc/42120/comm /proc/42263/comm /proc/42288/comm /proc/42322/comm /proc/42996/comm /proc/43/comm /proc/43018/comm /proc/43049/comm /proc/43061/comm /proc/43316/comm /proc/43524/comm /proc/43612/comm /proc/43943/comm /proc/44/comm /proc/44364/comm /proc/44388/comm /proc/44418/comm /proc/44763/comm /proc/44792/comm /proc/44818/comm /proc/44853/comm /proc/44861/comm /proc/44909/comm /proc/45/comm /proc/45233/comm /proc/45257/comm /proc/453/comm /proc/45325/comm /proc/45756/comm /proc/45780/comm /proc/45801/comm /proc/45825/comm /proc/45840/comm /proc/45864/comm /proc/45976/comm /proc/46/comm /proc/46021/comm /proc/46067/comm /proc/47998/comm /proc/48/comm /proc/48023/comm /proc/48054/comm /proc/48078/comm /proc/48338/comm /proc/48350/comm /proc/48401/comm /proc/48490/comm /proc/48809/comm /proc/48832/comm /proc/48908/comm /proc/48932/comm /proc/48977/comm /proc/49/comm /proc/49076/comm /proc/49266/comm /proc/49290/comm /proc/49616/comm /proc/49757/comm /proc/49784/comm /proc/5/comm /proc/50/comm /proc/50044/comm /proc/50188/comm /proc/50215/comm /proc/50324/comm /proc/50382/comm /proc/50480/comm /proc/50508/comm /proc/50528/comm /proc/50623/comm /proc/51/comm /proc/51549/comm /proc/52/comm /proc/522/comm /proc/52394/comm /proc/52417/comm /proc/52574/comm /proc/52597/comm /proc/52628/comm /proc/52745/comm /proc/52911/comm /proc/53001/comm /proc/54/comm /proc/55/comm /proc/56/comm /proc/56950/comm /proc/56974/comm /proc/57/comm /proc/57597/comm /proc/57624/comm /proc/57655/comm /proc/57680/comm /proc/57694/comm /proc/57718/comm /proc/57836/comm /proc/57861/comm /proc/57924/comm /proc/57964/comm /proc/57996/comm /proc/58/comm /proc/58155/comm /proc/6/comm /proc/60/comm /proc/61/comm /proc/615/comm /proc/618/comm /proc/61954/comm /proc/62/comm /proc/62008/comm /proc/62058/comm /proc/621/comm /proc/62152/comm /proc/62180/comm /proc/62210/comm /proc/62234/comm /proc/62247/comm /proc/62273/comm /proc/624/comm /proc/625/comm /proc/62531/comm /proc/62796/comm /proc/62854/comm /proc/63/comm /proc/63196/comm /proc/63221/comm /proc/63384/comm /proc/63430/comm /proc/63431/comm /proc/63455/comm /proc/63459/comm /proc/63464/comm /proc/63596/comm /proc/63632/comm /proc/63784/comm /proc/63785/comm /proc/63809/comm /proc/63833/comm /proc/63995/comm /proc/64/comm /proc/64023/comm /proc/64056/comm /proc/64082/comm /proc/64097/comm /proc/64120/comm /proc/645/comm /proc/64688/comm /proc/64713/comm /proc/64744/comm /proc/64850/comm /proc/64875/comm /proc/64960/comm /proc/650/comm /proc/65235/comm /proc/65266/comm /proc/65267/comm /proc/65268/comm /proc/65269/comm /proc/65270/comm /proc/65335/comm /proc/65358/comm /proc/65632/comm /proc/65670/comm /proc/65695/comm /proc/65748/comm /proc/66/comm /proc/66026/comm /proc/66080/comm /proc/66396/comm /proc/66421/comm /proc/66479/comm /proc/66570/comm /proc/66607/comm /proc/66764/comm /proc/66806/comm /proc/66854/comm /proc/66948/comm /proc/66993/comm /proc/67/comm /proc/67245/comm /proc/67312/comm /proc/67313/comm /proc/67314/comm /proc/67479/comm /proc/67525/comm /proc/67557/comm /proc/67588/comm /proc/67712/comm /proc/67735/comm /proc/67955/comm /proc/67993/comm /proc/68/comm /proc/68442/comm /proc/68459/comm /proc/68465/comm /proc/68512/comm /proc/68513/comm /proc/68523/comm /proc/68679/comm /proc/69/comm /proc/70/comm /proc/70187/comm /proc/70210/comm /proc/705/comm /proc/708/comm /proc/709/comm /proc/71492/comm /proc/72/comm /proc/722/comm /proc/73/comm /proc/73404/comm /proc/73444/comm /proc/73445/comm /proc/73446/comm /proc/73447/comm /proc/73448/comm /proc/73450/comm /proc/73452/comm /proc/73455/comm /proc/73457/comm /proc/73458/comm /proc/73459/comm /proc/73461/comm /proc/73462/comm /proc/73463/comm /proc/73921/comm /proc/74/comm /proc/75/comm /proc/76/comm /proc/77395/comm /proc/78/comm /proc/79/comm /proc/79351/comm /proc/79374/comm /proc/79488/comm /proc/79505/comm /proc/79511/comm /proc/79558/comm /proc/79559/comm /proc/79569/comm /proc/79702/comm /proc/8/comm /proc/80/comm /proc/80879/comm /proc/80903/comm /proc/81/comm /proc/82/comm /proc/82874/comm /proc/84/comm /proc/85/comm /proc/86/comm /proc/86133/comm /proc/86146/comm /proc/867/comm /proc/86952/comm /proc/86975/comm /proc/87/comm /proc/87677/comm /proc/88/comm /proc/90/comm /proc/91/comm /proc/91356/comm /proc/92/comm /proc/92094/comm /proc/9248/comm /proc/9265/comm /proc/9281/comm /proc/93/comm /proc/93204/comm /proc/93228/comm /proc/93474/comm /proc/93492/comm /proc/93498/comm /proc/93616/comm /proc/93617/comm /proc/93627/comm /proc/9363/comm /proc/93780/comm /proc/94/comm /proc/96/comm /proc/97/comm /proc/97357/comm /proc/97382/comm /proc/97398/comm /proc/97428/comm /proc/97811/comm /proc/97923/comm /proc/98/comm /proc/98651/comm /proc/99/comm /proc/99452/comm /proc/99453/comm /proc/9982/comm /proc/self/comm /proc/thread-self/comm
+ '[' -n '' ']'
+ rm -f /var/run/libvirtd.pid
+ [[ -c /dev/kvm ]]
+ chmod 660 /dev/kvm
+ chown root:kvm /dev/kvm
+ CGROUPS=
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/blkio ']'
+ grep -w blkio /sys/fs/cgroup/cgroup.controllers
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/cpu ']'
+ grep -w cpu /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=cpu,
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/devices ']'
+ grep -w devices /sys/fs/cgroup/cgroup.controllers
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/freezer ']'
+ grep -w freezer /sys/fs/cgroup/cgroup.controllers
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/hugetlb ']'
+ grep -w hugetlb /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=hugetlb,
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/memory ']'
+ grep -w memory /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=memory,
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/net_cls ']'
+ grep -w net_cls /sys/fs/cgroup/cgroup.controllers
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/perf_event ']'
+ grep -w perf_event /sys/fs/cgroup/cgroup.controllers
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/rdma ']'
+ grep -w rdma /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=rdma,
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/misc ']'
+ grep -w misc /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=misc,
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/pids ']'
+ grep -w pids /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=pids,
+ cgcreate -g cpu,hugetlb,memory,rdma,misc,pids:/osh-libvirt
++ cat /proc/meminfo
++ grep HugePages_Total
++ tr -cd '[:digit:]'
+ hp_count=0
+ '[' 00 -gt 0 ']'
+ '[' -n 457eb676-33da-42ec-9a8c-9293d545c337 ']'
+ cgexec -g cpu,hugetlb,memory,rdma,misc,pids:/osh-libvirt systemd-run --scope --slice=system libvirtd --listen
++ mktemp --suffix .xml
+ tmpsecret=/tmp/tmp.zH83q8bKaB.xml
+ '[' -n '' ']'
+ trap cleanup EXIT
+ TIMEOUT=60
+ [[ ! -f /var/run/libvirtd.pid ]]
+ [[ 60 -gt 0 ]]
+ let TIMEOUT-=1
+ sleep 1
Running as unit: run-rfbadf2426de84f98859488fcb6769597.scope; invocation ID: e5436caecd4e49a5abb660a82288dbb6
+ [[ ! -f /var/run/libvirtd.pid ]]
+ TIMEOUT=10
+ [[ ! -e /var/run/libvirt/libvirt-sock ]]
+ '[' -z '' ']'
+ '[' -n cinder ']'
++ awk '/key/{print $3}' /etc/ceph/ceph.client.cinder.keyring
+ CEPH_CINDER_KEYRING=AQAFrHlqac0QERAAZyPzv27xQUcpCsHtf1P8sA==
+ '[' -n cinder ']'
+ create_virsh_libvirt_secret cinder 457eb676-33da-42ec-9a8c-9293d545c337 AQAFrHlqac0QERAAZyPzv27xQUcpCsHtf1P8sA==
+ sec_user=cinder
+ sec_uuid=457eb676-33da-42ec-9a8c-9293d545c337
+ sec_ceph_keyring=AQAFrHlqac0QERAAZyPzv27xQUcpCsHtf1P8sA==
+ cat
+ virsh secret-define --file /tmp/tmp.zH83q8bKaB.xml
Secret 457eb676-33da-42ec-9a8c-9293d545c337 created

+ virsh secret-set-value --secret 457eb676-33da-42ec-9a8c-9293d545c337 --base64 AQAFrHlqac0QERAAZyPzv27xQUcpCsHtf1P8sA==
error: Passing secret value as command-line argument is insecure!
Secret value set

+ '[' -n '' ']'
+ '[' -n '' ']'
+ cleanup
+ rm -f /tmp/tmp.zH83q8bKaB.xml
+ '[' -n '' ']'
++ cat /var/run/libvirtd.pid
+ LIBVIRTD_PID=189190
+ kill 189190
+ tail --pid=189190 -f /dev/null
+ cgexec -g cpu,hugetlb,memory,rdma,misc,pids:/osh-libvirt systemd-run --scope --slice=system libvirtd --listen
Running as unit: run-r50ff9291c8004bd6b946ea256867184b.scope; invocation ID: 5ea32d4b82d44cb5b3b7ad18e39cb001