+ wait_for_file /etc/pki/CA/cacert.pem
+ local file=/etc/pki/CA/cacert.pem
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ sleep 1
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ sleep 1
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ sleep 1
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ sleep 1
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ sleep 1
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ wait_for_file /etc/pki/qemu/ca-cert.pem
+ local file=/etc/pki/qemu/ca-cert.pem
+ '[' '!' -f /etc/pki/qemu/ca-cert.pem ']'
+ wait_for_file /etc/pki/libvirt/servercert.pem
+ local file=/etc/pki/libvirt/servercert.pem
+ '[' '!' -f /etc/pki/libvirt/servercert.pem ']'
+ wait_for_file /etc/pki/libvirt/clientcert.pem
+ local file=/etc/pki/libvirt/clientcert.pem
+ '[' '!' -f /etc/pki/libvirt/clientcert.pem ']'
+ wait_for_file /etc/pki/qemu/server-cert.pem
+ local file=/etc/pki/qemu/server-cert.pem
+ '[' '!' -f /etc/pki/qemu/server-cert.pem ']'
+ wait_for_file /etc/pki/qemu/client-cert.pem
+ local file=/etc/pki/qemu/client-cert.pem
+ '[' '!' -f /etc/pki/qemu/client-cert.pem ']'
+ wait_for_file /etc/pki/libvirt/private/serverkey.pem
+ local file=/etc/pki/libvirt/private/serverkey.pem
+ '[' '!' -f /etc/pki/libvirt/private/serverkey.pem ']'
+ wait_for_file /etc/pki/libvirt/private/clientkey.pem
+ local file=/etc/pki/libvirt/private/clientkey.pem
+ '[' '!' -f /etc/pki/libvirt/private/clientkey.pem ']'
+ wait_for_file /etc/pki/qemu/server-key.pem
+ local file=/etc/pki/qemu/server-key.pem
+ '[' '!' -f /etc/pki/qemu/server-key.pem ']'
+ wait_for_file /etc/pki/qemu/client-key.pem
+ local file=/etc/pki/qemu/client-key.pem
+ '[' '!' -f /etc/pki/qemu/client-key.pem ']'
+ wait_for_file /etc/pki/libvirt-vnc/ca-cert.pem
+ local file=/etc/pki/libvirt-vnc/ca-cert.pem
+ '[' '!' -f /etc/pki/libvirt-vnc/ca-cert.pem ']'
+ wait_for_file /etc/pki/libvirt-vnc/server-cert.pem
+ local file=/etc/pki/libvirt-vnc/server-cert.pem
+ '[' '!' -f /etc/pki/libvirt-vnc/server-cert.pem ']'
+ wait_for_file /etc/pki/libvirt-vnc/server-key.pem
+ local file=/etc/pki/libvirt-vnc/server-key.pem
+ '[' '!' -f /etc/pki/libvirt-vnc/server-key.pem ']'
++ grep -w libvirtd
++ cat /proc/1/comm /proc/10/comm /proc/100/comm /proc/101696/comm /proc/10173/comm /proc/10196/comm /proc/102/comm /proc/103/comm /proc/104/comm /proc/105/comm /proc/106/comm /proc/107796/comm /proc/107819/comm /proc/107880/comm /proc/108/comm /proc/108208/comm /proc/108221/comm /proc/108222/comm /proc/109/comm /proc/10934/comm /proc/10935/comm /proc/109402/comm /proc/109429/comm /proc/109456/comm /proc/109480/comm /proc/109651/comm /proc/11/comm /proc/110/comm /proc/110297/comm /proc/110466/comm /proc/110469/comm /proc/110647/comm /proc/110742/comm /proc/111/comm /proc/111048/comm /proc/111239/comm /proc/111361/comm /proc/111385/comm /proc/111533/comm /proc/111549/comm /proc/111555/comm /proc/111703/comm /proc/111705/comm /proc/111715/comm /proc/111770/comm /proc/112/comm /proc/113/comm /proc/113150/comm /proc/113179/comm /proc/113216/comm /proc/113246/comm /proc/113774/comm /proc/114/comm /proc/114959/comm /proc/114969/comm /proc/115/comm /proc/115196/comm /proc/115208/comm /proc/115209/comm /proc/116/comm /proc/116844/comm /proc/116914/comm /proc/116936/comm /proc/116945/comm /proc/117/comm /proc/118023/comm /proc/1181/comm /proc/119606/comm /proc/12/comm /proc/122771/comm /proc/122789/comm /proc/122790/comm /proc/123155/comm /proc/123167/comm /proc/123168/comm /proc/12377/comm /proc/12408/comm /proc/12464/comm /proc/124660/comm /proc/12489/comm /proc/12509/comm /proc/126495/comm /proc/126526/comm /proc/126529/comm /proc/126564/comm /proc/127138/comm /proc/12740/comm /proc/127557/comm /proc/12770/comm /proc/127748/comm /proc/12825/comm /proc/12851/comm /proc/1286/comm /proc/1287/comm /proc/12870/comm /proc/1288/comm /proc/1289/comm /proc/129128/comm /proc/129160/comm /proc/129768/comm /proc/13/comm /proc/130524/comm /proc/131265/comm /proc/131552/comm /proc/131553/comm /proc/131722/comm /proc/133100/comm /proc/133157/comm /proc/133159/comm /proc/133445/comm /proc/134635/comm /proc/134660/comm /proc/134661/comm /proc/136004/comm /proc/136005/comm /proc/136006/comm /proc/1388/comm /proc/1392/comm /proc/14/comm /proc/143122/comm /proc/143123/comm /proc/143127/comm /proc/143133/comm /proc/143354/comm /proc/143363/comm /proc/1457/comm /proc/1461/comm /proc/1470/comm /proc/15/comm /proc/155412/comm /proc/155436/comm /proc/155750/comm /proc/155783/comm /proc/155796/comm /proc/155828/comm /proc/155829/comm /proc/155830/comm /proc/155831/comm /proc/156822/comm /proc/156847/comm /proc/157258/comm /proc/157282/comm /proc/157515/comm /proc/157890/comm /proc/157891/comm /proc/158068/comm /proc/158179/comm /proc/158202/comm /proc/158334/comm /proc/158425/comm /proc/158442/comm /proc/158448/comm /proc/158580/comm /proc/158581/comm /proc/158591/comm /proc/158684/comm /proc/16/comm /proc/160244/comm /proc/160329/comm /proc/160379/comm /proc/160562/comm /proc/160589/comm /proc/160610/comm /proc/160635/comm /proc/160648/comm /proc/160674/comm /proc/160697/comm /proc/161064/comm /proc/161097/comm /proc/161160/comm /proc/161184/comm /proc/161281/comm /proc/161827/comm /proc/161836/comm /proc/161860/comm /proc/165926/comm /proc/166391/comm /proc/166682/comm /proc/167026/comm /proc/168/comm /proc/169/comm /proc/169077/comm /proc/169080/comm /proc/170/comm /proc/170985/comm /proc/170999/comm /proc/171/comm /proc/171000/comm /proc/171197/comm /proc/171212/comm /proc/171213/comm /proc/171840/comm /proc/171859/comm /proc/172/comm /proc/172023/comm /proc/172054/comm /proc/172056/comm /proc/172067/comm /proc/172069/comm /proc/172264/comm /proc/172266/comm /proc/172365/comm /proc/172367/comm /proc/172957/comm /proc/172980/comm /proc/173/comm /proc/173221/comm /proc/173238/comm /proc/173244/comm /proc/173356/comm /proc/173358/comm /proc/173368/comm /proc/173502/comm /proc/173994/comm /proc/174/comm /proc/174669/comm /proc/174715/comm /proc/174760/comm /proc/174790/comm /proc/174794/comm /proc/174825/comm /proc/174832/comm /proc/174858/comm /proc/174911/comm /proc/174944/comm /proc/174989/comm /proc/175/comm /proc/175302/comm /proc/175334/comm /proc/175337/comm /proc/175366/comm /proc/175762/comm /proc/175905/comm /proc/175940/comm /proc/175949/comm /proc/175950/comm /proc/176/comm /proc/17627/comm /proc/178/comm /proc/179/comm /proc/179475/comm /proc/179520/comm /proc/18/comm /proc/180778/comm /proc/180859/comm /proc/180862/comm /proc/181/comm /proc/182/comm /proc/182512/comm /proc/183983/comm /proc/183984/comm /proc/183985/comm /proc/184/comm /proc/184253/comm /proc/184265/comm /proc/184296/comm /proc/184297/comm /proc/184315/comm /proc/184329/comm /proc/184330/comm /proc/184491/comm /proc/184494/comm /proc/184497/comm /proc/185/comm /proc/185075/comm /proc/185513/comm /proc/185687/comm /proc/186/comm /proc/186093/comm /proc/186673/comm /proc/186676/comm /proc/186677/comm /proc/186773/comm /proc/186943/comm /proc/186956/comm /proc/187/comm /proc/187255/comm /proc/187438/comm /proc/187456/comm /proc/187457/comm /proc/187458/comm /proc/187459/comm /proc/187460/comm /proc/187461/comm /proc/187551/comm /proc/187821/comm /proc/187987/comm /proc/187992/comm /proc/187996/comm /proc/188/comm /proc/188159/comm /proc/188289/comm /proc/188314/comm /proc/188377/comm /proc/188427/comm /proc/188456/comm /proc/188519/comm /proc/188636/comm /proc/188652/comm /proc/188658/comm /proc/188732/comm /proc/188733/comm /proc/188734/comm /proc/188744/comm /proc/188891/comm /proc/188916/comm /proc/188924/comm /proc/188925/comm /proc/188926/comm /proc/189/comm /proc/19/comm /proc/190/comm /proc/191/comm /proc/192/comm /proc/193/comm /proc/194/comm /proc/195/comm /proc/19761/comm /proc/19782/comm /proc/198/comm /proc/19801/comm /proc/19828/comm /proc/19848/comm /proc/2/comm /proc/20/comm /proc/21/comm /proc/216/comm /proc/21870/comm /proc/21873/comm /proc/21874/comm /proc/21887/comm /proc/219/comm /proc/22/comm /proc/220/comm /proc/225/comm /proc/24/comm /proc/247/comm /proc/24709/comm /proc/24978/comm /proc/24995/comm /proc/25/comm /proc/25021/comm /proc/25033/comm /proc/26/comm /proc/268/comm /proc/27/comm /proc/28/comm /proc/282/comm /proc/285/comm /proc/286/comm /proc/288/comm /proc/289/comm /proc/290/comm /proc/29244/comm /proc/29521/comm /proc/29540/comm /proc/29565/comm /proc/29577/comm /proc/3/comm /proc/30/comm /proc/30218/comm /proc/31/comm /proc/310/comm /proc/311/comm /proc/315/comm /proc/32/comm /proc/33/comm /proc/34/comm /proc/34011/comm /proc/342/comm /proc/34290/comm /proc/34307/comm /proc/34331/comm /proc/34344/comm /proc/350/comm /proc/357/comm /proc/35919/comm /proc/35921/comm /proc/36/comm /proc/37/comm /proc/38/comm /proc/385/comm /proc/39/comm /proc/391/comm /proc/394/comm /proc/395/comm /proc/39779/comm /proc/39789/comm /proc/398/comm /proc/39838/comm /proc/39839/comm /proc/39866/comm /proc/39870/comm /proc/39874/comm /proc/39930/comm /proc/39932/comm /proc/39950/comm /proc/4/comm /proc/40/comm /proc/40020/comm /proc/40051/comm /proc/40057/comm /proc/40077/comm /proc/40194/comm /proc/40244/comm /proc/40399/comm /proc/40422/comm /proc/40449/comm /proc/41130/comm /proc/41139/comm /proc/41175/comm /proc/41188/comm /proc/41420/comm /proc/41627/comm /proc/42/comm /proc/42054/comm /proc/42375/comm /proc/42484/comm /proc/42508/comm /proc/42549/comm /proc/42878/comm /proc/42901/comm /proc/42916/comm /proc/42939/comm /proc/42970/comm /proc/42989/comm /proc/43/comm /proc/43338/comm /proc/43362/comm /proc/43505/comm /proc/43854/comm /proc/43886/comm /proc/43920/comm /proc/43944/comm /proc/43970/comm /proc/44/comm /proc/44001/comm /proc/44094/comm /proc/44138/comm /proc/44185/comm /proc/449/comm /proc/45/comm /proc/46/comm /proc/46208/comm /proc/46252/comm /proc/46302/comm /proc/46327/comm /proc/46541/comm /proc/46554/comm /proc/46594/comm /proc/46686/comm /proc/47037/comm /proc/47061/comm /proc/47135/comm /proc/47159/comm /proc/47206/comm /proc/47345/comm /proc/47511/comm /proc/47534/comm /proc/47655/comm /proc/47846/comm /proc/47869/comm /proc/48/comm /proc/48176/comm /proc/48209/comm /proc/48527/comm /proc/48581/comm /proc/48678/comm /proc/487/comm /proc/48706/comm /proc/48762/comm /proc/48821/comm /proc/49/comm /proc/5/comm /proc/50/comm /proc/50554/comm /proc/50586/comm /proc/50726/comm /proc/50749/comm /proc/50814/comm /proc/50928/comm /proc/51/comm /proc/51106/comm /proc/51149/comm /proc/51264/comm /proc/517/comm /proc/52/comm /proc/54/comm /proc/55/comm /proc/55024/comm /proc/55048/comm /proc/55669/comm /proc/55699/comm /proc/55703/comm /proc/55744/comm /proc/55746/comm /proc/55776/comm /proc/55919/comm /proc/55941/comm /proc/55995/comm /proc/56/comm /proc/56033/comm /proc/56075/comm /proc/56183/comm /proc/57/comm /proc/58/comm /proc/59874/comm /proc/59906/comm /proc/6/comm /proc/60/comm /proc/60043/comm /proc/60067/comm /proc/60095/comm /proc/60122/comm /proc/60139/comm /proc/60165/comm /proc/60382/comm /proc/60508/comm /proc/608/comm /proc/60949/comm /proc/60984/comm /proc/61/comm /proc/611/comm /proc/61215/comm /proc/61228/comm /proc/61229/comm /proc/61239/comm /proc/61240/comm /proc/61389/comm /proc/614/comm /proc/61500/comm /proc/61523/comm /proc/61544/comm /proc/61567/comm /proc/61839/comm /proc/61868/comm /proc/61902/comm /proc/61938/comm /proc/61972/comm /proc/62/comm /proc/620/comm /proc/62001/comm /proc/621/comm /proc/62283/comm /proc/62309/comm /proc/62517/comm /proc/62618/comm /proc/62642/comm /proc/62967/comm /proc/62990/comm /proc/63/comm /proc/63109/comm /proc/63133/comm /proc/63134/comm /proc/63135/comm /proc/63136/comm /proc/63137/comm /proc/63157/comm /proc/63181/comm /proc/63579/comm /proc/63634/comm /proc/637/comm /proc/638/comm /proc/63884/comm /proc/63907/comm /proc/64/comm /proc/64048/comm /proc/64086/comm /proc/64103/comm /proc/64150/comm /proc/64252/comm /proc/64313/comm /proc/64353/comm /proc/64748/comm /proc/64801/comm /proc/64914/comm /proc/64982/comm /proc/65118/comm /proc/65229/comm /proc/65264/comm /proc/65296/comm /proc/65402/comm /proc/65417/comm /proc/65443/comm /proc/65470/comm /proc/65787/comm /proc/65805/comm /proc/65818/comm /proc/65937/comm /proc/65938/comm /proc/65948/comm /proc/66/comm /proc/66015/comm /proc/67/comm /proc/67720/comm /proc/67745/comm /proc/68/comm /proc/69/comm /proc/692/comm /proc/695/comm /proc/696/comm /proc/70/comm /proc/709/comm /proc/71144/comm /proc/71159/comm /proc/71160/comm /proc/71161/comm /proc/71162/comm /proc/71166/comm /proc/71167/comm /proc/71169/comm /proc/71170/comm /proc/71172/comm /proc/71173/comm /proc/71174/comm /proc/71175/comm /proc/71177/comm /proc/71178/comm /proc/72/comm /proc/73/comm /proc/74/comm /proc/75/comm /proc/76/comm /proc/76810/comm /proc/76944/comm /proc/77090/comm /proc/77113/comm /proc/77205/comm /proc/77222/comm /proc/77228/comm /proc/77324/comm /proc/77325/comm /proc/77335/comm /proc/77469/comm /proc/78/comm /proc/78417/comm /proc/78497/comm /proc/79/comm /proc/8/comm /proc/80/comm /proc/81/comm /proc/82/comm /proc/83802/comm /proc/83815/comm /proc/84/comm /proc/84612/comm /proc/84636/comm /proc/85/comm /proc/85315/comm /proc/854/comm /proc/86/comm /proc/87/comm /proc/88/comm /proc/88018/comm /proc/90/comm /proc/9067/comm /proc/90727/comm /proc/90751/comm /proc/9084/comm /proc/90932/comm /proc/90949/comm /proc/90955/comm /proc/91/comm /proc/9100/comm /proc/91068/comm /proc/91069/comm /proc/91079/comm /proc/91282/comm /proc/9182/comm /proc/92/comm /proc/93/comm /proc/94/comm /proc/94842/comm /proc/94867/comm /proc/94887/comm /proc/94910/comm /proc/95250/comm /proc/95405/comm /proc/96/comm /proc/96074/comm /proc/96787/comm /proc/97/comm /proc/9799/comm /proc/98/comm /proc/98713/comm /proc/99/comm /proc/self/comm /proc/thread-self/comm
+ '[' -n '' ']'
+ rm -f /var/run/libvirtd.pid
+ [[ -c /dev/kvm ]]
+ chmod 660 /dev/kvm
+ chown root:kvm /dev/kvm
+ CGROUPS=
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/blkio ']'
+ grep -w blkio /sys/fs/cgroup/cgroup.controllers
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/cpu ']'
+ grep -w cpu /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=cpu,
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/devices ']'
+ grep -w devices /sys/fs/cgroup/cgroup.controllers
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/freezer ']'
+ grep -w freezer /sys/fs/cgroup/cgroup.controllers
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/hugetlb ']'
+ grep -w hugetlb /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=hugetlb,
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/memory ']'
+ grep -w memory /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=memory,
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/net_cls ']'
+ grep -w net_cls /sys/fs/cgroup/cgroup.controllers
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/perf_event ']'
+ grep -w perf_event /sys/fs/cgroup/cgroup.controllers
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/rdma ']'
+ grep -w rdma /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=rdma,
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/misc ']'
+ grep -w misc /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=misc,
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/pids ']'
+ grep -w pids /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=pids,
+ cgcreate -g cpu,hugetlb,memory,rdma,misc,pids:/osh-libvirt
++ cat /proc/meminfo
++ grep HugePages_Total
++ tr -cd '[:digit:]'
+ hp_count=0
+ '[' 00 -gt 0 ']'
+ '[' -n 457eb676-33da-42ec-9a8c-9293d545c337 ']'
+ cgexec -g cpu,hugetlb,memory,rdma,misc,pids:/osh-libvirt systemd-run --scope --slice=system libvirtd --listen
++ mktemp --suffix .xml
+ tmpsecret=/tmp/tmp.H0w8lP3uDR.xml
+ '[' -n '' ']'
+ trap cleanup EXIT
+ TIMEOUT=60
+ [[ ! -f /var/run/libvirtd.pid ]]
+ [[ 60 -gt 0 ]]
+ let TIMEOUT-=1
+ sleep 1
Running as unit: run-r2c8d607d051b4b368455ae6d73decb22.scope; invocation ID: f1e5f30379a24e3bb8ee5bb5ffc847ef
+ [[ ! -f /var/run/libvirtd.pid ]]
+ TIMEOUT=10
+ [[ ! -e /var/run/libvirt/libvirt-sock ]]
+ '[' -z '' ']'
+ '[' -n cinder ']'
++ awk '/key/{print $3}' /etc/ceph/ceph.client.cinder.keyring
+ CEPH_CINDER_KEYRING=AQB/igxq/H0KExAAJT+8yUQPUizCfP0SQ+Ggdg==
+ '[' -n cinder ']'
+ create_virsh_libvirt_secret cinder 457eb676-33da-42ec-9a8c-9293d545c337 AQB/igxq/H0KExAAJT+8yUQPUizCfP0SQ+Ggdg==
+ sec_user=cinder
+ sec_uuid=457eb676-33da-42ec-9a8c-9293d545c337
+ sec_ceph_keyring=AQB/igxq/H0KExAAJT+8yUQPUizCfP0SQ+Ggdg==
+ cat
+ virsh secret-define --file /tmp/tmp.H0w8lP3uDR.xml
Secret 457eb676-33da-42ec-9a8c-9293d545c337 created

+ virsh secret-set-value --secret 457eb676-33da-42ec-9a8c-9293d545c337 --base64 AQB/igxq/H0KExAAJT+8yUQPUizCfP0SQ+Ggdg==
error: Passing secret value as command-line argument is insecure!
Secret value set

+ '[' -n '' ']'
+ '[' -n '' ']'
+ cleanup
+ rm -f /tmp/tmp.H0w8lP3uDR.xml
+ '[' -n '' ']'
++ cat /var/run/libvirtd.pid
+ LIBVIRTD_PID=188946
+ kill 188946
+ tail --pid=188946 -f /dev/null
+ cgexec -g cpu,hugetlb,memory,rdma,misc,pids:/osh-libvirt systemd-run --scope --slice=system libvirtd --listen
Running as unit: run-r2fcce1e5bf164dfba36dd5b28b262c16.scope; invocation ID: 975616532c9a46278a07d2f267148624