+ wait_for_file /etc/pki/CA/cacert.pem
+ local file=/etc/pki/CA/cacert.pem
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ sleep 1
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ sleep 1
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ sleep 1
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ sleep 1
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ sleep 1
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ wait_for_file /etc/pki/qemu/ca-cert.pem
+ local file=/etc/pki/qemu/ca-cert.pem
+ '[' '!' -f /etc/pki/qemu/ca-cert.pem ']'
+ wait_for_file /etc/pki/libvirt/servercert.pem
+ local file=/etc/pki/libvirt/servercert.pem
+ '[' '!' -f /etc/pki/libvirt/servercert.pem ']'
+ wait_for_file /etc/pki/libvirt/clientcert.pem
+ local file=/etc/pki/libvirt/clientcert.pem
+ '[' '!' -f /etc/pki/libvirt/clientcert.pem ']'
+ wait_for_file /etc/pki/qemu/server-cert.pem
+ local file=/etc/pki/qemu/server-cert.pem
+ '[' '!' -f /etc/pki/qemu/server-cert.pem ']'
+ wait_for_file /etc/pki/qemu/client-cert.pem
+ local file=/etc/pki/qemu/client-cert.pem
+ '[' '!' -f /etc/pki/qemu/client-cert.pem ']'
+ wait_for_file /etc/pki/libvirt/private/serverkey.pem
+ local file=/etc/pki/libvirt/private/serverkey.pem
+ '[' '!' -f /etc/pki/libvirt/private/serverkey.pem ']'
+ wait_for_file /etc/pki/libvirt/private/clientkey.pem
+ local file=/etc/pki/libvirt/private/clientkey.pem
+ '[' '!' -f /etc/pki/libvirt/private/clientkey.pem ']'
+ wait_for_file /etc/pki/qemu/server-key.pem
+ local file=/etc/pki/qemu/server-key.pem
+ '[' '!' -f /etc/pki/qemu/server-key.pem ']'
+ wait_for_file /etc/pki/qemu/client-key.pem
+ local file=/etc/pki/qemu/client-key.pem
+ '[' '!' -f /etc/pki/qemu/client-key.pem ']'
+ wait_for_file /etc/pki/libvirt-vnc/ca-cert.pem
+ local file=/etc/pki/libvirt-vnc/ca-cert.pem
+ '[' '!' -f /etc/pki/libvirt-vnc/ca-cert.pem ']'
+ wait_for_file /etc/pki/libvirt-vnc/server-cert.pem
+ local file=/etc/pki/libvirt-vnc/server-cert.pem
+ '[' '!' -f /etc/pki/libvirt-vnc/server-cert.pem ']'
+ wait_for_file /etc/pki/libvirt-vnc/server-key.pem
+ local file=/etc/pki/libvirt-vnc/server-key.pem
+ '[' '!' -f /etc/pki/libvirt-vnc/server-key.pem ']'
++ grep -w libvirtd
++ cat /proc/1/comm /proc/10/comm /proc/100/comm /proc/101433/comm /proc/102/comm /proc/102993/comm /proc/103/comm /proc/10336/comm /proc/103934/comm /proc/104/comm /proc/105/comm /proc/106/comm /proc/108/comm /proc/10842/comm /proc/10843/comm /proc/109/comm /proc/11/comm /proc/110/comm /proc/110396/comm /proc/110420/comm /proc/1105/comm /proc/110872/comm /proc/110884/comm /proc/110885/comm /proc/111/comm /proc/112/comm /proc/112072/comm /proc/112096/comm /proc/112154/comm /proc/112179/comm /proc/112386/comm /proc/112387/comm /proc/112388/comm /proc/112389/comm /proc/112436/comm /proc/112586/comm /proc/112588/comm /proc/113/comm /proc/113097/comm /proc/113433/comm /proc/113709/comm /proc/114/comm /proc/114167/comm /proc/114190/comm /proc/114283/comm /proc/114301/comm /proc/114307/comm /proc/114366/comm /proc/114367/comm /proc/114377/comm /proc/114543/comm /proc/115/comm /proc/116/comm /proc/116032/comm /proc/116054/comm /proc/116096/comm /proc/116129/comm /proc/117/comm /proc/118908/comm /proc/12/comm /proc/120132/comm /proc/121146/comm /proc/12222/comm /proc/12253/comm /proc/12284/comm /proc/12334/comm /proc/12346/comm /proc/124598/comm /proc/124767/comm /proc/12583/comm /proc/12613/comm /proc/126473/comm /proc/126491/comm /proc/126492/comm /proc/12669/comm /proc/12693/comm /proc/12713/comm /proc/127848/comm /proc/128132/comm /proc/129342/comm /proc/129365/comm /proc/129380/comm /proc/129410/comm /proc/129967/comm /proc/13/comm /proc/130471/comm /proc/130674/comm /proc/131921/comm /proc/131949/comm /proc/132067/comm /proc/132092/comm /proc/134795/comm /proc/14/comm /proc/1436/comm /proc/147621/comm /proc/147629/comm /proc/148524/comm /proc/148702/comm /proc/149336/comm /proc/149363/comm /proc/149364/comm /proc/15/comm /proc/150530/comm /proc/150531/comm /proc/1543/comm /proc/1544/comm /proc/1545/comm /proc/1546/comm /proc/1550/comm /proc/157692/comm /proc/157693/comm /proc/157695/comm /proc/157697/comm /proc/157699/comm /proc/157813/comm /proc/158372/comm /proc/158395/comm /proc/158458/comm /proc/158459/comm /proc/158460/comm /proc/158753/comm /proc/158786/comm /proc/158799/comm /proc/158831/comm /proc/158832/comm /proc/158833/comm /proc/158835/comm /proc/16/comm /proc/160049/comm /proc/160073/comm /proc/160395/comm /proc/160419/comm /proc/160669/comm /proc/161164/comm /proc/161171/comm /proc/161355/comm /proc/161380/comm /proc/161591/comm /proc/161608/comm /proc/161614/comm /proc/161662/comm /proc/161663/comm /proc/161673/comm /proc/1617/comm /proc/161989/comm /proc/1621/comm /proc/1630/comm /proc/163429/comm /proc/163487/comm /proc/163666/comm /proc/163753/comm /proc/163778/comm /proc/163807/comm /proc/163841/comm /proc/163883/comm /proc/163916/comm /proc/163930/comm /proc/163972/comm /proc/163992/comm /proc/164034/comm /proc/164077/comm /proc/164480/comm /proc/164503/comm /proc/164857/comm /proc/164881/comm /proc/166/comm /proc/167/comm /proc/168/comm /proc/168738/comm /proc/169/comm /proc/169773/comm /proc/169911/comm /proc/170/comm /proc/170119/comm /proc/171/comm /proc/171764/comm /proc/172/comm /proc/172523/comm /proc/172539/comm /proc/173/comm /proc/173978/comm /proc/173980/comm /proc/173989/comm /proc/174/comm /proc/174335/comm /proc/174417/comm /proc/174452/comm /proc/174453/comm /proc/174454/comm /proc/174515/comm /proc/174570/comm /proc/174571/comm /proc/175127/comm /proc/175191/comm /proc/175193/comm /proc/175479/comm /proc/175496/comm /proc/175567/comm /proc/175568/comm /proc/175707/comm /proc/175710/comm /proc/176/comm /proc/176242/comm /proc/176247/comm /proc/176336/comm /proc/176359/comm /proc/176554/comm /proc/176570/comm /proc/176576/comm /proc/176623/comm /proc/176624/comm /proc/176643/comm /proc/176700/comm /proc/178/comm /proc/178291/comm /proc/178366/comm /proc/178383/comm /proc/178411/comm /proc/178430/comm /proc/178491/comm /proc/178555/comm /proc/178631/comm /proc/178661/comm /proc/178737/comm /proc/178742/comm /proc/178761/comm /proc/178829/comm /proc/178833/comm /proc/178834/comm /proc/179394/comm /proc/179425/comm /proc/179467/comm /proc/179468/comm /proc/179556/comm /proc/18/comm /proc/180/comm /proc/181/comm /proc/182733/comm /proc/183/comm /proc/184/comm /proc/184508/comm /proc/185468/comm /proc/186/comm /proc/187/comm /proc/187068/comm /proc/187069/comm /proc/187244/comm /proc/187659/comm /proc/187680/comm /proc/187700/comm /proc/187730/comm /proc/187742/comm /proc/187752/comm /proc/18778/comm /proc/187931/comm /proc/188/comm /proc/18800/comm /proc/18821/comm /proc/18850/comm /proc/18867/comm /proc/189/comm /proc/189134/comm /proc/189135/comm /proc/189136/comm /proc/189322/comm /proc/189340/comm /proc/189366/comm /proc/189367/comm /proc/189381/comm /proc/189393/comm /proc/189394/comm /proc/189752/comm /proc/189755/comm /proc/189759/comm /proc/189853/comm /proc/189871/comm /proc/19/comm /proc/190417/comm /proc/190860/comm /proc/191/comm /proc/191099/comm /proc/191366/comm /proc/191622/comm /proc/192/comm /proc/192001/comm /proc/192018/comm /proc/192039/comm /proc/192182/comm /proc/192382/comm /proc/192397/comm /proc/192768/comm /proc/193/comm /proc/193030/comm /proc/193053/comm /proc/193054/comm /proc/193055/comm /proc/193056/comm /proc/193057/comm /proc/193058/comm /proc/193060/comm /proc/193102/comm /proc/193644/comm /proc/193645/comm /proc/193708/comm /proc/193716/comm /proc/193717/comm /proc/193931/comm /proc/193955/comm /proc/194074/comm /proc/194109/comm /proc/194127/comm /proc/194153/comm /proc/194367/comm /proc/194371/comm /proc/194456/comm /proc/194458/comm /proc/194461/comm /proc/194491/comm /proc/194529/comm /proc/194535/comm /proc/194580/comm /proc/194611/comm /proc/194612/comm /proc/194616/comm /proc/194617/comm /proc/194618/comm /proc/196/comm /proc/2/comm /proc/20/comm /proc/201/comm /proc/21/comm /proc/215/comm /proc/21539/comm /proc/218/comm /proc/21835/comm /proc/21884/comm /proc/21885/comm /proc/219/comm /proc/21900/comm /proc/22/comm /proc/224/comm /proc/24/comm /proc/246/comm /proc/25/comm /proc/25130/comm /proc/25394/comm /proc/25413/comm /proc/25438/comm /proc/25451/comm /proc/26/comm /proc/27/comm /proc/28/comm /proc/285/comm /proc/293/comm /proc/295/comm /proc/296/comm /proc/29639/comm /proc/297/comm /proc/299/comm /proc/29910/comm /proc/29927/comm /proc/29950/comm /proc/29963/comm /proc/3/comm /proc/30/comm /proc/31/comm /proc/318/comm /proc/319/comm /proc/32/comm /proc/323/comm /proc/33/comm /proc/332/comm /proc/335/comm /proc/34/comm /proc/34459/comm /proc/34735/comm /proc/34752/comm /proc/34777/comm /proc/34789/comm /proc/35290/comm /proc/358/comm /proc/36/comm /proc/366/comm /proc/37/comm /proc/376/comm /proc/38/comm /proc/38249/comm /proc/38251/comm /proc/39/comm /proc/394/comm /proc/399/comm /proc/4/comm /proc/40/comm /proc/404/comm /proc/406/comm /proc/40601/comm /proc/40625/comm /proc/40646/comm /proc/40669/comm /proc/40688/comm /proc/407/comm /proc/40700/comm /proc/40747/comm /proc/40763/comm /proc/40765/comm /proc/40793/comm /proc/40864/comm /proc/40888/comm /proc/41072/comm /proc/41231/comm /proc/41255/comm /proc/41281/comm /proc/41982/comm /proc/42/comm /proc/42006/comm /proc/42024/comm /proc/42044/comm /proc/42479/comm /proc/42554/comm /proc/42891/comm /proc/43/comm /proc/43323/comm /proc/43353/comm /proc/43711/comm /proc/43738/comm /proc/43761/comm /proc/43788/comm /proc/43813/comm /proc/43838/comm /proc/44/comm /proc/44192/comm /proc/44216/comm /proc/44537/comm /proc/44709/comm /proc/44733/comm /proc/44770/comm /proc/44793/comm /proc/44807/comm /proc/44831/comm /proc/44946/comm /proc/44994/comm /proc/45/comm /proc/45041/comm /proc/46/comm /proc/463/comm /proc/466/comm /proc/467/comm /proc/47106/comm /proc/47137/comm /proc/47203/comm /proc/47226/comm /proc/47618/comm /proc/47632/comm /proc/47660/comm /proc/47780/comm /proc/48/comm /proc/48113/comm /proc/48136/comm /proc/48233/comm /proc/48258/comm /proc/48599/comm /proc/48622/comm /proc/48891/comm /proc/48918/comm /proc/49/comm /proc/49205/comm /proc/49320/comm /proc/49344/comm /proc/49453/comm /proc/49508/comm /proc/49605/comm /proc/49633/comm /proc/49680/comm /proc/49748/comm /proc/5/comm /proc/50/comm /proc/51/comm /proc/51531/comm /proc/51555/comm /proc/51725/comm /proc/51749/comm /proc/51777/comm /proc/51871/comm /proc/52/comm /proc/52073/comm /proc/52176/comm /proc/52250/comm /proc/530/comm /proc/54/comm /proc/55/comm /proc/56/comm /proc/56144/comm /proc/56171/comm /proc/56937/comm /proc/56961/comm /proc/57/comm /proc/57008/comm /proc/57033/comm /proc/57056/comm /proc/57080/comm /proc/57298/comm /proc/57321/comm /proc/57360/comm /proc/57455/comm /proc/57520/comm /proc/57723/comm /proc/58/comm /proc/58537/comm /proc/6/comm /proc/60/comm /proc/61/comm /proc/61650/comm /proc/61764/comm /proc/61791/comm /proc/61955/comm /proc/61979/comm /proc/61993/comm /proc/62/comm /proc/62016/comm /proc/62043/comm /proc/62067/comm /proc/623/comm /proc/62329/comm /proc/62520/comm /proc/626/comm /proc/629/comm /proc/62942/comm /proc/62985/comm /proc/63/comm /proc/63078/comm /proc/632/comm /proc/63294/comm /proc/63298/comm /proc/633/comm /proc/63311/comm /proc/63352/comm /proc/63353/comm /proc/63641/comm /proc/63665/comm /proc/63813/comm /proc/63836/comm /proc/63852/comm /proc/63886/comm /proc/63923/comm /proc/63955/comm /proc/63976/comm /proc/64/comm /proc/64000/comm /proc/64406/comm /proc/64436/comm /proc/64564/comm /proc/64714/comm /proc/64738/comm /proc/651/comm /proc/65217/comm /proc/65246/comm /proc/65282/comm /proc/65413/comm /proc/65500/comm /proc/65606/comm /proc/65629/comm /proc/657/comm /proc/66/comm /proc/66015/comm /proc/66047/comm /proc/66048/comm /proc/66049/comm /proc/66050/comm /proc/66051/comm /proc/66274/comm /proc/66297/comm /proc/66389/comm /proc/66446/comm /proc/66480/comm /proc/66686/comm /proc/66744/comm /proc/66835/comm /proc/66902/comm /proc/67/comm /proc/67004/comm /proc/67255/comm /proc/67298/comm /proc/67402/comm /proc/67458/comm /proc/67488/comm /proc/67734/comm /proc/67757/comm /proc/67783/comm /proc/67841/comm /proc/67888/comm /proc/67908/comm /proc/68/comm /proc/68290/comm /proc/68307/comm /proc/68313/comm /proc/68399/comm /proc/68400/comm /proc/68410/comm /proc/68474/comm /proc/69/comm /proc/70/comm /proc/70151/comm /proc/70175/comm /proc/715/comm /proc/718/comm /proc/719/comm /proc/72/comm /proc/73/comm /proc/732/comm /proc/73401/comm /proc/73475/comm /proc/73476/comm /proc/73477/comm /proc/73478/comm /proc/73479/comm /proc/73480/comm /proc/73485/comm /proc/73486/comm /proc/73488/comm /proc/73489/comm /proc/73490/comm /proc/73491/comm /proc/73492/comm /proc/73493/comm /proc/74/comm /proc/75/comm /proc/76/comm /proc/78/comm /proc/79/comm /proc/79254/comm /proc/79278/comm /proc/79520/comm /proc/79537/comm /proc/79543/comm /proc/79601/comm /proc/79602/comm /proc/79612/comm /proc/79749/comm /proc/8/comm /proc/80/comm /proc/80803/comm /proc/80828/comm /proc/81/comm /proc/82/comm /proc/82236/comm /proc/84/comm /proc/85/comm /proc/86/comm /proc/86240/comm /proc/86277/comm /proc/86922/comm /proc/86946/comm /proc/87/comm /proc/877/comm /proc/87808/comm /proc/88/comm /proc/90/comm /proc/90609/comm /proc/91/comm /proc/92/comm /proc/92061/comm /proc/9229/comm /proc/9248/comm /proc/9264/comm /proc/92853/comm /proc/93/comm /proc/93272/comm /proc/93297/comm /proc/93465/comm /proc/9347/comm /proc/93482/comm /proc/93488/comm /proc/93669/comm /proc/93670/comm /proc/93680/comm /proc/93879/comm /proc/94/comm /proc/96/comm /proc/97/comm /proc/97109/comm /proc/97132/comm /proc/97156/comm /proc/97193/comm /proc/97460/comm /proc/97547/comm /proc/98/comm /proc/98294/comm /proc/99/comm /proc/99524/comm /proc/9964/comm /proc/self/comm /proc/thread-self/comm
+ '[' -n '' ']'
+ rm -f /var/run/libvirtd.pid
+ [[ -c /dev/kvm ]]
+ chmod 660 /dev/kvm
+ chown root:kvm /dev/kvm
+ CGROUPS=
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/blkio ']'
+ grep -w blkio /sys/fs/cgroup/cgroup.controllers
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/cpu ']'
+ grep -w cpu /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=cpu,
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/devices ']'
+ grep -w devices /sys/fs/cgroup/cgroup.controllers
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/freezer ']'
+ grep -w freezer /sys/fs/cgroup/cgroup.controllers
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/hugetlb ']'
+ grep -w hugetlb /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=hugetlb,
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/memory ']'
+ grep -w memory /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=memory,
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/net_cls ']'
+ grep -w net_cls /sys/fs/cgroup/cgroup.controllers
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/perf_event ']'
+ grep -w perf_event /sys/fs/cgroup/cgroup.controllers
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/rdma ']'
+ grep -w rdma /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=rdma,
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/misc ']'
+ grep -w misc /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=misc,
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/pids ']'
+ grep -w pids /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=pids,
+ cgcreate -g cpu,hugetlb,memory,rdma,misc,pids:/osh-libvirt
++ grep HugePages_Total
++ cat /proc/meminfo
++ tr -cd '[:digit:]'
+ hp_count=0
+ '[' 00 -gt 0 ']'
+ '[' -n 457eb676-33da-42ec-9a8c-9293d545c337 ']'
+ cgexec -g cpu,hugetlb,memory,rdma,misc,pids:/osh-libvirt systemd-run --scope --slice=system libvirtd --listen
++ mktemp --suffix .xml
+ tmpsecret=/tmp/tmp.B506RIDJ8l.xml
+ '[' -n '' ']'
+ trap cleanup EXIT
+ TIMEOUT=60
+ [[ ! -f /var/run/libvirtd.pid ]]
+ [[ 60 -gt 0 ]]
+ let TIMEOUT-=1
+ sleep 1
Running as unit: run-red35be886caa4878b6510fd8757d83f4.scope; invocation ID: c8a00f8628c24917b75589657ee56ba1
+ [[ ! -f /var/run/libvirtd.pid ]]
+ TIMEOUT=10
+ [[ ! -e /var/run/libvirt/libvirt-sock ]]
+ '[' -z '' ']'
+ '[' -n cinder ']'
++ awk '/key/{print $3}' /etc/ceph/ceph.client.cinder.keyring
+ CEPH_CINDER_KEYRING=AQAzWSJqbp+rHBAABu5wLp8X0l4lM88HCnRAaw==
+ '[' -n cinder ']'
+ create_virsh_libvirt_secret cinder 457eb676-33da-42ec-9a8c-9293d545c337 AQAzWSJqbp+rHBAABu5wLp8X0l4lM88HCnRAaw==
+ sec_user=cinder
+ sec_uuid=457eb676-33da-42ec-9a8c-9293d545c337
+ sec_ceph_keyring=AQAzWSJqbp+rHBAABu5wLp8X0l4lM88HCnRAaw==
+ cat
+ virsh secret-define --file /tmp/tmp.B506RIDJ8l.xml
Secret 457eb676-33da-42ec-9a8c-9293d545c337 created

+ virsh secret-set-value --secret 457eb676-33da-42ec-9a8c-9293d545c337 --base64 AQAzWSJqbp+rHBAABu5wLp8X0l4lM88HCnRAaw==
error: Passing secret value as command-line argument is insecure!
Secret value set

+ '[' -n '' ']'
+ '[' -n '' ']'
+ cleanup
+ rm -f /tmp/tmp.B506RIDJ8l.xml
+ '[' -n '' ']'
++ cat /var/run/libvirtd.pid
+ LIBVIRTD_PID=194639
+ kill 194639
+ tail --pid=194639 -f /dev/null
+ cgexec -g cpu,hugetlb,memory,rdma,misc,pids:/osh-libvirt systemd-run --scope --slice=system libvirtd --listen
Running as unit: run-ra2f1418b4431414bb2110e77ca04e8a2.scope; invocation ID: b8fb1c5cfa09410eb2bf538e2c4d5701