+ wait_for_file /etc/pki/CA/cacert.pem
+ local file=/etc/pki/CA/cacert.pem
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ sleep 1
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ sleep 1
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ sleep 1
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ sleep 1
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ sleep 1
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ wait_for_file /etc/pki/qemu/ca-cert.pem
+ local file=/etc/pki/qemu/ca-cert.pem
+ '[' '!' -f /etc/pki/qemu/ca-cert.pem ']'
+ wait_for_file /etc/pki/libvirt/servercert.pem
+ local file=/etc/pki/libvirt/servercert.pem
+ '[' '!' -f /etc/pki/libvirt/servercert.pem ']'
+ wait_for_file /etc/pki/libvirt/clientcert.pem
+ local file=/etc/pki/libvirt/clientcert.pem
+ '[' '!' -f /etc/pki/libvirt/clientcert.pem ']'
+ wait_for_file /etc/pki/qemu/server-cert.pem
+ local file=/etc/pki/qemu/server-cert.pem
+ '[' '!' -f /etc/pki/qemu/server-cert.pem ']'
+ wait_for_file /etc/pki/qemu/client-cert.pem
+ local file=/etc/pki/qemu/client-cert.pem
+ '[' '!' -f /etc/pki/qemu/client-cert.pem ']'
+ wait_for_file /etc/pki/libvirt/private/serverkey.pem
+ local file=/etc/pki/libvirt/private/serverkey.pem
+ '[' '!' -f /etc/pki/libvirt/private/serverkey.pem ']'
+ wait_for_file /etc/pki/libvirt/private/clientkey.pem
+ local file=/etc/pki/libvirt/private/clientkey.pem
+ '[' '!' -f /etc/pki/libvirt/private/clientkey.pem ']'
+ wait_for_file /etc/pki/qemu/server-key.pem
+ local file=/etc/pki/qemu/server-key.pem
+ '[' '!' -f /etc/pki/qemu/server-key.pem ']'
+ wait_for_file /etc/pki/qemu/client-key.pem
+ local file=/etc/pki/qemu/client-key.pem
+ '[' '!' -f /etc/pki/qemu/client-key.pem ']'
+ wait_for_file /etc/pki/libvirt-vnc/ca-cert.pem
+ local file=/etc/pki/libvirt-vnc/ca-cert.pem
+ '[' '!' -f /etc/pki/libvirt-vnc/ca-cert.pem ']'
+ wait_for_file /etc/pki/libvirt-vnc/server-cert.pem
+ local file=/etc/pki/libvirt-vnc/server-cert.pem
+ '[' '!' -f /etc/pki/libvirt-vnc/server-cert.pem ']'
+ wait_for_file /etc/pki/libvirt-vnc/server-key.pem
+ local file=/etc/pki/libvirt-vnc/server-key.pem
+ '[' '!' -f /etc/pki/libvirt-vnc/server-key.pem ']'
++ grep -w libvirtd
++ cat /proc/1/comm /proc/10/comm /proc/100/comm /proc/101378/comm /proc/10157/comm /proc/10179/comm /proc/10180/comm /proc/102/comm /proc/102063/comm /proc/102087/comm /proc/102219/comm /proc/102614/comm /proc/102627/comm /proc/102628/comm /proc/103/comm /proc/103701/comm /proc/103728/comm /proc/103742/comm /proc/103766/comm /proc/104/comm /proc/104088/comm /proc/104389/comm /proc/104392/comm /proc/105/comm /proc/105462/comm /proc/105671/comm /proc/105694/comm /proc/105893/comm /proc/105910/comm /proc/105916/comm /proc/105985/comm /proc/105987/comm /proc/105988/comm /proc/106/comm /proc/106003/comm /proc/106004/comm /proc/106014/comm /proc/106106/comm /proc/107508/comm /proc/107533/comm /proc/107549/comm /proc/107577/comm /proc/108/comm /proc/109/comm /proc/10918/comm /proc/10919/comm /proc/109457/comm /proc/109460/comm /proc/109711/comm /proc/11/comm /proc/110/comm /proc/111/comm /proc/112/comm /proc/112384/comm /proc/113/comm /proc/114/comm /proc/115/comm /proc/116/comm /proc/116702/comm /proc/117/comm /proc/117072/comm /proc/117085/comm /proc/117086/comm /proc/1182/comm /proc/118883/comm /proc/119921/comm /proc/12/comm /proc/120569/comm /proc/120593/comm /proc/120642/comm /proc/120674/comm /proc/120859/comm /proc/121025/comm /proc/121267/comm /proc/121738/comm /proc/121877/comm /proc/123058/comm /proc/123082/comm /proc/12362/comm /proc/123793/comm /proc/12391/comm /proc/12421/comm /proc/12472/comm /proc/12484/comm /proc/125513/comm /proc/125519/comm /proc/126549/comm /proc/126556/comm /proc/126559/comm /proc/12722/comm /proc/12753/comm /proc/127531/comm /proc/127867/comm /proc/127879/comm /proc/127880/comm /proc/12809/comm /proc/12833/comm /proc/12852/comm /proc/1287/comm /proc/1288/comm /proc/1289/comm /proc/1290/comm /proc/129659/comm /proc/129660/comm /proc/13/comm /proc/136726/comm /proc/136727/comm /proc/136729/comm /proc/136730/comm /proc/136837/comm /proc/137546/comm /proc/137573/comm /proc/1379/comm /proc/137967/comm /proc/138002/comm /proc/138022/comm /proc/138056/comm /proc/138057/comm /proc/138058/comm /proc/138059/comm /proc/1383/comm /proc/139042/comm /proc/139068/comm /proc/139489/comm /proc/139511/comm /proc/139687/comm /proc/139775/comm /proc/139782/comm /proc/14/comm /proc/140205/comm /proc/140359/comm /proc/140384/comm /proc/140461/comm /proc/140477/comm /proc/140483/comm /proc/140530/comm /proc/140532/comm /proc/140533/comm /proc/140620/comm /proc/140621/comm /proc/140631/comm /proc/140721/comm /proc/141766/comm /proc/142261/comm /proc/142342/comm /proc/142451/comm /proc/142627/comm /proc/142660/comm /proc/142685/comm /proc/142726/comm /proc/142747/comm /proc/142772/comm /proc/142859/comm /proc/142909/comm /proc/143053/comm /proc/143068/comm /proc/143107/comm /proc/143438/comm /proc/143475/comm /proc/143783/comm /proc/1448/comm /proc/1452/comm /proc/14533/comm /proc/1461/comm /proc/15/comm /proc/16/comm /proc/160658/comm /proc/160758/comm /proc/161103/comm /proc/161351/comm /proc/161417/comm /proc/162571/comm /proc/162652/comm /proc/162710/comm /proc/163561/comm /proc/165/comm /proc/165355/comm /proc/165365/comm /proc/165667/comm /proc/165695/comm /proc/165708/comm /proc/165709/comm /proc/165997/comm /proc/166/comm /proc/166011/comm /proc/166012/comm /proc/166288/comm /proc/166289/comm /proc/166290/comm /proc/166291/comm /proc/166335/comm /proc/166531/comm /proc/166549/comm /proc/166651/comm /proc/166653/comm /proc/166654/comm /proc/166804/comm /proc/166805/comm /proc/166810/comm /proc/166811/comm /proc/167/comm /proc/167391/comm /proc/167395/comm /proc/167422/comm /proc/167622/comm /proc/167647/comm /proc/167735/comm /proc/167824/comm /proc/167830/comm /proc/167897/comm /proc/167899/comm /proc/167900/comm /proc/167925/comm /proc/167926/comm /proc/167936/comm /proc/168/comm /proc/168180/comm /proc/169/comm /proc/169264/comm /proc/169360/comm /proc/169380/comm /proc/169431/comm /proc/169450/comm /proc/169467/comm /proc/169532/comm /proc/169561/comm /proc/169567/comm /proc/169602/comm /proc/169624/comm /proc/169923/comm /proc/169947/comm /proc/169962/comm /proc/169985/comm /proc/170/comm /proc/170488/comm /proc/170525/comm /proc/170538/comm /proc/170637/comm /proc/171/comm /proc/172/comm /proc/173/comm /proc/173185/comm /proc/173259/comm /proc/175/comm /proc/175116/comm /proc/175117/comm /proc/176/comm /proc/176245/comm /proc/176597/comm /proc/177563/comm /proc/177881/comm /proc/177882/comm /proc/177883/comm /proc/178/comm /proc/178097/comm /proc/178101/comm /proc/178133/comm /proc/178134/comm /proc/178147/comm /proc/178160/comm /proc/178161/comm /proc/178440/comm /proc/178441/comm /proc/178442/comm /proc/178926/comm /proc/179226/comm /proc/179649/comm /proc/179891/comm /proc/18/comm /proc/180/comm /proc/180531/comm /proc/180539/comm /proc/180562/comm /proc/180696/comm /proc/180880/comm /proc/180881/comm /proc/181203/comm /proc/181401/comm /proc/181417/comm /proc/181418/comm /proc/181419/comm /proc/181420/comm /proc/181421/comm /proc/181422/comm /proc/181577/comm /proc/181925/comm /proc/182030/comm /proc/182052/comm /proc/182120/comm /proc/182167/comm /proc/182188/comm /proc/182213/comm /proc/182414/comm /proc/182438/comm /proc/182449/comm /proc/182563/comm /proc/182565/comm /proc/182566/comm /proc/182576/comm /proc/182577/comm /proc/182589/comm /proc/182590/comm /proc/182639/comm /proc/182648/comm /proc/182660/comm /proc/182661/comm /proc/182662/comm /proc/183/comm /proc/185/comm /proc/186/comm /proc/187/comm /proc/188/comm /proc/189/comm /proc/19/comm /proc/190/comm /proc/191/comm /proc/192/comm /proc/193/comm /proc/19355/comm /proc/19376/comm /proc/194/comm /proc/19415/comm /proc/19443/comm /proc/19459/comm /proc/195/comm /proc/196/comm /proc/198/comm /proc/2/comm /proc/20/comm /proc/202/comm /proc/21/comm /proc/210/comm /proc/21282/comm /proc/21292/comm /proc/21293/comm /proc/21321/comm /proc/219/comm /proc/22/comm /proc/220/comm /proc/225/comm /proc/24/comm /proc/24288/comm /proc/24551/comm /proc/24568/comm /proc/24591/comm /proc/24603/comm /proc/247/comm /proc/25/comm /proc/26/comm /proc/268/comm /proc/27/comm /proc/28/comm /proc/282/comm /proc/286/comm /proc/287/comm /proc/28800/comm /proc/289/comm /proc/29071/comm /proc/29088/comm /proc/29114/comm /proc/29127/comm /proc/3/comm /proc/30/comm /proc/308/comm /proc/309/comm /proc/31/comm /proc/318/comm /proc/32/comm /proc/33/comm /proc/33473/comm /proc/33744/comm /proc/33762/comm /proc/33786/comm /proc/33798/comm /proc/34/comm /proc/340/comm /proc/35362/comm /proc/35364/comm /proc/354/comm /proc/36/comm /proc/361/comm /proc/366/comm /proc/37/comm /proc/375/comm /proc/38/comm /proc/384/comm /proc/39/comm /proc/390/comm /proc/394/comm /proc/39411/comm /proc/39436/comm /proc/39453/comm /proc/39471/comm /proc/39478/comm /proc/395/comm /proc/39509/comm /proc/39551/comm /proc/39559/comm /proc/39573/comm /proc/39589/comm /proc/39667/comm /proc/39674/comm /proc/39700/comm /proc/39713/comm /proc/39826/comm /proc/39883/comm /proc/399/comm /proc/4/comm /proc/40/comm /proc/40025/comm /proc/40048/comm /proc/40073/comm /proc/40749/comm /proc/40770/comm /proc/40791/comm /proc/40811/comm /proc/41040/comm /proc/41253/comm /proc/41334/comm /proc/41337/comm /proc/41651/comm /proc/41997/comm /proc/42/comm /proc/42100/comm /proc/42123/comm /proc/42194/comm /proc/42527/comm /proc/42556/comm /proc/42558/comm /proc/42588/comm /proc/42630/comm /proc/42669/comm /proc/42993/comm /proc/43/comm /proc/43017/comm /proc/43244/comm /proc/43492/comm /proc/43516/comm /proc/43531/comm /proc/43557/comm /proc/43569/comm /proc/43601/comm /proc/43714/comm /proc/43759/comm /proc/43799/comm /proc/43959/comm /proc/44/comm /proc/45/comm /proc/451/comm /proc/45817/comm /proc/45833/comm /proc/45878/comm /proc/45913/comm /proc/45936/comm /proc/46/comm /proc/46196/comm /proc/46210/comm /proc/46245/comm /proc/46319/comm /proc/46676/comm /proc/46698/comm /proc/46797/comm /proc/46820/comm /proc/46865/comm /proc/46986/comm /proc/47355/comm /proc/47378/comm /proc/47500/comm /proc/47709/comm /proc/47734/comm /proc/48/comm /proc/48043/comm /proc/48067/comm /proc/48187/comm /proc/48241/comm /proc/48337/comm /proc/48370/comm /proc/48393/comm /proc/48482/comm /proc/49/comm /proc/5/comm /proc/50/comm /proc/50299/comm /proc/50322/comm /proc/50410/comm /proc/50434/comm /proc/50512/comm /proc/50611/comm /proc/50776/comm /proc/50880/comm /proc/50922/comm /proc/51/comm /proc/517/comm /proc/52/comm /proc/54/comm /proc/54621/comm /proc/54646/comm /proc/55/comm /proc/55300/comm /proc/55324/comm /proc/55340/comm /proc/55364/comm /proc/55380/comm /proc/55404/comm /proc/55539/comm /proc/55562/comm /proc/55637/comm /proc/55673/comm /proc/55711/comm /proc/55810/comm /proc/56/comm /proc/57/comm /proc/57277/comm /proc/58/comm /proc/59300/comm /proc/59408/comm /proc/59440/comm /proc/59458/comm /proc/59485/comm /proc/59516/comm /proc/59537/comm /proc/59559/comm /proc/59578/comm /proc/59825/comm /proc/6/comm /proc/60/comm /proc/60136/comm /proc/60161/comm /proc/60188/comm /proc/60455/comm /proc/60457/comm /proc/60462/comm /proc/60463/comm /proc/60598/comm /proc/60657/comm /proc/60896/comm /proc/609/comm /proc/61/comm /proc/61089/comm /proc/61117/comm /proc/612/comm /proc/61377/comm /proc/61379/comm /proc/61424/comm /proc/61428/comm /proc/61479/comm /proc/615/comm /proc/61504/comm /proc/61707/comm /proc/61765/comm /proc/61882/comm /proc/61920/comm /proc/62/comm /proc/62094/comm /proc/62188/comm /proc/622/comm /proc/62213/comm /proc/623/comm /proc/62315/comm /proc/62341/comm /proc/62428/comm /proc/62443/comm /proc/62444/comm /proc/62445/comm /proc/62446/comm /proc/62447/comm /proc/62655/comm /proc/62679/comm /proc/62877/comm /proc/62970/comm /proc/63/comm /proc/63100/comm /proc/63526/comm /proc/63553/comm /proc/63654/comm /proc/63703/comm /proc/63737/comm /proc/63780/comm /proc/63833/comm /proc/639/comm /proc/64/comm /proc/64006/comm /proc/64096/comm /proc/641/comm /proc/64213/comm /proc/64327/comm /proc/64561/comm /proc/64591/comm /proc/64628/comm /proc/64730/comm /proc/64851/comm /proc/64889/comm /proc/64921/comm /proc/64943/comm /proc/64961/comm /proc/65092/comm /proc/65322/comm /proc/65372/comm /proc/65390/comm /proc/65531/comm /proc/65550/comm /proc/65556/comm /proc/65613/comm /proc/65615/comm /proc/65616/comm /proc/65619/comm /proc/65620/comm /proc/65630/comm /proc/65747/comm /proc/66/comm /proc/67/comm /proc/67456/comm /proc/67480/comm /proc/68/comm /proc/69/comm /proc/69491/comm /proc/699/comm /proc/70/comm /proc/702/comm /proc/703/comm /proc/70561/comm /proc/70814/comm /proc/70857/comm /proc/70858/comm /proc/70859/comm /proc/70860/comm /proc/70862/comm /proc/70865/comm /proc/70866/comm /proc/70867/comm /proc/70868/comm /proc/70870/comm /proc/70872/comm /proc/70873/comm /proc/70874/comm /proc/70875/comm /proc/716/comm /proc/72/comm /proc/73/comm /proc/74/comm /proc/75/comm /proc/76/comm /proc/76525/comm /proc/76548/comm /proc/76665/comm /proc/76684/comm /proc/76690/comm /proc/76738/comm /proc/76740/comm /proc/76741/comm /proc/76742/comm /proc/76743/comm /proc/76753/comm /proc/76940/comm /proc/77899/comm /proc/77923/comm /proc/78/comm /proc/79/comm /proc/8/comm /proc/80/comm /proc/80509/comm /proc/81/comm /proc/82/comm /proc/82440/comm /proc/82887/comm /proc/82901/comm /proc/83509/comm /proc/83533/comm /proc/84/comm /proc/84383/comm /proc/85/comm /proc/86/comm /proc/861/comm /proc/87/comm /proc/88/comm /proc/89524/comm /proc/89554/comm /proc/89748/comm /proc/89764/comm /proc/89770/comm /proc/89817/comm /proc/89819/comm /proc/89820/comm /proc/89843/comm /proc/89844/comm /proc/89854/comm /proc/9/comm /proc/90/comm /proc/90063/comm /proc/9059/comm /proc/9076/comm /proc/9092/comm /proc/91/comm /proc/9174/comm /proc/92/comm /proc/93/comm /proc/93353/comm /proc/93682/comm /proc/93708/comm /proc/93722/comm /proc/93747/comm /proc/94/comm /proc/94169/comm /proc/94276/comm /proc/94979/comm /proc/95760/comm /proc/96/comm /proc/97/comm /proc/9790/comm /proc/98/comm /proc/98581/comm /proc/99/comm /proc/99793/comm /proc/self/comm /proc/thread-self/comm
+ '[' -n '' ']'
+ rm -f /var/run/libvirtd.pid
+ [[ -c /dev/kvm ]]
+ chmod 660 /dev/kvm
+ chown root:kvm /dev/kvm
+ CGROUPS=
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/blkio ']'
+ grep -w blkio /sys/fs/cgroup/cgroup.controllers
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/cpu ']'
+ grep -w cpu /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=cpu,
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/devices ']'
+ grep -w devices /sys/fs/cgroup/cgroup.controllers
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/freezer ']'
+ grep -w freezer /sys/fs/cgroup/cgroup.controllers
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/hugetlb ']'
+ grep -w hugetlb /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=hugetlb,
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/memory ']'
+ grep -w memory /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=memory,
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/net_cls ']'
+ grep -w net_cls /sys/fs/cgroup/cgroup.controllers
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/perf_event ']'
+ grep -w perf_event /sys/fs/cgroup/cgroup.controllers
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/rdma ']'
+ grep -w rdma /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=rdma,
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/misc ']'
+ grep -w misc /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=misc,
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/pids ']'
+ grep -w pids /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=pids,
+ cgcreate -g cpu,hugetlb,memory,rdma,misc,pids:/osh-libvirt
++ cat /proc/meminfo
++ grep HugePages_Total
++ tr -cd '[:digit:]'
+ hp_count=0
+ '[' 00 -gt 0 ']'
+ '[' -n 457eb676-33da-42ec-9a8c-9293d545c337 ']'
+ cgexec -g cpu,hugetlb,memory,rdma,misc,pids:/osh-libvirt systemd-run --scope --slice=system libvirtd --listen
++ mktemp --suffix .xml
+ tmpsecret=/tmp/tmp.7phB4u5PRd.xml
+ '[' -n '' ']'
+ trap cleanup EXIT
+ TIMEOUT=60
+ [[ ! -f /var/run/libvirtd.pid ]]
+ [[ 60 -gt 0 ]]
+ let TIMEOUT-=1
+ sleep 1
Running as unit: run-rf476e2e29c394faab7549c4b9fe0da30.scope; invocation ID: bd10235be0a44fbf96138c8b00ca84cb
+ [[ ! -f /var/run/libvirtd.pid ]]
+ TIMEOUT=10
+ [[ ! -e /var/run/libvirt/libvirt-sock ]]
+ '[' -z '' ']'
+ '[' -n cinder ']'
++ awk '/key/{print $3}' /etc/ceph/ceph.client.cinder.keyring
+ CEPH_CINDER_KEYRING=AQAm3P9pwdKRJhAAZeiEkjqQYSavd18HHz1uZA==
+ '[' -n cinder ']'
+ create_virsh_libvirt_secret cinder 457eb676-33da-42ec-9a8c-9293d545c337 AQAm3P9pwdKRJhAAZeiEkjqQYSavd18HHz1uZA==
+ sec_user=cinder
+ sec_uuid=457eb676-33da-42ec-9a8c-9293d545c337
+ sec_ceph_keyring=AQAm3P9pwdKRJhAAZeiEkjqQYSavd18HHz1uZA==
+ cat
+ virsh secret-define --file /tmp/tmp.7phB4u5PRd.xml
Secret 457eb676-33da-42ec-9a8c-9293d545c337 created

+ virsh secret-set-value --secret 457eb676-33da-42ec-9a8c-9293d545c337 --base64 AQAm3P9pwdKRJhAAZeiEkjqQYSavd18HHz1uZA==
error: Passing secret value as command-line argument is insecure!
Secret value set

+ '[' -n '' ']'
+ cleanup
+ rm -f /tmp/tmp.7phB4u5PRd.xml
+ '[' -n '' ']'
++ cat /var/run/libvirtd.pid
+ LIBVIRTD_PID=182682
+ kill 182682
+ tail --pid=182682 -f /dev/null
+ cgexec -g cpu,hugetlb,memory,rdma,misc,pids:/osh-libvirt systemd-run --scope --slice=system libvirtd --listen
Running as unit: run-r4482dbbf0464438687590398c1a95057.scope; invocation ID: fcfb4adb6d374ecbbad5dbe19e13a950