+ wait_for_file /etc/pki/CA/cacert.pem
+ local file=/etc/pki/CA/cacert.pem
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ sleep 1
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ sleep 1
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ sleep 1
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ sleep 1
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ sleep 1
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ wait_for_file /etc/pki/qemu/ca-cert.pem
+ local file=/etc/pki/qemu/ca-cert.pem
+ '[' '!' -f /etc/pki/qemu/ca-cert.pem ']'
+ wait_for_file /etc/pki/libvirt/servercert.pem
+ local file=/etc/pki/libvirt/servercert.pem
+ '[' '!' -f /etc/pki/libvirt/servercert.pem ']'
+ wait_for_file /etc/pki/libvirt/clientcert.pem
+ local file=/etc/pki/libvirt/clientcert.pem
+ '[' '!' -f /etc/pki/libvirt/clientcert.pem ']'
+ wait_for_file /etc/pki/qemu/server-cert.pem
+ local file=/etc/pki/qemu/server-cert.pem
+ '[' '!' -f /etc/pki/qemu/server-cert.pem ']'
+ wait_for_file /etc/pki/qemu/client-cert.pem
+ local file=/etc/pki/qemu/client-cert.pem
+ '[' '!' -f /etc/pki/qemu/client-cert.pem ']'
+ wait_for_file /etc/pki/libvirt/private/serverkey.pem
+ local file=/etc/pki/libvirt/private/serverkey.pem
+ '[' '!' -f /etc/pki/libvirt/private/serverkey.pem ']'
+ wait_for_file /etc/pki/libvirt/private/clientkey.pem
+ local file=/etc/pki/libvirt/private/clientkey.pem
+ '[' '!' -f /etc/pki/libvirt/private/clientkey.pem ']'
+ wait_for_file /etc/pki/qemu/server-key.pem
+ local file=/etc/pki/qemu/server-key.pem
+ '[' '!' -f /etc/pki/qemu/server-key.pem ']'
+ wait_for_file /etc/pki/qemu/client-key.pem
+ local file=/etc/pki/qemu/client-key.pem
+ '[' '!' -f /etc/pki/qemu/client-key.pem ']'
+ wait_for_file /etc/pki/libvirt-vnc/ca-cert.pem
+ local file=/etc/pki/libvirt-vnc/ca-cert.pem
+ '[' '!' -f /etc/pki/libvirt-vnc/ca-cert.pem ']'
+ wait_for_file /etc/pki/libvirt-vnc/server-cert.pem
+ local file=/etc/pki/libvirt-vnc/server-cert.pem
+ '[' '!' -f /etc/pki/libvirt-vnc/server-cert.pem ']'
+ wait_for_file /etc/pki/libvirt-vnc/server-key.pem
+ local file=/etc/pki/libvirt-vnc/server-key.pem
+ '[' '!' -f /etc/pki/libvirt-vnc/server-key.pem ']'
++ grep -w libvirtd
++ cat /proc/1/comm /proc/10/comm /proc/100/comm /proc/10172/comm /proc/102/comm /proc/102073/comm /proc/102087/comm /proc/102481/comm /proc/102494/comm /proc/102495/comm /proc/102952/comm /proc/103/comm /proc/104/comm /proc/105/comm /proc/105391/comm /proc/105401/comm /proc/105424/comm /proc/105459/comm /proc/105490/comm /proc/106/comm /proc/106019/comm /proc/106286/comm /proc/106424/comm /proc/10680/comm /proc/10681/comm /proc/106836/comm /proc/107049/comm /proc/107057/comm /proc/107644/comm /proc/107670/comm /proc/108/comm /proc/108120/comm /proc/108654/comm /proc/109/comm /proc/109512/comm /proc/109541/comm /proc/11/comm /proc/110/comm /proc/111/comm /proc/111045/comm /proc/111601/comm /proc/111626/comm /proc/111627/comm /proc/112/comm /proc/112846/comm /proc/112847/comm /proc/113/comm /proc/114/comm /proc/115/comm /proc/116/comm /proc/117/comm /proc/1185/comm /proc/119713/comm /proc/119714/comm /proc/119721/comm /proc/119722/comm /proc/119734/comm /proc/119864/comm /proc/12/comm /proc/120183/comm /proc/120207/comm /proc/120532/comm /proc/121017/comm /proc/121052/comm /proc/121065/comm /proc/121098/comm /proc/121099/comm /proc/121100/comm /proc/121101/comm /proc/12121/comm /proc/12152/comm /proc/121602/comm /proc/121625/comm /proc/12190/comm /proc/122031/comm /proc/122055/comm /proc/122162/comm /proc/12233/comm /proc/12246/comm /proc/122672/comm /proc/122673/comm /proc/122814/comm /proc/122837/comm /proc/122951/comm /proc/122969/comm /proc/122976/comm /proc/123053/comm /proc/123158/comm /proc/123159/comm /proc/124561/comm /proc/124602/comm /proc/124737/comm /proc/124807/comm /proc/124833/comm /proc/12486/comm /proc/124866/comm /proc/124948/comm /proc/124991/comm /proc/125016/comm /proc/125136/comm /proc/125155/comm /proc/12518/comm /proc/125183/comm /proc/12519/comm /proc/125279/comm /proc/125313/comm /proc/125540/comm /proc/125563/comm /proc/125721/comm /proc/12576/comm /proc/125800/comm /proc/125898/comm /proc/12600/comm /proc/12619/comm /proc/128916/comm /proc/1290/comm /proc/1291/comm /proc/1292/comm /proc/1293/comm /proc/129536/comm /proc/129625/comm /proc/129626/comm /proc/13/comm /proc/130597/comm /proc/130637/comm /proc/131361/comm /proc/131362/comm /proc/131473/comm /proc/131475/comm /proc/131487/comm /proc/132645/comm /proc/133093/comm /proc/133126/comm /proc/133127/comm /proc/133245/comm /proc/133325/comm /proc/133326/comm /proc/133871/comm /proc/134011/comm /proc/134298/comm /proc/134299/comm /proc/134341/comm /proc/134342/comm /proc/134744/comm /proc/134960/comm /proc/134985/comm /proc/135110/comm /proc/135133/comm /proc/135150/comm /proc/135157/comm /proc/135211/comm /proc/135262/comm /proc/135263/comm /proc/136403/comm /proc/136463/comm /proc/136510/comm /proc/136514/comm /proc/136541/comm /proc/136584/comm /proc/136638/comm /proc/136649/comm /proc/136656/comm /proc/136690/comm /proc/136724/comm /proc/136995/comm /proc/137024/comm /proc/137037/comm /proc/137073/comm /proc/137544/comm /proc/137557/comm /proc/137697/comm /proc/137701/comm /proc/137714/comm /proc/1391/comm /proc/1395/comm /proc/14/comm /proc/1460/comm /proc/1464/comm /proc/1473/comm /proc/14787/comm /proc/15/comm /proc/153775/comm /proc/153964/comm /proc/153973/comm /proc/157347/comm /proc/157761/comm /proc/157908/comm /proc/157910/comm /proc/157911/comm /proc/158074/comm /proc/158094/comm /proc/158120/comm /proc/158121/comm /proc/158135/comm /proc/158148/comm /proc/158149/comm /proc/158496/comm /proc/158497/comm /proc/158498/comm /proc/158874/comm /proc/158986/comm /proc/159139/comm /proc/159275/comm /proc/159457/comm /proc/159967/comm /proc/159995/comm /proc/16/comm /proc/160000/comm /proc/160142/comm /proc/160143/comm /proc/160144/comm /proc/160145/comm /proc/160201/comm /proc/160251/comm /proc/160252/comm /proc/160253/comm /proc/160276/comm /proc/160277/comm /proc/160463/comm /proc/160673/comm /proc/160675/comm /proc/160708/comm /proc/160711/comm /proc/160968/comm /proc/160983/comm /proc/161030/comm /proc/161057/comm /proc/161161/comm /proc/161200/comm /proc/161201/comm /proc/161202/comm /proc/161203/comm /proc/161204/comm /proc/161205/comm /proc/161279/comm /proc/161280/comm /proc/161287/comm /proc/161288/comm /proc/161289/comm /proc/161290/comm /proc/161291/comm /proc/161292/comm /proc/161293/comm /proc/161294/comm /proc/161295/comm /proc/161296/comm /proc/161297/comm /proc/161298/comm /proc/161299/comm /proc/161300/comm /proc/161301/comm /proc/161302/comm /proc/161303/comm /proc/161304/comm /proc/161305/comm /proc/161306/comm /proc/161307/comm /proc/161308/comm /proc/161309/comm /proc/161310/comm /proc/161311/comm /proc/161312/comm /proc/161313/comm /proc/161314/comm /proc/161315/comm /proc/161316/comm /proc/161317/comm /proc/161329/comm /proc/161473/comm /proc/161477/comm /proc/161509/comm /proc/161512/comm /proc/161533/comm /proc/161591/comm /proc/161592/comm /proc/161597/comm /proc/161598/comm /proc/161599/comm /proc/167/comm /proc/168/comm /proc/169/comm /proc/170/comm /proc/171/comm /proc/172/comm /proc/173/comm /proc/174/comm /proc/175/comm /proc/176/comm /proc/177/comm /proc/179/comm /proc/18/comm /proc/180/comm /proc/182/comm /proc/184/comm /proc/185/comm /proc/186/comm /proc/187/comm /proc/188/comm /proc/189/comm /proc/19/comm /proc/190/comm /proc/191/comm /proc/192/comm /proc/19246/comm /proc/19266/comm /proc/19291/comm /proc/193/comm /proc/19318/comm /proc/19333/comm /proc/194/comm /proc/195/comm /proc/2/comm /proc/20/comm /proc/200/comm /proc/21/comm /proc/21135/comm /proc/21144/comm /proc/21145/comm /proc/21158/comm /proc/214/comm /proc/219/comm /proc/22/comm /proc/220/comm /proc/225/comm /proc/24/comm /proc/24167/comm /proc/24446/comm /proc/24464/comm /proc/24487/comm /proc/24500/comm /proc/247/comm /proc/25/comm /proc/26/comm /proc/262/comm /proc/27/comm /proc/28/comm /proc/281/comm /proc/284/comm /proc/28614/comm /proc/287/comm /proc/28881/comm /proc/28898/comm /proc/28923/comm /proc/28935/comm /proc/3/comm /proc/30/comm /proc/306/comm /proc/307/comm /proc/31/comm /proc/311/comm /proc/32/comm /proc/322/comm /proc/33/comm /proc/33187/comm /proc/33467/comm /proc/33484/comm /proc/33507/comm /proc/33521/comm /proc/34/comm /proc/346/comm /proc/347/comm /proc/350/comm /proc/35097/comm /proc/35099/comm /proc/355/comm /proc/36/comm /proc/37/comm /proc/374/comm /proc/38/comm /proc/383/comm /proc/384/comm /proc/38955/comm /proc/38980/comm /proc/38997/comm /proc/38999/comm /proc/39/comm /proc/390/comm /proc/39025/comm /proc/39060/comm /proc/39093/comm /proc/39103/comm /proc/39113/comm /proc/39130/comm /proc/39202/comm /proc/39210/comm /proc/39228/comm /proc/39246/comm /proc/39358/comm /proc/394/comm /proc/39415/comm /proc/395/comm /proc/39514/comm /proc/39539/comm /proc/39564/comm /proc/4/comm /proc/40/comm /proc/40139/comm /proc/40293/comm /proc/40310/comm /proc/40335/comm /proc/40356/comm /proc/40618/comm /proc/40830/comm /proc/41252/comm /proc/41675/comm /proc/41704/comm /proc/41746/comm /proc/42/comm /proc/42062/comm /proc/42089/comm /proc/42102/comm /proc/42126/comm /proc/42157/comm /proc/42177/comm /proc/42521/comm /proc/42546/comm /proc/42633/comm /proc/43/comm /proc/43065/comm /proc/43095/comm /proc/43121/comm /proc/43145/comm /proc/43159/comm /proc/43183/comm /proc/43299/comm /proc/43341/comm /proc/43385/comm /proc/44/comm /proc/449/comm /proc/45/comm /proc/45173/comm /proc/45202/comm /proc/45232/comm /proc/45255/comm /proc/45469/comm /proc/45491/comm /proc/45504/comm /proc/45540/comm /proc/45813/comm /proc/46/comm /proc/46151/comm /proc/46178/comm /proc/46269/comm /proc/46292/comm /proc/46343/comm /proc/46468/comm /proc/46658/comm /proc/46682/comm /proc/46803/comm /proc/46949/comm /proc/46974/comm /proc/47280/comm /proc/47303/comm /proc/47329/comm /proc/47437/comm /proc/47469/comm /proc/47567/comm /proc/47672/comm /proc/48/comm /proc/481/comm /proc/48488/comm /proc/48969/comm /proc/48992/comm /proc/49/comm /proc/49100/comm /proc/5/comm /proc/50/comm /proc/50917/comm /proc/50941/comm /proc/51/comm /proc/51465/comm /proc/51488/comm /proc/51503/comm /proc/51533/comm /proc/51685/comm /proc/517/comm /proc/51708/comm /proc/51761/comm /proc/51820/comm /proc/51898/comm /proc/52/comm /proc/54/comm /proc/54531/comm /proc/54616/comm /proc/54683/comm /proc/54757/comm /proc/54786/comm /proc/54811/comm /proc/54840/comm /proc/54850/comm /proc/54873/comm /proc/55/comm /proc/55086/comm /proc/55202/comm /proc/55438/comm /proc/55657/comm /proc/55682/comm /proc/55889/comm /proc/55918/comm /proc/55919/comm /proc/55921/comm /proc/55922/comm /proc/56/comm /proc/56126/comm /proc/56150/comm /proc/56203/comm /proc/56226/comm /proc/56322/comm /proc/56350/comm /proc/56697/comm /proc/56723/comm /proc/56841/comm /proc/57/comm /proc/57008/comm /proc/57033/comm /proc/57153/comm /proc/57345/comm /proc/57359/comm /proc/57360/comm /proc/57361/comm /proc/57362/comm /proc/57363/comm /proc/57438/comm /proc/57462/comm /proc/57627/comm /proc/57651/comm /proc/57910/comm /proc/57948/comm /proc/58/comm /proc/58049/comm /proc/58372/comm /proc/58396/comm /proc/58491/comm /proc/58537/comm /proc/58583/comm /proc/58625/comm /proc/58662/comm /proc/58704/comm /proc/58885/comm /proc/59075/comm /proc/59284/comm /proc/59320/comm /proc/59362/comm /proc/59386/comm /proc/59474/comm /proc/59534/comm /proc/59557/comm /proc/59994/comm /proc/6/comm /proc/60/comm /proc/60011/comm /proc/60018/comm /proc/60107/comm /proc/60158/comm /proc/60159/comm /proc/60965/comm /proc/60988/comm /proc/61/comm /proc/610/comm /proc/61151/comm /proc/614/comm /proc/61438/comm /proc/616/comm /proc/62/comm /proc/622/comm /proc/623/comm /proc/63/comm /proc/63492/comm /proc/63538/comm /proc/63539/comm /proc/63540/comm /proc/63541/comm /proc/63542/comm /proc/63543/comm /proc/63545/comm /proc/63551/comm /proc/63552/comm /proc/63553/comm /proc/63554/comm /proc/63555/comm /proc/63556/comm /proc/63557/comm /proc/639/comm /proc/64/comm /proc/646/comm /proc/66/comm /proc/67/comm /proc/68/comm /proc/68200/comm /proc/68224/comm /proc/68302/comm /proc/68319/comm /proc/68326/comm /proc/68380/comm /proc/68440/comm /proc/68441/comm /proc/689/comm /proc/69/comm /proc/69391/comm /proc/69416/comm /proc/69812/comm /proc/70/comm /proc/700/comm /proc/702/comm /proc/70408/comm /proc/705/comm /proc/706/comm /proc/71692/comm /proc/719/comm /proc/72/comm /proc/72305/comm /proc/73/comm /proc/73057/comm /proc/73429/comm /proc/73441/comm /proc/73906/comm /proc/73932/comm /proc/74/comm /proc/74539/comm /proc/75/comm /proc/76/comm /proc/78/comm /proc/78249/comm /proc/78272/comm /proc/78361/comm /proc/78378/comm /proc/78385/comm /proc/78487/comm /proc/78538/comm /proc/78539/comm /proc/79/comm /proc/8/comm /proc/80/comm /proc/80635/comm /proc/80637/comm /proc/81/comm /proc/81890/comm /proc/82/comm /proc/83911/comm /proc/84/comm /proc/85/comm /proc/86/comm /proc/86161/comm /proc/86186/comm /proc/86200/comm /proc/86232/comm /proc/864/comm /proc/86418/comm /proc/86520/comm /proc/87/comm /proc/87330/comm /proc/88/comm /proc/88464/comm /proc/88469/comm /proc/9/comm /proc/90/comm /proc/90095/comm /proc/90118/comm /proc/90446/comm /proc/90458/comm /proc/90459/comm /proc/9068/comm /proc/9085/comm /proc/91/comm /proc/9101/comm /proc/91289/comm /proc/91341/comm /proc/91359/comm /proc/91388/comm /proc/91710/comm /proc/91711/comm /proc/91806/comm /proc/9184/comm /proc/92/comm /proc/92109/comm /proc/92111/comm /proc/92787/comm /proc/93/comm /proc/93059/comm /proc/93083/comm /proc/93173/comm /proc/93190/comm /proc/93197/comm /proc/93300/comm /proc/93351/comm /proc/93352/comm /proc/94/comm /proc/94442/comm /proc/94468/comm /proc/94518/comm /proc/94551/comm /proc/94940/comm /proc/96/comm /proc/96065/comm /proc/96624/comm /proc/97/comm /proc/97352/comm /proc/98/comm /proc/9800/comm /proc/99/comm /proc/99235/comm /proc/self/comm /proc/thread-self/comm
+ '[' -n '' ']'
+ rm -f /var/run/libvirtd.pid
+ [[ -c /dev/kvm ]]
+ chmod 660 /dev/kvm
+ chown root:kvm /dev/kvm
+ CGROUPS=
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/blkio ']'
+ grep -w blkio /sys/fs/cgroup/cgroup.controllers
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/cpu ']'
+ grep -w cpu /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=cpu,
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/devices ']'
+ grep -w devices /sys/fs/cgroup/cgroup.controllers
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/freezer ']'
+ grep -w freezer /sys/fs/cgroup/cgroup.controllers
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/hugetlb ']'
+ grep -w hugetlb /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=hugetlb,
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/memory ']'
+ grep -w memory /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=memory,
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/net_cls ']'
+ grep -w net_cls /sys/fs/cgroup/cgroup.controllers
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/perf_event ']'
+ grep -w perf_event /sys/fs/cgroup/cgroup.controllers
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/rdma ']'
+ grep -w rdma /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=rdma,
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/misc ']'
+ grep -w misc /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=misc,
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/pids ']'
+ grep -w pids /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=pids,
+ cgcreate -g cpu,hugetlb,memory,rdma,misc,pids:/osh-libvirt
++ cat /proc/meminfo
++ grep HugePages_Total
++ tr -cd '[:digit:]'
+ hp_count=0
+ '[' 00 -gt 0 ']'
+ '[' -n 457eb676-33da-42ec-9a8c-9293d545c337 ']'
+ cgexec -g cpu,hugetlb,memory,rdma,misc,pids:/osh-libvirt systemd-run --scope --slice=system libvirtd --listen
++ mktemp --suffix .xml
+ tmpsecret=/tmp/tmp.ffQuCJwNSL.xml
+ '[' -n '' ']'
+ trap cleanup EXIT
+ TIMEOUT=60
+ [[ ! -f /var/run/libvirtd.pid ]]
+ [[ 60 -gt 0 ]]
+ let TIMEOUT-=1
+ sleep 1
Running scope as unit: run-r8e570d30d80c47eb8e8023049dacd1f8.scope
+ [[ ! -f /var/run/libvirtd.pid ]]
+ TIMEOUT=10
+ [[ ! -e /var/run/libvirt/libvirt-sock ]]
+ '[' -z '' ']'
+ '[' -n cinder ']'
++ awk '/key/{print $3}' /etc/ceph/ceph.client.cinder.keyring
+ CEPH_CINDER_KEYRING=AQACC/xp7N2NJRAAsDNzn4byXeQpgxoHnETpBA==
+ '[' -n cinder ']'
+ create_virsh_libvirt_secret cinder 457eb676-33da-42ec-9a8c-9293d545c337 AQACC/xp7N2NJRAAsDNzn4byXeQpgxoHnETpBA==
+ sec_user=cinder
+ sec_uuid=457eb676-33da-42ec-9a8c-9293d545c337
+ sec_ceph_keyring=AQACC/xp7N2NJRAAsDNzn4byXeQpgxoHnETpBA==
+ cat
+ virsh secret-define --file /tmp/tmp.ffQuCJwNSL.xml
Secret 457eb676-33da-42ec-9a8c-9293d545c337 created

+ virsh secret-set-value --secret 457eb676-33da-42ec-9a8c-9293d545c337 --base64 AQACC/xp7N2NJRAAsDNzn4byXeQpgxoHnETpBA==
error: Passing secret value as command-line argument is insecure!
Secret value set

+ '[' -n '' ']'
+ cleanup
+ rm -f /tmp/tmp.ffQuCJwNSL.xml
+ '[' -n '' ']'
++ cat /var/run/libvirtd.pid
+ LIBVIRTD_PID=161621
+ kill 161621
+ tail --pid=161621 -f /dev/null
+ cgexec -g cpu,hugetlb,memory,rdma,misc,pids:/osh-libvirt systemd-run --scope --slice=system libvirtd --listen
Running scope as unit: run-r863da05916a5477e950fd6fc8e4034de.scope