+ wait_for_file /etc/pki/CA/cacert.pem
+ local file=/etc/pki/CA/cacert.pem
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ sleep 1
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ sleep 1
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ sleep 1
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ sleep 1
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ sleep 1
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ wait_for_file /etc/pki/qemu/ca-cert.pem
+ local file=/etc/pki/qemu/ca-cert.pem
+ '[' '!' -f /etc/pki/qemu/ca-cert.pem ']'
+ wait_for_file /etc/pki/libvirt/servercert.pem
+ local file=/etc/pki/libvirt/servercert.pem
+ '[' '!' -f /etc/pki/libvirt/servercert.pem ']'
+ wait_for_file /etc/pki/libvirt/clientcert.pem
+ local file=/etc/pki/libvirt/clientcert.pem
+ '[' '!' -f /etc/pki/libvirt/clientcert.pem ']'
+ wait_for_file /etc/pki/qemu/server-cert.pem
+ local file=/etc/pki/qemu/server-cert.pem
+ '[' '!' -f /etc/pki/qemu/server-cert.pem ']'
+ wait_for_file /etc/pki/qemu/client-cert.pem
+ local file=/etc/pki/qemu/client-cert.pem
+ '[' '!' -f /etc/pki/qemu/client-cert.pem ']'
+ wait_for_file /etc/pki/libvirt/private/serverkey.pem
+ local file=/etc/pki/libvirt/private/serverkey.pem
+ '[' '!' -f /etc/pki/libvirt/private/serverkey.pem ']'
+ wait_for_file /etc/pki/libvirt/private/clientkey.pem
+ local file=/etc/pki/libvirt/private/clientkey.pem
+ '[' '!' -f /etc/pki/libvirt/private/clientkey.pem ']'
+ wait_for_file /etc/pki/qemu/server-key.pem
+ local file=/etc/pki/qemu/server-key.pem
+ '[' '!' -f /etc/pki/qemu/server-key.pem ']'
+ wait_for_file /etc/pki/qemu/client-key.pem
+ local file=/etc/pki/qemu/client-key.pem
+ '[' '!' -f /etc/pki/qemu/client-key.pem ']'
+ wait_for_file /etc/pki/libvirt-vnc/ca-cert.pem
+ local file=/etc/pki/libvirt-vnc/ca-cert.pem
+ '[' '!' -f /etc/pki/libvirt-vnc/ca-cert.pem ']'
+ wait_for_file /etc/pki/libvirt-vnc/server-cert.pem
+ local file=/etc/pki/libvirt-vnc/server-cert.pem
+ '[' '!' -f /etc/pki/libvirt-vnc/server-cert.pem ']'
+ wait_for_file /etc/pki/libvirt-vnc/server-key.pem
+ local file=/etc/pki/libvirt-vnc/server-key.pem
+ '[' '!' -f /etc/pki/libvirt-vnc/server-key.pem ']'
++ grep -w libvirtd
++ cat /proc/1/comm /proc/10/comm /proc/100/comm /proc/100894/comm /proc/101693/comm /proc/102/comm /proc/103/comm /proc/10307/comm /proc/104/comm /proc/104021/comm /proc/104043/comm /proc/104516/comm /proc/104529/comm /proc/104530/comm /proc/105/comm /proc/105633/comm /proc/105658/comm /proc/105679/comm /proc/105702/comm /proc/10583/comm /proc/106/comm /proc/106087/comm /proc/106270/comm /proc/106521/comm /proc/106523/comm /proc/107303/comm /proc/107637/comm /proc/107660/comm /proc/107770/comm /proc/107788/comm /proc/107794/comm /proc/107910/comm /proc/107911/comm /proc/107921/comm /proc/108/comm /proc/108038/comm /proc/1087/comm /proc/109/comm /proc/109544/comm /proc/109568/comm /proc/109595/comm /proc/109627/comm /proc/11/comm /proc/110/comm /proc/11067/comm /proc/11068/comm /proc/111/comm /proc/111602/comm /proc/112/comm /proc/113/comm /proc/113443/comm /proc/114/comm /proc/114407/comm /proc/115/comm /proc/115944/comm /proc/116/comm /proc/117/comm /proc/118917/comm /proc/119453/comm /proc/119520/comm /proc/119521/comm /proc/12/comm /proc/120786/comm /proc/120818/comm /proc/122577/comm /proc/122600/comm /proc/122636/comm /proc/122664/comm /proc/123228/comm /proc/123684/comm /proc/123866/comm /proc/124437/comm /proc/124510/comm /proc/124516/comm /proc/12458/comm /proc/12488/comm /proc/125061/comm /proc/125087/comm /proc/12543/comm /proc/125522/comm /proc/12569/comm /proc/12588/comm /proc/127526/comm /proc/12818/comm /proc/12851/comm /proc/128970/comm /proc/12899/comm /proc/12931/comm /proc/12951/comm /proc/129867/comm /proc/129868/comm /proc/13/comm /proc/130500/comm /proc/130614/comm /proc/130626/comm /proc/130627/comm /proc/132422/comm /proc/132423/comm /proc/132424/comm /proc/139391/comm /proc/139392/comm /proc/139394/comm /proc/139395/comm /proc/139533/comm /proc/14/comm /proc/140253/comm /proc/140286/comm /proc/140666/comm /proc/140711/comm /proc/140723/comm /proc/140755/comm /proc/140756/comm /proc/140757/comm /proc/140758/comm /proc/140760/comm /proc/141689/comm /proc/141712/comm /proc/141785/comm /proc/1418/comm /proc/142043/comm /proc/142067/comm /proc/142335/comm /proc/142878/comm /proc/142901/comm /proc/143211/comm /proc/143227/comm /proc/143233/comm /proc/143346/comm /proc/143347/comm /proc/143357/comm /proc/143512/comm /proc/145075/comm /proc/145136/comm /proc/145275/comm /proc/145376/comm /proc/145400/comm /proc/145500/comm /proc/145535/comm /proc/145574/comm /proc/145612/comm /proc/145643/comm /proc/145671/comm /proc/145704/comm /proc/145978/comm /proc/146002/comm /proc/146028/comm /proc/146072/comm /proc/146099/comm /proc/146503/comm /proc/146861/comm /proc/148552/comm /proc/148584/comm /proc/148669/comm /proc/15/comm /proc/1523/comm /proc/1524/comm /proc/1525/comm /proc/1526/comm /proc/1530/comm /proc/1597/comm /proc/16/comm /proc/1601/comm /proc/1610/comm /proc/164181/comm /proc/164743/comm /proc/164909/comm /proc/165/comm /proc/165961/comm /proc/166/comm /proc/166112/comm /proc/167/comm /proc/167449/comm /proc/167450/comm /proc/167488/comm /proc/167493/comm /proc/16751/comm /proc/168930/comm /proc/168959/comm /proc/168960/comm /proc/169/comm /proc/169276/comm /proc/169362/comm /proc/169406/comm /proc/169407/comm /proc/169588/comm /proc/169619/comm /proc/169620/comm /proc/170/comm /proc/170269/comm /proc/170297/comm /proc/170446/comm /proc/170568/comm /proc/170585/comm /proc/170587/comm /proc/170588/comm /proc/170767/comm /proc/170768/comm /proc/171/comm /proc/171263/comm /proc/171264/comm /proc/171265/comm /proc/171266/comm /proc/171561/comm /proc/171585/comm /proc/171759/comm /proc/171799/comm /proc/171803/comm /proc/171806/comm /proc/171870/comm /proc/171939/comm /proc/171940/comm /proc/171941/comm /proc/171951/comm /proc/172/comm /proc/172045/comm /proc/173/comm /proc/173473/comm /proc/173500/comm /proc/173539/comm /proc/173557/comm /proc/173563/comm /proc/173590/comm /proc/173617/comm /proc/173698/comm /proc/173699/comm /proc/173758/comm /proc/174/comm /proc/174024/comm /proc/174049/comm /proc/174162/comm /proc/174188/comm /proc/174602/comm /proc/174614/comm /proc/175002/comm /proc/175014/comm /proc/177/comm /proc/177500/comm /proc/177528/comm /proc/177548/comm /proc/177549/comm /proc/178227/comm /proc/178236/comm /proc/178237/comm /proc/179/comm /proc/179406/comm /proc/179407/comm /proc/179408/comm /proc/18/comm /proc/180/comm /proc/182/comm /proc/182474/comm /proc/182475/comm /proc/182477/comm /proc/182681/comm /proc/182698/comm /proc/182727/comm /proc/182728/comm /proc/182741/comm /proc/182778/comm /proc/182779/comm /proc/183/comm /proc/183191/comm /proc/183194/comm /proc/183196/comm /proc/183811/comm /proc/184/comm /proc/184051/comm /proc/184304/comm /proc/184563/comm /proc/185/comm /proc/185599/comm /proc/185611/comm /proc/185631/comm /proc/185892/comm /proc/185938/comm /proc/185946/comm /proc/186/comm /proc/186195/comm /proc/186513/comm /proc/186552/comm /proc/186568/comm /proc/186579/comm /proc/186582/comm /proc/186583/comm /proc/186591/comm /proc/186592/comm /proc/186885/comm /proc/187/comm /proc/187067/comm /proc/18722/comm /proc/187241/comm /proc/187265/comm /proc/187298/comm /proc/187347/comm /proc/187436/comm /proc/18744/comm /proc/187466/comm /proc/187519/comm /proc/187536/comm /proc/187542/comm /proc/18765/comm /proc/187832/comm /proc/187833/comm /proc/187843/comm /proc/187914/comm /proc/18793/comm /proc/187946/comm /proc/187949/comm /proc/187981/comm /proc/187982/comm /proc/187983/comm /proc/188/comm /proc/18810/comm /proc/189/comm /proc/19/comm /proc/190/comm /proc/191/comm /proc/192/comm /proc/198/comm /proc/2/comm /proc/20/comm /proc/20366/comm /proc/209/comm /proc/21/comm /proc/21740/comm /proc/21799/comm /proc/21800/comm /proc/21820/comm /proc/219/comm /proc/22/comm /proc/220/comm /proc/225/comm /proc/24/comm /proc/247/comm /proc/25/comm /proc/25060/comm /proc/25328/comm /proc/25344/comm /proc/25369/comm /proc/25381/comm /proc/26/comm /proc/268/comm /proc/27/comm /proc/28/comm /proc/287/comm /proc/289/comm /proc/290/comm /proc/292/comm /proc/29838/comm /proc/3/comm /proc/30/comm /proc/30105/comm /proc/30122/comm /proc/30146/comm /proc/30159/comm /proc/31/comm /proc/311/comm /proc/312/comm /proc/316/comm /proc/317/comm /proc/32/comm /proc/326/comm /proc/33/comm /proc/34/comm /proc/34633/comm /proc/34911/comm /proc/34928/comm /proc/34952/comm /proc/34965/comm /proc/352/comm /proc/359/comm /proc/36/comm /proc/37/comm /proc/378/comm /proc/38/comm /proc/38149/comm /proc/38151/comm /proc/387/comm /proc/39/comm /proc/393/comm /proc/394/comm /proc/398/comm /proc/399/comm /proc/4/comm /proc/40/comm /proc/40512/comm /proc/40550/comm /proc/40563/comm /proc/40564/comm /proc/40579/comm /proc/40595/comm /proc/40642/comm /proc/40668/comm /proc/40672/comm /proc/40691/comm /proc/40749/comm /proc/40780/comm /proc/40798/comm /proc/40811/comm /proc/40924/comm /proc/40976/comm /proc/41143/comm /proc/41166/comm /proc/41191/comm /proc/41860/comm /proc/41878/comm /proc/41908/comm /proc/41922/comm /proc/42/comm /proc/42181/comm /proc/42389/comm /proc/42807/comm /proc/43/comm /proc/43215/comm /proc/43239/comm /proc/43281/comm /proc/43666/comm /proc/43691/comm /proc/43706/comm /proc/43730/comm /proc/43761/comm /proc/43785/comm /proc/44/comm /proc/44130/comm /proc/44153/comm /proc/44364/comm /proc/44634/comm /proc/44665/comm /proc/44667/comm /proc/44698/comm /proc/44712/comm /proc/44742/comm /proc/44853/comm /proc/44899/comm /proc/44941/comm /proc/45/comm /proc/457/comm /proc/46/comm /proc/47029/comm /proc/47052/comm /proc/47068/comm /proc/47099/comm /proc/47241/comm /proc/47382/comm /proc/47411/comm /proc/47490/comm /proc/47844/comm /proc/47869/comm /proc/47927/comm /proc/47950/comm /proc/47996/comm /proc/48/comm /proc/48119/comm /proc/48286/comm /proc/48309/comm /proc/48655/comm /proc/48821/comm /proc/48846/comm /proc/49/comm /proc/49244/comm /proc/49269/comm /proc/49293/comm /proc/49371/comm /proc/49471/comm /proc/49576/comm /proc/49617/comm /proc/497/comm /proc/49704/comm /proc/5/comm /proc/50/comm /proc/51/comm /proc/51316/comm /proc/51339/comm /proc/51489/comm /proc/51514/comm /proc/51603/comm /proc/51699/comm /proc/51894/comm /proc/51985/comm /proc/52/comm /proc/52071/comm /proc/523/comm /proc/54/comm /proc/55/comm /proc/55485/comm /proc/55732/comm /proc/55756/comm /proc/56/comm /proc/56340/comm /proc/56370/comm /proc/56409/comm /proc/56433/comm /proc/56448/comm /proc/56473/comm /proc/56641/comm /proc/56665/comm /proc/56713/comm /proc/56752/comm /proc/56793/comm /proc/56893/comm /proc/57/comm /proc/58/comm /proc/6/comm /proc/60/comm /proc/60283/comm /proc/60284/comm /proc/60531/comm /proc/60596/comm /proc/60720/comm /proc/60745/comm /proc/60760/comm /proc/60787/comm /proc/60798/comm /proc/60829/comm /proc/61/comm /proc/61045/comm /proc/61051/comm /proc/61129/comm /proc/615/comm /proc/61589/comm /proc/61689/comm /proc/618/comm /proc/61899/comm /proc/61937/comm /proc/61938/comm /proc/61941/comm /proc/61942/comm /proc/61943/comm /proc/62/comm /proc/621/comm /proc/62154/comm /proc/62177/comm /proc/62236/comm /proc/62260/comm /proc/62557/comm /proc/62582/comm /proc/62592/comm /proc/62600/comm /proc/62626/comm /proc/62646/comm /proc/62670/comm /proc/627/comm /proc/628/comm /proc/62981/comm /proc/63/comm /proc/63093/comm /proc/63117/comm /proc/63144/comm /proc/63534/comm /proc/63559/comm /proc/63617/comm /proc/63634/comm /proc/63635/comm /proc/63636/comm /proc/63637/comm /proc/63638/comm /proc/63810/comm /proc/63835/comm /proc/63948/comm /proc/64/comm /proc/64038/comm /proc/64307/comm /proc/64330/comm /proc/644/comm /proc/64558/comm /proc/64607/comm /proc/64666/comm /proc/64729/comm /proc/64767/comm /proc/648/comm /proc/65090/comm /proc/65116/comm /proc/65210/comm /proc/65251/comm /proc/65293/comm /proc/65338/comm /proc/65412/comm /proc/65587/comm /proc/65634/comm /proc/65663/comm /proc/65740/comm /proc/65781/comm /proc/65802/comm /proc/65833/comm /proc/66/comm /proc/66254/comm /proc/66486/comm /proc/66750/comm /proc/66773/comm /proc/67/comm /proc/67235/comm /proc/67251/comm /proc/67257/comm /proc/67305/comm /proc/67306/comm /proc/67316/comm /proc/67448/comm /proc/68/comm /proc/68754/comm /proc/68777/comm /proc/69/comm /proc/70/comm /proc/701/comm /proc/704/comm /proc/705/comm /proc/70596/comm /proc/706/comm /proc/72/comm /proc/720/comm /proc/72109/comm /proc/72123/comm /proc/72124/comm /proc/72125/comm /proc/72126/comm /proc/72127/comm /proc/72128/comm /proc/72129/comm /proc/72131/comm /proc/72134/comm /proc/72135/comm /proc/72136/comm /proc/72140/comm /proc/72141/comm /proc/72142/comm /proc/73/comm /proc/74/comm /proc/75/comm /proc/76/comm /proc/77653/comm /proc/77969/comm /proc/77992/comm /proc/78/comm /proc/78094/comm /proc/78110/comm /proc/78116/comm /proc/78174/comm /proc/78175/comm /proc/78185/comm /proc/78317/comm /proc/79/comm /proc/79513/comm /proc/79536/comm /proc/8/comm /proc/80/comm /proc/81/comm /proc/82/comm /proc/84/comm /proc/84665/comm /proc/84678/comm /proc/85/comm /proc/85304/comm /proc/85328/comm /proc/86/comm /proc/86211/comm /proc/865/comm /proc/87/comm /proc/88/comm /proc/88824/comm /proc/88825/comm /proc/89144/comm /proc/9/comm /proc/90/comm /proc/90611/comm /proc/90655/comm /proc/91/comm /proc/91223/comm /proc/91416/comm /proc/91440/comm /proc/91711/comm /proc/91727/comm /proc/91733/comm /proc/91833/comm /proc/91834/comm /proc/91844/comm /proc/92/comm /proc/92020/comm /proc/9207/comm /proc/9224/comm /proc/9240/comm /proc/93/comm /proc/9322/comm /proc/94/comm /proc/95437/comm /proc/95461/comm /proc/95475/comm /proc/95499/comm /proc/95853/comm /proc/95877/comm /proc/95999/comm /proc/96/comm /proc/96733/comm /proc/97/comm /proc/97919/comm /proc/97930/comm /proc/98/comm /proc/99/comm /proc/9940/comm /proc/self/comm /proc/thread-self/comm
+ '[' -n '' ']'
+ rm -f /var/run/libvirtd.pid
+ [[ -c /dev/kvm ]]
+ chmod 660 /dev/kvm
+ chown root:kvm /dev/kvm
+ CGROUPS=
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/blkio ']'
+ grep -w blkio /sys/fs/cgroup/cgroup.controllers
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/cpu ']'
+ grep -w cpu /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=cpu,
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/devices ']'
+ grep -w devices /sys/fs/cgroup/cgroup.controllers
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/freezer ']'
+ grep -w freezer /sys/fs/cgroup/cgroup.controllers
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/hugetlb ']'
+ grep -w hugetlb /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=hugetlb,
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/memory ']'
+ grep -w memory /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=memory,
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/net_cls ']'
+ grep -w net_cls /sys/fs/cgroup/cgroup.controllers
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/perf_event ']'
+ grep -w perf_event /sys/fs/cgroup/cgroup.controllers
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/rdma ']'
+ grep -w rdma /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=rdma,
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/misc ']'
+ grep -w misc /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=misc,
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/pids ']'
+ grep -w pids /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=pids,
+ cgcreate -g cpu,hugetlb,memory,rdma,misc,pids:/osh-libvirt
++ cat /proc/meminfo
++ grep HugePages_Total
++ tr -cd '[:digit:]'
+ hp_count=0
+ '[' 00 -gt 0 ']'
+ '[' -n 457eb676-33da-42ec-9a8c-9293d545c337 ']'
+ cgexec -g cpu,hugetlb,memory,rdma,misc,pids:/osh-libvirt systemd-run --scope --slice=system libvirtd --listen
++ mktemp --suffix .xml
+ tmpsecret=/tmp/tmp.y6Ev4gPZOD.xml
+ '[' -n '' ']'
+ trap cleanup EXIT
+ TIMEOUT=60
+ [[ ! -f /var/run/libvirtd.pid ]]
+ [[ 60 -gt 0 ]]
+ let TIMEOUT-=1
+ sleep 1
Running as unit: run-r0687095f4890452e836b7e3da09fbfa2.scope; invocation ID: ffe9312c48cb498d8f35edd834d40076
+ [[ ! -f /var/run/libvirtd.pid ]]
+ TIMEOUT=10
+ [[ ! -e /var/run/libvirt/libvirt-sock ]]
+ '[' -z '' ']'
+ '[' -n cinder ']'
++ awk '/key/{print $3}' /etc/ceph/ceph.client.cinder.keyring
+ CEPH_CINDER_KEYRING=AQD1ICFqN6y1IBAAqehxxphTxuo4d6hSxUvRuA==
+ '[' -n cinder ']'
+ create_virsh_libvirt_secret cinder 457eb676-33da-42ec-9a8c-9293d545c337 AQD1ICFqN6y1IBAAqehxxphTxuo4d6hSxUvRuA==
+ sec_user=cinder
+ sec_uuid=457eb676-33da-42ec-9a8c-9293d545c337
+ sec_ceph_keyring=AQD1ICFqN6y1IBAAqehxxphTxuo4d6hSxUvRuA==
+ cat
+ virsh secret-define --file /tmp/tmp.y6Ev4gPZOD.xml
Secret 457eb676-33da-42ec-9a8c-9293d545c337 created

+ virsh secret-set-value --secret 457eb676-33da-42ec-9a8c-9293d545c337 --base64 AQD1ICFqN6y1IBAAqehxxphTxuo4d6hSxUvRuA==
error: Passing secret value as command-line argument is insecure!
Secret value set

+ '[' -n '' ']'
+ '[' -n '' ']'
+ cleanup
+ rm -f /tmp/tmp.y6Ev4gPZOD.xml
+ '[' -n '' ']'
++ cat /var/run/libvirtd.pid
+ LIBVIRTD_PID=188008
+ kill 188008
+ tail --pid=188008 -f /dev/null
+ cgexec -g cpu,hugetlb,memory,rdma,misc,pids:/osh-libvirt systemd-run --scope --slice=system libvirtd --listen
Running as unit: run-r1a972452d5044a1a8df1697b2b6b1374.scope; invocation ID: 6497a2f8441c4c96a707af20f6c17b09