+ wait_for_file /etc/pki/CA/cacert.pem
+ local file=/etc/pki/CA/cacert.pem
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ sleep 1
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ sleep 1
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ sleep 1
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ sleep 1
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ sleep 1
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ wait_for_file /etc/pki/qemu/ca-cert.pem
+ local file=/etc/pki/qemu/ca-cert.pem
+ '[' '!' -f /etc/pki/qemu/ca-cert.pem ']'
+ wait_for_file /etc/pki/libvirt/servercert.pem
+ local file=/etc/pki/libvirt/servercert.pem
+ '[' '!' -f /etc/pki/libvirt/servercert.pem ']'
+ wait_for_file /etc/pki/libvirt/clientcert.pem
+ local file=/etc/pki/libvirt/clientcert.pem
+ '[' '!' -f /etc/pki/libvirt/clientcert.pem ']'
+ wait_for_file /etc/pki/qemu/server-cert.pem
+ local file=/etc/pki/qemu/server-cert.pem
+ '[' '!' -f /etc/pki/qemu/server-cert.pem ']'
+ wait_for_file /etc/pki/qemu/client-cert.pem
+ local file=/etc/pki/qemu/client-cert.pem
+ '[' '!' -f /etc/pki/qemu/client-cert.pem ']'
+ wait_for_file /etc/pki/libvirt/private/serverkey.pem
+ local file=/etc/pki/libvirt/private/serverkey.pem
+ '[' '!' -f /etc/pki/libvirt/private/serverkey.pem ']'
+ wait_for_file /etc/pki/libvirt/private/clientkey.pem
+ local file=/etc/pki/libvirt/private/clientkey.pem
+ '[' '!' -f /etc/pki/libvirt/private/clientkey.pem ']'
+ wait_for_file /etc/pki/qemu/server-key.pem
+ local file=/etc/pki/qemu/server-key.pem
+ '[' '!' -f /etc/pki/qemu/server-key.pem ']'
+ wait_for_file /etc/pki/qemu/client-key.pem
+ local file=/etc/pki/qemu/client-key.pem
+ '[' '!' -f /etc/pki/qemu/client-key.pem ']'
+ wait_for_file /etc/pki/libvirt-vnc/ca-cert.pem
+ local file=/etc/pki/libvirt-vnc/ca-cert.pem
+ '[' '!' -f /etc/pki/libvirt-vnc/ca-cert.pem ']'
+ wait_for_file /etc/pki/libvirt-vnc/server-cert.pem
+ local file=/etc/pki/libvirt-vnc/server-cert.pem
+ '[' '!' -f /etc/pki/libvirt-vnc/server-cert.pem ']'
+ wait_for_file /etc/pki/libvirt-vnc/server-key.pem
+ local file=/etc/pki/libvirt-vnc/server-key.pem
+ '[' '!' -f /etc/pki/libvirt-vnc/server-key.pem ']'
++ grep -w libvirtd
++ cat /proc/1/comm /proc/10/comm /proc/100/comm /proc/100970/comm /proc/101264/comm /proc/102/comm /proc/103/comm /proc/10336/comm /proc/104/comm /proc/105/comm /proc/106/comm /proc/108/comm /proc/10842/comm /proc/10843/comm /proc/109/comm /proc/11/comm /proc/110/comm /proc/1109/comm /proc/110913/comm /proc/110936/comm /proc/111/comm /proc/111350/comm /proc/111371/comm /proc/111372/comm /proc/112/comm /proc/112498/comm /proc/112524/comm /proc/112665/comm /proc/112688/comm /proc/112816/comm /proc/113/comm /proc/113012/comm /proc/113014/comm /proc/113782/comm /proc/114/comm /proc/114117/comm /proc/114550/comm /proc/114646/comm /proc/114669/comm /proc/114784/comm /proc/114801/comm /proc/114807/comm /proc/114936/comm /proc/114937/comm /proc/114947/comm /proc/115/comm /proc/115090/comm /proc/116/comm /proc/116356/comm /proc/116381/comm /proc/116396/comm /proc/116420/comm /proc/116928/comm /proc/116938/comm /proc/117/comm /proc/119210/comm /proc/119627/comm /proc/119878/comm /proc/12/comm /proc/121860/comm /proc/121861/comm /proc/12231/comm /proc/12259/comm /proc/12276/comm /proc/12334/comm /proc/123456/comm /proc/123457/comm /proc/123500/comm /proc/12354/comm /proc/124597/comm /proc/125422/comm /proc/12593/comm /proc/12624/comm /proc/12628/comm /proc/12681/comm /proc/12705/comm /proc/127113/comm /proc/127126/comm /proc/127127/comm /proc/12725/comm /proc/128770/comm /proc/13/comm /proc/139839/comm /proc/139845/comm /proc/139887/comm /proc/139890/comm /proc/14/comm /proc/140562/comm /proc/140922/comm /proc/141151/comm /proc/141789/comm /proc/141844/comm /proc/141845/comm /proc/142549/comm /proc/142580/comm /proc/142779/comm /proc/142780/comm /proc/144001/comm /proc/144007/comm /proc/144008/comm /proc/144164/comm /proc/1442/comm /proc/147614/comm /proc/147777/comm /proc/148510/comm /proc/148523/comm /proc/148524/comm /proc/149708/comm /proc/149709/comm /proc/15/comm /proc/1547/comm /proc/1548/comm /proc/1549/comm /proc/1550/comm /proc/1554/comm /proc/156816/comm /proc/156817/comm /proc/156819/comm /proc/156820/comm /proc/156995/comm /proc/157639/comm /proc/157665/comm /proc/158098/comm /proc/158133/comm /proc/158146/comm /proc/158179/comm /proc/158180/comm /proc/158181/comm /proc/158182/comm /proc/158713/comm /proc/158743/comm /proc/159531/comm /proc/159662/comm /proc/159665/comm /proc/159666/comm /proc/159944/comm /proc/159969/comm /proc/16/comm /proc/160073/comm /proc/160102/comm /proc/160198/comm /proc/160217/comm /proc/160233/comm /proc/160254/comm /proc/160288/comm /proc/160331/comm /proc/160348/comm /proc/160416/comm /proc/160445/comm /proc/160583/comm /proc/160630/comm /proc/160840/comm /proc/161063/comm /proc/161068/comm /proc/161470/comm /proc/161623/comm /proc/161647/comm /proc/161928/comm /proc/161946/comm /proc/161952/comm /proc/162006/comm /proc/162007/comm /proc/162019/comm /proc/162124/comm /proc/1623/comm /proc/1627/comm /proc/1636/comm /proc/164078/comm /proc/164109/comm /proc/164144/comm /proc/164217/comm /proc/164240/comm /proc/164260/comm /proc/164294/comm /proc/164301/comm /proc/164452/comm /proc/164490/comm /proc/164515/comm /proc/164538/comm /proc/164610/comm /proc/164677/comm /proc/164702/comm /proc/164990/comm /proc/165/comm /proc/165014/comm /proc/165614/comm /proc/166/comm /proc/167/comm /proc/167644/comm /proc/167667/comm /proc/167727/comm /proc/168/comm /proc/169/comm /proc/169959/comm /proc/170/comm /proc/170104/comm /proc/170130/comm /proc/170637/comm /proc/170853/comm /proc/170931/comm /proc/171/comm /proc/171244/comm /proc/172/comm /proc/172129/comm /proc/172859/comm /proc/173/comm /proc/173075/comm /proc/173401/comm /proc/175344/comm /proc/175383/comm /proc/175384/comm /proc/175521/comm /proc/175533/comm /proc/175534/comm /proc/176/comm /proc/176572/comm /proc/176573/comm /proc/176701/comm /proc/176748/comm /proc/176753/comm /proc/176782/comm /proc/177060/comm /proc/177061/comm /proc/177099/comm /proc/177101/comm /proc/177428/comm /proc/177429/comm /proc/177834/comm /proc/177858/comm /proc/178/comm /proc/178000/comm /proc/178018/comm /proc/178024/comm /proc/178086/comm /proc/178087/comm /proc/178100/comm /proc/178280/comm /proc/178288/comm /proc/178291/comm /proc/179/comm /proc/179784/comm /proc/179802/comm /proc/179826/comm /proc/179880/comm /proc/179904/comm /proc/179934/comm /proc/18/comm /proc/180191/comm /proc/180220/comm /proc/180239/comm /proc/180269/comm /proc/180627/comm /proc/180746/comm /proc/180758/comm /proc/180922/comm /proc/180937/comm /proc/181/comm /proc/183/comm /proc/183794/comm /proc/184/comm /proc/184487/comm /proc/184514/comm /proc/184517/comm /proc/18470/comm /proc/184815/comm /proc/18488/comm /proc/185/comm /proc/18539/comm /proc/18567/comm /proc/18582/comm /proc/185871/comm /proc/185885/comm /proc/186291/comm /proc/186315/comm /proc/186509/comm /proc/186874/comm /proc/186912/comm /proc/186998/comm /proc/187/comm /proc/187024/comm /proc/187103/comm /proc/187111/comm /proc/187667/comm /proc/188/comm /proc/189/comm /proc/189592/comm /proc/189963/comm /proc/189964/comm /proc/189965/comm /proc/19/comm /proc/190269/comm /proc/190286/comm /proc/190313/comm /proc/190314/comm /proc/190327/comm /proc/190340/comm /proc/190341/comm /proc/190764/comm /proc/190766/comm /proc/190769/comm /proc/191/comm /proc/191119/comm /proc/191425/comm /proc/191567/comm /proc/191727/comm /proc/191742/comm /proc/191743/comm /proc/191744/comm /proc/191745/comm /proc/191746/comm /proc/191747/comm /proc/191968/comm /proc/192/comm /proc/192084/comm /proc/192384/comm /proc/192597/comm /proc/192901/comm /proc/192925/comm /proc/193/comm /proc/193169/comm /proc/193173/comm /proc/193192/comm /proc/193209/comm /proc/193215/comm /proc/193361/comm /proc/193362/comm /proc/193375/comm /proc/193444/comm /proc/193458/comm /proc/193493/comm /proc/193519/comm /proc/193650/comm /proc/193812/comm /proc/193815/comm /proc/193821/comm /proc/193822/comm /proc/193823/comm /proc/194/comm /proc/2/comm /proc/20/comm /proc/200/comm /proc/21/comm /proc/212/comm /proc/21512/comm /proc/21577/comm /proc/21578/comm /proc/21591/comm /proc/219/comm /proc/22/comm /proc/220/comm /proc/225/comm /proc/22959/comm /proc/24/comm /proc/247/comm /proc/24844/comm /proc/25/comm /proc/25108/comm /proc/25124/comm /proc/25150/comm /proc/25162/comm /proc/25691/comm /proc/26/comm /proc/265/comm /proc/27/comm /proc/28/comm /proc/284/comm /proc/287/comm /proc/288/comm /proc/289/comm /proc/29334/comm /proc/29613/comm /proc/29631/comm /proc/29656/comm /proc/29668/comm /proc/3/comm /proc/30/comm /proc/309/comm /proc/31/comm /proc/310/comm /proc/314/comm /proc/315/comm /proc/32/comm /proc/33/comm /proc/33966/comm /proc/34/comm /proc/34233/comm /proc/34250/comm /proc/34274/comm /proc/34286/comm /proc/349/comm /proc/350/comm /proc/35092/comm /proc/353/comm /proc/358/comm /proc/36/comm /proc/366/comm /proc/37/comm /proc/37472/comm /proc/37474/comm /proc/378/comm /proc/38/comm /proc/386/comm /proc/39/comm /proc/393/comm /proc/398/comm /proc/39855/comm /proc/39875/comm /proc/39907/comm /proc/39916/comm /proc/39922/comm /proc/39947/comm /proc/39992/comm /proc/4/comm /proc/40/comm /proc/40014/comm /proc/40017/comm /proc/40034/comm /proc/40092/comm /proc/40131/comm /proc/40139/comm /proc/40157/comm /proc/40270/comm /proc/40326/comm /proc/40428/comm /proc/40451/comm /proc/40477/comm /proc/41237/comm /proc/41247/comm /proc/41292/comm /proc/41293/comm /proc/41472/comm /proc/41541/comm /proc/41765/comm /proc/42/comm /proc/42189/comm /proc/42620/comm /proc/42643/comm /proc/42686/comm /proc/43/comm /proc/43024/comm /proc/43047/comm /proc/43076/comm /proc/43100/comm /proc/43148/comm /proc/43208/comm /proc/43491/comm /proc/43517/comm /proc/43778/comm /proc/44/comm /proc/44032/comm /proc/44056/comm /proc/44071/comm /proc/44095/comm /proc/44118/comm /proc/44141/comm /proc/44255/comm /proc/44300/comm /proc/44342/comm /proc/45/comm /proc/451/comm /proc/46/comm /proc/46506/comm /proc/46531/comm /proc/46545/comm /proc/46576/comm /proc/46784/comm /proc/46797/comm /proc/46917/comm /proc/46939/comm /proc/47271/comm /proc/47294/comm /proc/47371/comm /proc/47396/comm /proc/47440/comm /proc/47667/comm /proc/47907/comm /proc/47931/comm /proc/48/comm /proc/48048/comm /proc/48203/comm /proc/48226/comm /proc/48631/comm /proc/48654/comm /proc/48701/comm /proc/48783/comm /proc/48856/comm /proc/48977/comm /proc/49/comm /proc/49002/comm /proc/49089/comm /proc/5/comm /proc/50/comm /proc/50910/comm /proc/50933/comm /proc/51/comm /proc/51105/comm /proc/51128/comm /proc/51181/comm /proc/51314/comm /proc/51523/comm /proc/51605/comm /proc/51671/comm /proc/52/comm /proc/521/comm /proc/54/comm /proc/55/comm /proc/55949/comm /proc/55972/comm /proc/56/comm /proc/56612/comm /proc/56649/comm /proc/56651/comm /proc/56685/comm /proc/56716/comm /proc/56740/comm /proc/56856/comm /proc/56879/comm /proc/56943/comm /proc/56997/comm /proc/57/comm /proc/57049/comm /proc/57159/comm /proc/58/comm /proc/6/comm /proc/60/comm /proc/61/comm /proc/613/comm /proc/61536/comm /proc/61537/comm /proc/61538/comm /proc/61539/comm /proc/616/comm /proc/61726/comm /proc/61763/comm /proc/619/comm /proc/61939/comm /proc/61963/comm /proc/61977/comm /proc/62/comm /proc/62002/comm /proc/62022/comm /proc/62046/comm /proc/62272/comm /proc/62431/comm /proc/625/comm /proc/626/comm /proc/62959/comm /proc/62985/comm /proc/63/comm /proc/63247/comm /proc/63248/comm /proc/63266/comm /proc/63267/comm /proc/63285/comm /proc/63495/comm /proc/63533/comm /proc/63563/comm /proc/63587/comm /proc/63763/comm /proc/63794/comm /proc/63833/comm /proc/63856/comm /proc/63940/comm /proc/63979/comm /proc/64/comm /proc/64257/comm /proc/64281/comm /proc/644/comm /proc/64566/comm /proc/64661/comm /proc/64685/comm /proc/64942/comm /proc/64965/comm /proc/650/comm /proc/65117/comm /proc/65132/comm /proc/65133/comm /proc/65134/comm /proc/65135/comm /proc/65136/comm /proc/65211/comm /proc/65527/comm /proc/65553/comm /proc/65578/comm /proc/65678/comm /proc/66/comm /proc/66063/comm /proc/66114/comm /proc/66295/comm /proc/66319/comm /proc/66446/comm /proc/66507/comm /proc/66623/comm /proc/66665/comm /proc/66723/comm /proc/66817/comm /proc/66858/comm /proc/67/comm /proc/67126/comm /proc/67403/comm /proc/67698/comm /proc/67729/comm /proc/67761/comm /proc/67868/comm /proc/67886/comm /proc/67892/comm /proc/68/comm /proc/68087/comm /proc/68110/comm /proc/68512/comm /proc/68529/comm /proc/68535/comm /proc/68669/comm /proc/68670/comm /proc/68686/comm /proc/68749/comm /proc/69/comm /proc/69821/comm /proc/69847/comm /proc/70/comm /proc/705/comm /proc/70550/comm /proc/708/comm /proc/709/comm /proc/71516/comm /proc/72/comm /proc/722/comm /proc/73/comm /proc/73572/comm /proc/73614/comm /proc/73615/comm /proc/73616/comm /proc/73617/comm /proc/73619/comm /proc/73620/comm /proc/73622/comm /proc/73623/comm /proc/73624/comm /proc/73627/comm /proc/73628/comm /proc/73629/comm /proc/73630/comm /proc/73633/comm /proc/74/comm /proc/75/comm /proc/76/comm /proc/78/comm /proc/78857/comm /proc/79/comm /proc/79304/comm /proc/79327/comm /proc/79437/comm /proc/79458/comm /proc/79464/comm /proc/79579/comm /proc/79580/comm /proc/79590/comm /proc/79678/comm /proc/8/comm /proc/80/comm /proc/80942/comm /proc/80983/comm /proc/81/comm /proc/81187/comm /proc/82/comm /proc/84/comm /proc/85/comm /proc/86/comm /proc/86231/comm /proc/86296/comm /proc/86309/comm /proc/867/comm /proc/87/comm /proc/87181/comm /proc/87205/comm /proc/88/comm /proc/88233/comm /proc/9/comm /proc/90/comm /proc/91/comm /proc/92/comm /proc/9233/comm /proc/9250/comm /proc/9266/comm /proc/93/comm /proc/93465/comm /proc/9348/comm /proc/93488/comm /proc/93826/comm /proc/93843/comm /proc/93849/comm /proc/94/comm /proc/94006/comm /proc/94007/comm /proc/94017/comm /proc/94258/comm /proc/96/comm /proc/97/comm /proc/98/comm /proc/98330/comm /proc/98354/comm /proc/98379/comm /proc/98403/comm /proc/98591/comm /proc/98693/comm /proc/99/comm /proc/99512/comm /proc/9965/comm /proc/self/comm /proc/thread-self/comm
+ '[' -n '' ']'
+ rm -f /var/run/libvirtd.pid
+ [[ -c /dev/kvm ]]
+ chmod 660 /dev/kvm
+ chown root:kvm /dev/kvm
+ CGROUPS=
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/blkio ']'
+ grep -w blkio /sys/fs/cgroup/cgroup.controllers
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/cpu ']'
+ grep -w cpu /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=cpu,
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/devices ']'
+ grep -w devices /sys/fs/cgroup/cgroup.controllers
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/freezer ']'
+ grep -w freezer /sys/fs/cgroup/cgroup.controllers
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/hugetlb ']'
+ grep -w hugetlb /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=hugetlb,
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/memory ']'
+ grep -w memory /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=memory,
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/net_cls ']'
+ grep -w net_cls /sys/fs/cgroup/cgroup.controllers
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/perf_event ']'
+ grep -w perf_event /sys/fs/cgroup/cgroup.controllers
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/rdma ']'
+ grep -w rdma /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=rdma,
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/misc ']'
+ grep -w misc /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=misc,
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/pids ']'
+ grep -w pids /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=pids,
+ cgcreate -g cpu,hugetlb,memory,rdma,misc,pids:/osh-libvirt
++ cat /proc/meminfo
++ grep HugePages_Total
++ tr -cd '[:digit:]'
+ hp_count=0
+ '[' 00 -gt 0 ']'
+ '[' -n 457eb676-33da-42ec-9a8c-9293d545c337 ']'
+ cgexec -g cpu,hugetlb,memory,rdma,misc,pids:/osh-libvirt systemd-run --scope --slice=system libvirtd --listen
++ mktemp --suffix .xml
+ tmpsecret=/tmp/tmp.7JhkIc40jw.xml
+ '[' -n '' ']'
+ trap cleanup EXIT
+ TIMEOUT=60
+ [[ ! -f /var/run/libvirtd.pid ]]
+ [[ 60 -gt 0 ]]
+ let TIMEOUT-=1
+ sleep 1
Running as unit: run-ree491dfb6bf0401fa036c4be86ca7564.scope; invocation ID: 6ecea65c46f94439b46c55c13599fe95
+ [[ ! -f /var/run/libvirtd.pid ]]
+ TIMEOUT=10
+ [[ ! -e /var/run/libvirt/libvirt-sock ]]
+ '[' -z '' ']'
+ '[' -n cinder ']'
++ awk '/key/{print $3}' /etc/ceph/ceph.client.cinder.keyring
+ CEPH_CINDER_KEYRING=AQAVuytqVgrEDBAA0+poFlq9Qlt4WLHXU92oMw==
+ '[' -n cinder ']'
+ create_virsh_libvirt_secret cinder 457eb676-33da-42ec-9a8c-9293d545c337 AQAVuytqVgrEDBAA0+poFlq9Qlt4WLHXU92oMw==
+ sec_user=cinder
+ sec_uuid=457eb676-33da-42ec-9a8c-9293d545c337
+ sec_ceph_keyring=AQAVuytqVgrEDBAA0+poFlq9Qlt4WLHXU92oMw==
+ cat
+ virsh secret-define --file /tmp/tmp.7JhkIc40jw.xml
Secret 457eb676-33da-42ec-9a8c-9293d545c337 created

+ virsh secret-set-value --secret 457eb676-33da-42ec-9a8c-9293d545c337 --base64 AQAVuytqVgrEDBAA0+poFlq9Qlt4WLHXU92oMw==
error: Passing secret value as command-line argument is insecure!
Secret value set

+ '[' -n '' ']'
+ '[' -n '' ']'
+ cleanup
+ rm -f /tmp/tmp.7JhkIc40jw.xml
+ '[' -n '' ']'
++ cat /var/run/libvirtd.pid
+ LIBVIRTD_PID=193843
+ kill 193843
+ tail --pid=193843 -f /dev/null
+ cgexec -g cpu,hugetlb,memory,rdma,misc,pids:/osh-libvirt systemd-run --scope --slice=system libvirtd --listen
Running as unit: run-r45a2b6c2e5a1466cb213c8d2e6ba8934.scope; invocation ID: 78d8a3aa6a2e4c869e424ffd9b41be79