+ wait_for_file /etc/pki/CA/cacert.pem
+ local file=/etc/pki/CA/cacert.pem
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ sleep 1
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ sleep 1
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ sleep 1
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ sleep 1
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ sleep 1
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ wait_for_file /etc/pki/qemu/ca-cert.pem
+ local file=/etc/pki/qemu/ca-cert.pem
+ '[' '!' -f /etc/pki/qemu/ca-cert.pem ']'
+ wait_for_file /etc/pki/libvirt/servercert.pem
+ local file=/etc/pki/libvirt/servercert.pem
+ '[' '!' -f /etc/pki/libvirt/servercert.pem ']'
+ wait_for_file /etc/pki/libvirt/clientcert.pem
+ local file=/etc/pki/libvirt/clientcert.pem
+ '[' '!' -f /etc/pki/libvirt/clientcert.pem ']'
+ wait_for_file /etc/pki/qemu/server-cert.pem
+ local file=/etc/pki/qemu/server-cert.pem
+ '[' '!' -f /etc/pki/qemu/server-cert.pem ']'
+ wait_for_file /etc/pki/qemu/client-cert.pem
+ local file=/etc/pki/qemu/client-cert.pem
+ '[' '!' -f /etc/pki/qemu/client-cert.pem ']'
+ wait_for_file /etc/pki/libvirt/private/serverkey.pem
+ local file=/etc/pki/libvirt/private/serverkey.pem
+ '[' '!' -f /etc/pki/libvirt/private/serverkey.pem ']'
+ wait_for_file /etc/pki/libvirt/private/clientkey.pem
+ local file=/etc/pki/libvirt/private/clientkey.pem
+ '[' '!' -f /etc/pki/libvirt/private/clientkey.pem ']'
+ wait_for_file /etc/pki/qemu/server-key.pem
+ local file=/etc/pki/qemu/server-key.pem
+ '[' '!' -f /etc/pki/qemu/server-key.pem ']'
+ wait_for_file /etc/pki/qemu/client-key.pem
+ local file=/etc/pki/qemu/client-key.pem
+ '[' '!' -f /etc/pki/qemu/client-key.pem ']'
+ wait_for_file /etc/pki/libvirt-vnc/ca-cert.pem
+ local file=/etc/pki/libvirt-vnc/ca-cert.pem
+ '[' '!' -f /etc/pki/libvirt-vnc/ca-cert.pem ']'
+ wait_for_file /etc/pki/libvirt-vnc/server-cert.pem
+ local file=/etc/pki/libvirt-vnc/server-cert.pem
+ '[' '!' -f /etc/pki/libvirt-vnc/server-cert.pem ']'
+ wait_for_file /etc/pki/libvirt-vnc/server-key.pem
+ local file=/etc/pki/libvirt-vnc/server-key.pem
+ '[' '!' -f /etc/pki/libvirt-vnc/server-key.pem ']'
++ grep -w libvirtd
++ cat /proc/1/comm /proc/10/comm /proc/100/comm /proc/100683/comm /proc/10153/comm /proc/10175/comm /proc/102/comm /proc/103/comm /proc/103115/comm /proc/103140/comm /proc/103479/comm /proc/103493/comm /proc/103494/comm /proc/104/comm /proc/104596/comm /proc/104623/comm /proc/104674/comm /proc/104709/comm /proc/105/comm /proc/105108/comm /proc/105331/comm /proc/105336/comm /proc/106/comm /proc/106411/comm /proc/106541/comm /proc/10658/comm /proc/10659/comm /proc/106677/comm /proc/106700/comm /proc/106842/comm /proc/106859/comm /proc/106865/comm /proc/106927/comm /proc/106928/comm /proc/106938/comm /proc/107224/comm /proc/108/comm /proc/108658/comm /proc/108682/comm /proc/108703/comm /proc/108726/comm /proc/109/comm /proc/109214/comm /proc/11/comm /proc/110/comm /proc/110854/comm /proc/110906/comm /proc/111/comm /proc/112/comm /proc/113/comm /proc/113580/comm /proc/113591/comm /proc/114/comm /proc/115/comm /proc/115061/comm /proc/115070/comm /proc/116/comm /proc/117/comm /proc/118189/comm /proc/1184/comm /proc/118645/comm /proc/118658/comm /proc/118659/comm /proc/12/comm /proc/120271/comm /proc/12093/comm /proc/12125/comm /proc/121701/comm /proc/121725/comm /proc/121745/comm /proc/121770/comm /proc/12180/comm /proc/12204/comm /proc/122123/comm /proc/12224/comm /proc/122372/comm /proc/122709/comm /proc/122940/comm /proc/124416/comm /proc/124440/comm /proc/12456/comm /proc/124595/comm /proc/124596/comm /proc/124598/comm /proc/12485/comm /proc/124910/comm /proc/12541/comm /proc/125517/comm /proc/125518/comm /proc/125520/comm /proc/12565/comm /proc/125669/comm /proc/12585/comm /proc/1289/comm /proc/1290/comm /proc/129001/comm /proc/1291/comm /proc/129168/comm /proc/129169/comm /proc/1292/comm /proc/129910/comm /proc/129928/comm /proc/129929/comm /proc/13/comm /proc/130962/comm /proc/130963/comm /proc/1371/comm /proc/1375/comm /proc/138047/comm /proc/138048/comm /proc/138050/comm /proc/138051/comm /proc/138318/comm /proc/138885/comm /proc/138908/comm /proc/138971/comm /proc/139113/comm /proc/139256/comm /proc/139290/comm /proc/139303/comm /proc/139333/comm /proc/139334/comm /proc/139335/comm /proc/139336/comm /proc/14/comm /proc/140409/comm /proc/140433/comm /proc/140876/comm /proc/140900/comm /proc/141082/comm /proc/141164/comm /proc/141488/comm /proc/141497/comm /proc/141499/comm /proc/141728/comm /proc/141750/comm /proc/141964/comm /proc/141981/comm /proc/141987/comm /proc/142037/comm /proc/142038/comm /proc/142048/comm /proc/142223/comm /proc/143721/comm /proc/143773/comm /proc/143870/comm /proc/143982/comm /proc/1440/comm /proc/144078/comm /proc/144116/comm /proc/144191/comm /proc/144230/comm /proc/144245/comm /proc/144270/comm /proc/144370/comm /proc/1444/comm /proc/144509/comm /proc/144534/comm /proc/144637/comm /proc/144660/comm /proc/144846/comm /proc/144876/comm /proc/1453/comm /proc/14764/comm /proc/15/comm /proc/16/comm /proc/163211/comm /proc/163301/comm /proc/164516/comm /proc/164593/comm /proc/165830/comm /proc/167/comm /proc/167397/comm /proc/167400/comm /proc/167861/comm /proc/167905/comm /proc/167906/comm /proc/167912/comm /proc/167986/comm /proc/167999/comm /proc/168/comm /proc/168000/comm /proc/168615/comm /proc/168617/comm /proc/168755/comm /proc/168766/comm /proc/168986/comm /proc/168987/comm /proc/168990/comm /proc/168991/comm /proc/169/comm /proc/169618/comm /proc/169623/comm /proc/169631/comm /proc/169797/comm /proc/169822/comm /proc/169981/comm /proc/169998/comm /proc/170/comm /proc/170004/comm /proc/170061/comm /proc/170062/comm /proc/170073/comm /proc/170153/comm /proc/170492/comm /proc/171/comm /proc/171463/comm /proc/171482/comm /proc/171500/comm /proc/171563/comm /proc/171587/comm /proc/171621/comm /proc/171667/comm /proc/171914/comm /proc/171936/comm /proc/171974/comm /proc/171983/comm /proc/172/comm /proc/172054/comm /proc/172086/comm /proc/172138/comm /proc/172173/comm /proc/172579/comm /proc/172592/comm /proc/172788/comm /proc/172865/comm /proc/173/comm /proc/174/comm /proc/175/comm /proc/176188/comm /proc/176265/comm /proc/177501/comm /proc/177518/comm /proc/178/comm /proc/178601/comm /proc/178604/comm /proc/178607/comm /proc/18/comm /proc/180013/comm /proc/180184/comm /proc/180299/comm /proc/180300/comm /proc/180301/comm /proc/180618/comm /proc/180619/comm /proc/180650/comm /proc/180651/comm /proc/180664/comm /proc/180677/comm /proc/180678/comm /proc/181/comm /proc/181005/comm /proc/181008/comm /proc/181011/comm /proc/181335/comm /proc/181620/comm /proc/181955/comm /proc/182/comm /proc/182186/comm /proc/182187/comm /proc/182204/comm /proc/182475/comm /proc/182880/comm /proc/183314/comm /proc/183336/comm /proc/183353/comm /proc/183592/comm /proc/183606/comm /proc/183852/comm /proc/183951/comm /proc/184/comm /proc/184072/comm /proc/184136/comm /proc/184170/comm /proc/184171/comm /proc/184172/comm /proc/184173/comm /proc/184174/comm /proc/184175/comm /proc/184372/comm /proc/184712/comm /proc/184816/comm /proc/184901/comm /proc/184927/comm /proc/185002/comm /proc/185017/comm /proc/185042/comm /proc/185223/comm /proc/185241/comm /proc/185247/comm /proc/185302/comm /proc/185303/comm /proc/185306/comm /proc/185318/comm /proc/185319/comm /proc/185346/comm /proc/185347/comm /proc/185348/comm /proc/185359/comm /proc/185363/comm /proc/185408/comm /proc/185409/comm /proc/185410/comm /proc/186/comm /proc/188/comm /proc/189/comm /proc/19/comm /proc/190/comm /proc/191/comm /proc/193/comm /proc/194/comm /proc/195/comm /proc/19507/comm /proc/19526/comm /proc/19549/comm /proc/19575/comm /proc/19593/comm /proc/196/comm /proc/199/comm /proc/2/comm /proc/20/comm /proc/204/comm /proc/21/comm /proc/21485/comm /proc/21496/comm /proc/21500/comm /proc/21515/comm /proc/216/comm /proc/219/comm /proc/22/comm /proc/220/comm /proc/225/comm /proc/24/comm /proc/24474/comm /proc/247/comm /proc/24734/comm /proc/24750/comm /proc/24776/comm /proc/24788/comm /proc/25/comm /proc/26/comm /proc/267/comm /proc/27/comm /proc/28/comm /proc/282/comm /proc/286/comm /proc/288/comm /proc/28888/comm /proc/289/comm /proc/290/comm /proc/29157/comm /proc/29174/comm /proc/29197/comm /proc/29210/comm /proc/3/comm /proc/30/comm /proc/309/comm /proc/31/comm /proc/310/comm /proc/314/comm /proc/32/comm /proc/323/comm /proc/33/comm /proc/33544/comm /proc/33807/comm /proc/33825/comm /proc/33850/comm /proc/33862/comm /proc/34/comm /proc/342/comm /proc/350/comm /proc/351/comm /proc/35432/comm /proc/35434/comm /proc/358/comm /proc/36/comm /proc/37/comm /proc/376/comm /proc/377/comm /proc/378/comm /proc/38/comm /proc/387/comm /proc/39/comm /proc/393/comm /proc/39358/comm /proc/39394/comm /proc/39397/comm /proc/39426/comm /proc/39431/comm /proc/39434/comm /proc/39499/comm /proc/39508/comm /proc/39520/comm /proc/39531/comm /proc/39591/comm /proc/39611/comm /proc/39641/comm /proc/39643/comm /proc/397/comm /proc/39752/comm /proc/39817/comm /proc/39915/comm /proc/39938/comm /proc/39963/comm /proc/4/comm /proc/40/comm /proc/40683/comm /proc/40704/comm /proc/40726/comm /proc/40746/comm /proc/40985/comm /proc/41194/comm /proc/41639/comm /proc/42/comm /proc/42046/comm /proc/42069/comm /proc/42112/comm /proc/42473/comm /proc/42497/comm /proc/42512/comm /proc/42535/comm /proc/42571/comm /proc/42591/comm /proc/42965/comm /proc/42988/comm /proc/43/comm /proc/43137/comm /proc/43213/comm /proc/43457/comm /proc/43485/comm /proc/43515/comm /proc/43537/comm /proc/43553/comm /proc/43576/comm /proc/43692/comm /proc/43738/comm /proc/43781/comm /proc/44/comm /proc/45/comm /proc/455/comm /proc/45738/comm /proc/45840/comm /proc/45866/comm /proc/45895/comm /proc/45919/comm /proc/46/comm /proc/46139/comm /proc/46152/comm /proc/46190/comm /proc/46295/comm /proc/46645/comm /proc/46668/comm /proc/46746/comm /proc/46769/comm /proc/46817/comm /proc/46945/comm /proc/47322/comm /proc/47345/comm /proc/47466/comm /proc/47631/comm /proc/47656/comm /proc/48/comm /proc/48045/comm /proc/48069/comm /proc/48096/comm /proc/48174/comm /proc/48254/comm /proc/48352/comm /proc/48376/comm /proc/48462/comm /proc/49/comm /proc/49300/comm /proc/5/comm /proc/50/comm /proc/50064/comm /proc/50096/comm /proc/50238/comm /proc/50266/comm /proc/50359/comm /proc/50450/comm /proc/50653/comm /proc/50753/comm /proc/51/comm /proc/52/comm /proc/521/comm /proc/54/comm /proc/54521/comm /proc/54544/comm /proc/55/comm /proc/55164/comm /proc/55189/comm /proc/55204/comm /proc/55235/comm /proc/55258/comm /proc/55291/comm /proc/55456/comm /proc/55500/comm /proc/55559/comm /proc/55602/comm /proc/55642/comm /proc/55740/comm /proc/56/comm /proc/57/comm /proc/58/comm /proc/59372/comm /proc/59449/comm /proc/59509/comm /proc/59532/comm /proc/59546/comm /proc/59570/comm /proc/59584/comm /proc/59614/comm /proc/59682/comm /proc/59867/comm /proc/59891/comm /proc/6/comm /proc/60/comm /proc/60148/comm /proc/60188/comm /proc/60300/comm /proc/60446/comm /proc/60447/comm /proc/60470/comm /proc/60474/comm /proc/60728/comm /proc/61/comm /proc/61027/comm /proc/61068/comm /proc/61101/comm /proc/61124/comm /proc/612/comm /proc/61326/comm /proc/61351/comm /proc/61371/comm /proc/61395/comm /proc/61417/comm /proc/61449/comm /proc/615/comm /proc/61552/comm /proc/61775/comm /proc/618/comm /proc/61822/comm /proc/61849/comm /proc/62/comm /proc/62155/comm /proc/62221/comm /proc/62350/comm /proc/62374/comm /proc/624/comm /proc/625/comm /proc/62561/comm /proc/62590/comm /proc/62620/comm /proc/62767/comm /proc/62792/comm /proc/62953/comm /proc/62976/comm /proc/62977/comm /proc/62978/comm /proc/62980/comm /proc/62981/comm /proc/63/comm /proc/63080/comm /proc/63373/comm /proc/63472/comm /proc/63483/comm /proc/63506/comm /proc/63728/comm /proc/63784/comm /proc/63829/comm /proc/63857/comm /proc/63897/comm /proc/63963/comm /proc/63999/comm /proc/64/comm /proc/64196/comm /proc/642/comm /proc/64245/comm /proc/644/comm /proc/64503/comm /proc/64725/comm /proc/64772/comm /proc/64805/comm /proc/64843/comm /proc/64874/comm /proc/65008/comm /proc/65035/comm /proc/65411/comm /proc/65428/comm /proc/65434/comm /proc/65505/comm /proc/65506/comm /proc/65516/comm /proc/65652/comm /proc/66/comm /proc/67/comm /proc/67189/comm /proc/67213/comm /proc/67938/comm /proc/68/comm /proc/68943/comm /proc/69/comm /proc/697/comm /proc/70/comm /proc/700/comm /proc/701/comm /proc/71041/comm /proc/71071/comm /proc/71072/comm /proc/71073/comm /proc/71074/comm /proc/71075/comm /proc/71076/comm /proc/71079/comm /proc/71081/comm /proc/71082/comm /proc/71083/comm /proc/71087/comm /proc/71088/comm /proc/71091/comm /proc/71092/comm /proc/714/comm /proc/72/comm /proc/73/comm /proc/74/comm /proc/75/comm /proc/76/comm /proc/76720/comm /proc/76743/comm /proc/76904/comm /proc/76921/comm /proc/76927/comm /proc/76974/comm /proc/76975/comm /proc/76985/comm /proc/77075/comm /proc/78/comm /proc/78244/comm /proc/78268/comm /proc/79/comm /proc/79526/comm /proc/79560/comm /proc/8/comm /proc/80/comm /proc/81/comm /proc/81145/comm /proc/82/comm /proc/83554/comm /proc/83566/comm /proc/83939/comm /proc/83941/comm /proc/83942/comm /proc/84/comm /proc/84305/comm /proc/84331/comm /proc/85/comm /proc/85103/comm /proc/85156/comm /proc/859/comm /proc/86/comm /proc/87/comm /proc/88/comm /proc/89078/comm /proc/89728/comm /proc/9/comm /proc/90/comm /proc/90404/comm /proc/90429/comm /proc/9050/comm /proc/90586/comm /proc/90602/comm /proc/90608/comm /proc/9067/comm /proc/9083/comm /proc/90839/comm /proc/90841/comm /proc/90854/comm /proc/91/comm /proc/91030/comm /proc/9166/comm /proc/92/comm /proc/93/comm /proc/94/comm /proc/94450/comm /proc/94474/comm /proc/94497/comm /proc/94535/comm /proc/94828/comm /proc/94993/comm /proc/95781/comm /proc/96/comm /proc/96900/comm /proc/96916/comm /proc/97/comm /proc/9783/comm /proc/98/comm /proc/99/comm /proc/self/comm /proc/thread-self/comm
+ '[' -n '' ']'
+ rm -f /var/run/libvirtd.pid
+ [[ -c /dev/kvm ]]
+ chmod 660 /dev/kvm
+ chown root:kvm /dev/kvm
+ CGROUPS=
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/blkio ']'
+ grep -w blkio /sys/fs/cgroup/cgroup.controllers
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/cpu ']'
+ grep -w cpu /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=cpu,
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/devices ']'
+ grep -w devices /sys/fs/cgroup/cgroup.controllers
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/freezer ']'
+ grep -w freezer /sys/fs/cgroup/cgroup.controllers
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/hugetlb ']'
+ grep -w hugetlb /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=hugetlb,
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/memory ']'
+ grep -w memory /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=memory,
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/net_cls ']'
+ grep -w net_cls /sys/fs/cgroup/cgroup.controllers
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/perf_event ']'
+ grep -w perf_event /sys/fs/cgroup/cgroup.controllers
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/rdma ']'
+ grep -w rdma /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=rdma,
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/misc ']'
+ grep -w misc /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=misc,
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/pids ']'
+ grep -w pids /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=pids,
+ cgcreate -g cpu,hugetlb,memory,rdma,misc,pids:/osh-libvirt
++ cat /proc/meminfo
++ grep HugePages_Total
++ tr -cd '[:digit:]'
+ hp_count=0
+ '[' 00 -gt 0 ']'
+ '[' -n 457eb676-33da-42ec-9a8c-9293d545c337 ']'
+ cgexec -g cpu,hugetlb,memory,rdma,misc,pids:/osh-libvirt systemd-run --scope --slice=system libvirtd --listen
++ mktemp --suffix .xml
+ tmpsecret=/tmp/tmp.J8RM3wFasQ.xml
+ '[' -n '' ']'
+ trap cleanup EXIT
+ TIMEOUT=60
+ [[ ! -f /var/run/libvirtd.pid ]]
+ [[ 60 -gt 0 ]]
+ let TIMEOUT-=1
+ sleep 1
Running as unit: run-rd8b9eb46a5494e709424221314275908.scope; invocation ID: f85483e333f1489aa47ce231c50a56b8
+ [[ ! -f /var/run/libvirtd.pid ]]
+ TIMEOUT=10
+ [[ ! -e /var/run/libvirt/libvirt-sock ]]
+ '[' -z '' ']'
+ '[' -n cinder ']'
++ awk '/key/{print $3}' /etc/ceph/ceph.client.cinder.keyring
+ CEPH_CINDER_KEYRING=AQAsl/xpOzPkEhAAI/+9jb+GISuNV+hsNgtyPg==
+ '[' -n cinder ']'
+ create_virsh_libvirt_secret cinder 457eb676-33da-42ec-9a8c-9293d545c337 AQAsl/xpOzPkEhAAI/+9jb+GISuNV+hsNgtyPg==
+ sec_user=cinder
+ sec_uuid=457eb676-33da-42ec-9a8c-9293d545c337
+ sec_ceph_keyring=AQAsl/xpOzPkEhAAI/+9jb+GISuNV+hsNgtyPg==
+ cat
+ virsh secret-define --file /tmp/tmp.J8RM3wFasQ.xml
Secret 457eb676-33da-42ec-9a8c-9293d545c337 created

+ virsh secret-set-value --secret 457eb676-33da-42ec-9a8c-9293d545c337 --base64 AQAsl/xpOzPkEhAAI/+9jb+GISuNV+hsNgtyPg==
error: Passing secret value as command-line argument is insecure!
Secret value set

+ '[' -n '' ']'
+ '[' -n '' ']'
+ cleanup
+ rm -f /tmp/tmp.J8RM3wFasQ.xml
+ '[' -n '' ']'
++ cat /var/run/libvirtd.pid
+ LIBVIRTD_PID=185432
+ kill 185432
+ tail --pid=185432 -f /dev/null
+ cgexec -g cpu,hugetlb,memory,rdma,misc,pids:/osh-libvirt systemd-run --scope --slice=system libvirtd --listen
Running as unit: run-re77822938a9c407e9d449943adb0a2a1.scope; invocation ID: c3acb8096fe546bfbb25838b86436a97