+ wait_for_file /etc/pki/CA/cacert.pem
+ local file=/etc/pki/CA/cacert.pem
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ sleep 1
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ sleep 1
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ sleep 1
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ sleep 1
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ sleep 1
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ wait_for_file /etc/pki/qemu/ca-cert.pem
+ local file=/etc/pki/qemu/ca-cert.pem
+ '[' '!' -f /etc/pki/qemu/ca-cert.pem ']'
+ wait_for_file /etc/pki/libvirt/servercert.pem
+ local file=/etc/pki/libvirt/servercert.pem
+ '[' '!' -f /etc/pki/libvirt/servercert.pem ']'
+ wait_for_file /etc/pki/libvirt/clientcert.pem
+ local file=/etc/pki/libvirt/clientcert.pem
+ '[' '!' -f /etc/pki/libvirt/clientcert.pem ']'
+ wait_for_file /etc/pki/qemu/server-cert.pem
+ local file=/etc/pki/qemu/server-cert.pem
+ '[' '!' -f /etc/pki/qemu/server-cert.pem ']'
+ wait_for_file /etc/pki/qemu/client-cert.pem
+ local file=/etc/pki/qemu/client-cert.pem
+ '[' '!' -f /etc/pki/qemu/client-cert.pem ']'
+ wait_for_file /etc/pki/libvirt/private/serverkey.pem
+ local file=/etc/pki/libvirt/private/serverkey.pem
+ '[' '!' -f /etc/pki/libvirt/private/serverkey.pem ']'
+ wait_for_file /etc/pki/libvirt/private/clientkey.pem
+ local file=/etc/pki/libvirt/private/clientkey.pem
+ '[' '!' -f /etc/pki/libvirt/private/clientkey.pem ']'
+ wait_for_file /etc/pki/qemu/server-key.pem
+ local file=/etc/pki/qemu/server-key.pem
+ '[' '!' -f /etc/pki/qemu/server-key.pem ']'
+ wait_for_file /etc/pki/qemu/client-key.pem
+ local file=/etc/pki/qemu/client-key.pem
+ '[' '!' -f /etc/pki/qemu/client-key.pem ']'
+ wait_for_file /etc/pki/libvirt-vnc/ca-cert.pem
+ local file=/etc/pki/libvirt-vnc/ca-cert.pem
+ '[' '!' -f /etc/pki/libvirt-vnc/ca-cert.pem ']'
+ wait_for_file /etc/pki/libvirt-vnc/server-cert.pem
+ local file=/etc/pki/libvirt-vnc/server-cert.pem
+ '[' '!' -f /etc/pki/libvirt-vnc/server-cert.pem ']'
+ wait_for_file /etc/pki/libvirt-vnc/server-key.pem
+ local file=/etc/pki/libvirt-vnc/server-key.pem
+ '[' '!' -f /etc/pki/libvirt-vnc/server-key.pem ']'
++ grep -w libvirtd
++ cat /proc/1/comm /proc/10/comm /proc/100/comm /proc/101278/comm /proc/102/comm /proc/102685/comm /proc/103/comm /proc/10327/comm /proc/104/comm /proc/105/comm /proc/105317/comm /proc/105340/comm /proc/105715/comm /proc/105728/comm /proc/105729/comm /proc/106/comm /proc/106772/comm /proc/106798/comm /proc/106820/comm /proc/106844/comm /proc/107082/comm /proc/107265/comm /proc/107267/comm /proc/107922/comm /proc/108/comm /proc/10835/comm /proc/10836/comm /proc/108416/comm /proc/108653/comm /proc/108712/comm /proc/108737/comm /proc/108985/comm /proc/109/comm /proc/109002/comm /proc/109008/comm /proc/109083/comm /proc/109084/comm /proc/109095/comm /proc/109202/comm /proc/11/comm /proc/110/comm /proc/1103/comm /proc/110481/comm /proc/110516/comm /proc/110657/comm /proc/110680/comm /proc/111/comm /proc/111140/comm /proc/111490/comm /proc/112/comm /proc/113/comm /proc/114/comm /proc/114642/comm /proc/114643/comm /proc/115/comm /proc/115402/comm /proc/116/comm /proc/117/comm /proc/117087/comm /proc/118911/comm /proc/119036/comm /proc/119294/comm /proc/12/comm /proc/120191/comm /proc/120632/comm /proc/120694/comm /proc/120695/comm /proc/122191/comm /proc/12222/comm /proc/12252/comm /proc/12297/comm /proc/12335/comm /proc/12347/comm /proc/123627/comm /proc/123652/comm /proc/123720/comm /proc/123744/comm /proc/124252/comm /proc/124717/comm /proc/124870/comm /proc/12588/comm /proc/12619/comm /proc/126295/comm /proc/126321/comm /proc/12676/comm /proc/126775/comm /proc/126781/comm /proc/12701/comm /proc/12721/comm /proc/127561/comm /proc/127567/comm /proc/128580/comm /proc/13/comm /proc/131155/comm /proc/131158/comm /proc/131816/comm /proc/131843/comm /proc/131845/comm /proc/133010/comm /proc/133011/comm /proc/14/comm /proc/140098/comm /proc/140099/comm /proc/140101/comm /proc/140102/comm /proc/140206/comm /proc/140871/comm /proc/140894/comm /proc/141260/comm /proc/141356/comm /proc/141387/comm /proc/141424/comm /proc/141425/comm /proc/141426/comm /proc/141427/comm /proc/141932/comm /proc/141959/comm /proc/142712/comm /proc/142792/comm /proc/142870/comm /proc/142871/comm /proc/142872/comm /proc/143128/comm /proc/143157/comm /proc/143178/comm /proc/143215/comm /proc/143291/comm /proc/143386/comm /proc/1434/comm /proc/143400/comm /proc/143429/comm /proc/143458/comm /proc/143516/comm /proc/143531/comm /proc/143601/comm /proc/143626/comm /proc/143834/comm /proc/143863/comm /proc/143917/comm /proc/143999/comm /proc/14400/comm /proc/144211/comm /proc/144216/comm /proc/144664/comm /proc/144720/comm /proc/144745/comm /proc/145025/comm /proc/145041/comm /proc/145047/comm /proc/145095/comm /proc/145096/comm /proc/145106/comm /proc/145339/comm /proc/15/comm /proc/1539/comm /proc/1540/comm /proc/1541/comm /proc/1542/comm /proc/1546/comm /proc/15577/comm /proc/159501/comm /proc/159528/comm /proc/159640/comm /proc/159706/comm /proc/159731/comm /proc/159797/comm /proc/159801/comm /proc/159831/comm /proc/159861/comm /proc/159914/comm /proc/159948/comm /proc/16/comm /proc/160017/comm /proc/160068/comm /proc/160209/comm /proc/160297/comm /proc/160323/comm /proc/160494/comm /proc/160521/comm /proc/160901/comm /proc/161025/comm /proc/1613/comm /proc/1617/comm /proc/1626/comm /proc/165621/comm /proc/165993/comm /proc/166/comm /proc/166227/comm /proc/167/comm /proc/167547/comm /proc/168/comm /proc/168859/comm /proc/169/comm /proc/170/comm /proc/170251/comm /proc/170387/comm /proc/170396/comm /proc/170398/comm /proc/170840/comm /proc/170854/comm /proc/170855/comm /proc/171/comm /proc/171084/comm /proc/171100/comm /proc/171101/comm /proc/171500/comm /proc/171595/comm /proc/171894/comm /proc/171936/comm /proc/171966/comm /proc/171967/comm /proc/171980/comm /proc/171982/comm /proc/172/comm /proc/172915/comm /proc/172940/comm /proc/173/comm /proc/173141/comm /proc/173158/comm /proc/173164/comm /proc/173211/comm /proc/173212/comm /proc/173222/comm /proc/173394/comm /proc/173422/comm /proc/174/comm /proc/174718/comm /proc/174743/comm /proc/174769/comm /proc/174800/comm /proc/174812/comm /proc/174827/comm /proc/174863/comm /proc/175242/comm /proc/175273/comm /proc/175298/comm /proc/175333/comm /proc/175462/comm /proc/175747/comm /proc/175774/comm /proc/175797/comm /proc/176/comm /proc/178/comm /proc/178843/comm /proc/178844/comm /proc/179541/comm /proc/18/comm /proc/180672/comm /proc/180752/comm /proc/181/comm /proc/181745/comm /proc/181771/comm /proc/182/comm /proc/182103/comm /proc/182359/comm /proc/182378/comm /proc/182413/comm /proc/182484/comm /proc/182510/comm /proc/182593/comm /proc/182604/comm /proc/184399/comm /proc/184400/comm /proc/184401/comm /proc/184793/comm /proc/184935/comm /proc/184955/comm /proc/184956/comm /proc/184969/comm /proc/184981/comm /proc/184982/comm /proc/185/comm /proc/18510/comm /proc/18530/comm /proc/185350/comm /proc/185352/comm /proc/185355/comm /proc/18551/comm /proc/18577/comm /proc/18595/comm /proc/186/comm /proc/186300/comm /proc/186301/comm /proc/186335/comm /proc/186350/comm /proc/186351/comm /proc/186352/comm /proc/186353/comm /proc/186354/comm /proc/186355/comm /proc/186629/comm /proc/186646/comm /proc/186976/comm /proc/186977/comm /proc/186985/comm /proc/186997/comm /proc/187153/comm /proc/187189/comm /proc/187324/comm /proc/187354/comm /proc/187419/comm /proc/187475/comm /proc/187502/comm /proc/187663/comm /proc/187681/comm /proc/187687/comm /proc/187735/comm /proc/187751/comm /proc/187752/comm /proc/187762/comm /proc/187975/comm /proc/188/comm /proc/188023/comm /proc/188050/comm /proc/188080/comm /proc/188179/comm /proc/188359/comm /proc/188382/comm /proc/188447/comm /proc/188448/comm /proc/188449/comm /proc/189/comm /proc/19/comm /proc/190/comm /proc/191/comm /proc/192/comm /proc/193/comm /proc/194/comm /proc/195/comm /proc/198/comm /proc/2/comm /proc/20/comm /proc/200/comm /proc/209/comm /proc/21/comm /proc/21540/comm /proc/21610/comm /proc/21611/comm /proc/21624/comm /proc/218/comm /proc/219/comm /proc/22/comm /proc/224/comm /proc/24/comm /proc/246/comm /proc/24872/comm /proc/25/comm /proc/25147/comm /proc/25164/comm /proc/25188/comm /proc/25201/comm /proc/26/comm /proc/262/comm /proc/27/comm /proc/28/comm /proc/281/comm /proc/286/comm /proc/288/comm /proc/289/comm /proc/29378/comm /proc/29645/comm /proc/29662/comm /proc/29687/comm /proc/29701/comm /proc/3/comm /proc/30/comm /proc/308/comm /proc/309/comm /proc/31/comm /proc/313/comm /proc/32/comm /proc/321/comm /proc/33/comm /proc/33903/comm /proc/34/comm /proc/34182/comm /proc/34198/comm /proc/34224/comm /proc/34236/comm /proc/348/comm /proc/355/comm /proc/36/comm /proc/366/comm /proc/37/comm /proc/37598/comm /proc/37600/comm /proc/38/comm /proc/383/comm /proc/389/comm /proc/39/comm /proc/392/comm /proc/393/comm /proc/39957/comm /proc/39980/comm /proc/4/comm /proc/40/comm /proc/40012/comm /proc/40016/comm /proc/40024/comm /proc/40037/comm /proc/40099/comm /proc/40112/comm /proc/40126/comm /proc/40137/comm /proc/40199/comm /proc/40218/comm /proc/40238/comm /proc/40257/comm /proc/40370/comm /proc/40427/comm /proc/40571/comm /proc/40594/comm /proc/40620/comm /proc/41339/comm /proc/41359/comm /proc/41379/comm /proc/41400/comm /proc/41633/comm /proc/41789/comm /proc/41842/comm /proc/419/comm /proc/42/comm /proc/42219/comm /proc/42691/comm /proc/42714/comm /proc/42756/comm /proc/43/comm /proc/43087/comm /proc/43112/comm /proc/43134/comm /proc/43165/comm /proc/43179/comm /proc/43225/comm /proc/43554/comm /proc/43577/comm /proc/43785/comm /proc/44/comm /proc/44051/comm /proc/44075/comm /proc/44090/comm /proc/44114/comm /proc/44129/comm /proc/44159/comm /proc/44268/comm /proc/44315/comm /proc/44366/comm /proc/449/comm /proc/45/comm /proc/454/comm /proc/46/comm /proc/46439/comm /proc/46470/comm /proc/46507/comm /proc/46531/comm /proc/46754/comm /proc/46767/comm /proc/46842/comm /proc/47097/comm /proc/47428/comm /proc/47452/comm /proc/47525/comm /proc/47551/comm /proc/47598/comm /proc/47665/comm /proc/47912/comm /proc/47935/comm /proc/48/comm /proc/48056/comm /proc/48257/comm /proc/48282/comm /proc/48595/comm /proc/48620/comm /proc/48768/comm /proc/488/comm /proc/48824/comm /proc/48921/comm /proc/48950/comm /proc/48990/comm /proc/49/comm /proc/49065/comm /proc/5/comm /proc/50/comm /proc/50508/comm /proc/50757/comm /proc/50781/comm /proc/50986/comm /proc/51/comm /proc/51010/comm /proc/51050/comm /proc/51145/comm /proc/51410/comm /proc/51481/comm /proc/51549/comm /proc/518/comm /proc/52/comm /proc/54/comm /proc/55/comm /proc/55447/comm /proc/55471/comm /proc/56/comm /proc/56099/comm /proc/56116/comm /proc/56145/comm /proc/56181/comm /proc/56205/comm /proc/56221/comm /proc/56247/comm /proc/56424/comm /proc/56450/comm /proc/56519/comm /proc/56558/comm /proc/56594/comm /proc/56702/comm /proc/57/comm /proc/58/comm /proc/6/comm /proc/60/comm /proc/60480/comm /proc/60536/comm /proc/60578/comm /proc/60724/comm /proc/60748/comm /proc/60765/comm /proc/60796/comm /proc/60816/comm /proc/60840/comm /proc/61/comm /proc/611/comm /proc/61151/comm /proc/61247/comm /proc/61340/comm /proc/61416/comm /proc/61417/comm /proc/61498/comm /proc/615/comm /proc/61504/comm /proc/61646/comm /proc/617/comm /proc/62/comm /proc/62011/comm /proc/62042/comm /proc/623/comm /proc/62380/comm /proc/624/comm /proc/62416/comm /proc/62459/comm /proc/62501/comm /proc/62616/comm /proc/62641/comm /proc/62665/comm /proc/62689/comm /proc/62705/comm /proc/62735/comm /proc/63/comm /proc/63280/comm /proc/63308/comm /proc/63446/comm /proc/63558/comm /proc/63600/comm /proc/63846/comm /proc/64/comm /proc/640/comm /proc/64003/comm /proc/64004/comm /proc/64033/comm /proc/64048/comm /proc/64049/comm /proc/64050/comm /proc/64051/comm /proc/64052/comm /proc/64121/comm /proc/64444/comm /proc/64467/comm /proc/64656/comm /proc/647/comm /proc/64798/comm /proc/65175/comm /proc/65198/comm /proc/65278/comm /proc/65279/comm /proc/65280/comm /proc/65281/comm /proc/65335/comm /proc/65368/comm /proc/65384/comm /proc/65521/comm /proc/65640/comm /proc/65710/comm /proc/66/comm /proc/66146/comm /proc/66287/comm /proc/66365/comm /proc/66528/comm /proc/66712/comm /proc/66755/comm /proc/66890/comm /proc/66919/comm /proc/66942/comm /proc/66961/comm /proc/67/comm /proc/67009/comm /proc/67028/comm /proc/67462/comm /proc/67478/comm /proc/67484/comm /proc/67531/comm /proc/67532/comm /proc/67542/comm /proc/67702/comm /proc/68/comm /proc/69/comm /proc/69067/comm /proc/69092/comm /proc/70/comm /proc/702/comm /proc/705/comm /proc/706/comm /proc/719/comm /proc/72/comm /proc/72387/comm /proc/72492/comm /proc/72493/comm /proc/72494/comm /proc/72495/comm /proc/72497/comm /proc/72500/comm /proc/72501/comm /proc/72505/comm /proc/72506/comm /proc/72507/comm /proc/72508/comm /proc/72509/comm /proc/72510/comm /proc/72511/comm /proc/73/comm /proc/74/comm /proc/75/comm /proc/75696/comm /proc/76/comm /proc/76237/comm /proc/76299/comm /proc/78/comm /proc/78350/comm /proc/78374/comm /proc/78497/comm /proc/78514/comm /proc/78520/comm /proc/78610/comm /proc/78611/comm /proc/78621/comm /proc/78758/comm /proc/79/comm /proc/79799/comm /proc/79823/comm /proc/8/comm /proc/80/comm /proc/80998/comm /proc/80999/comm /proc/81/comm /proc/82/comm /proc/84/comm /proc/85/comm /proc/85135/comm /proc/85160/comm /proc/85899/comm /proc/85924/comm /proc/86/comm /proc/864/comm /proc/86535/comm /proc/86778/comm /proc/87/comm /proc/88/comm /proc/9/comm /proc/90/comm /proc/91/comm /proc/91991/comm /proc/92/comm /proc/9224/comm /proc/92368/comm /proc/92391/comm /proc/9241/comm /proc/92551/comm /proc/92568/comm /proc/9257/comm /proc/92574/comm /proc/92710/comm /proc/92711/comm /proc/92721/comm /proc/92922/comm /proc/93/comm /proc/9341/comm /proc/94/comm /proc/96/comm /proc/96319/comm /proc/96343/comm /proc/96360/comm /proc/96386/comm /proc/96649/comm /proc/96736/comm /proc/97/comm /proc/97497/comm /proc/98/comm /proc/99/comm /proc/99291/comm /proc/9958/comm /proc/self/comm /proc/thread-self/comm
+ '[' -n '' ']'
+ rm -f /var/run/libvirtd.pid
+ [[ -c /dev/kvm ]]
+ chmod 660 /dev/kvm
+ chown root:kvm /dev/kvm
+ CGROUPS=
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/blkio ']'
+ grep -w blkio /sys/fs/cgroup/cgroup.controllers
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/cpu ']'
+ grep -w cpu /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=cpu,
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/devices ']'
+ grep -w devices /sys/fs/cgroup/cgroup.controllers
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/freezer ']'
+ grep -w freezer /sys/fs/cgroup/cgroup.controllers
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/hugetlb ']'
+ grep -w hugetlb /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=hugetlb,
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/memory ']'
+ grep -w memory /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=memory,
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/net_cls ']'
+ grep -w net_cls /sys/fs/cgroup/cgroup.controllers
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/perf_event ']'
+ grep -w perf_event /sys/fs/cgroup/cgroup.controllers
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/rdma ']'
+ grep -w rdma /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=rdma,
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/misc ']'
+ grep -w misc /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=misc,
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/pids ']'
+ grep -w pids /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=pids,
+ cgcreate -g cpu,hugetlb,memory,rdma,misc,pids:/osh-libvirt
++ cat /proc/meminfo
++ grep HugePages_Total
++ tr -cd '[:digit:]'
+ hp_count=0
+ '[' 00 -gt 0 ']'
+ '[' -n 457eb676-33da-42ec-9a8c-9293d545c337 ']'
+ cgexec -g cpu,hugetlb,memory,rdma,misc,pids:/osh-libvirt systemd-run --scope --slice=system libvirtd --listen
++ mktemp --suffix .xml
+ tmpsecret=/tmp/tmp.Q3R2wiOEJN.xml
+ '[' -n '' ']'
+ trap cleanup EXIT
+ TIMEOUT=60
+ [[ ! -f /var/run/libvirtd.pid ]]
+ [[ 60 -gt 0 ]]
+ let TIMEOUT-=1
+ sleep 1
Running as unit: run-rc4f038573faa4d7ba349082d6a0669cd.scope; invocation ID: 765777a26bbf410a83ca0401fc04d7f9
+ [[ ! -f /var/run/libvirtd.pid ]]
+ TIMEOUT=10
+ [[ ! -e /var/run/libvirt/libvirt-sock ]]
+ '[' -z '' ']'
+ '[' -n cinder ']'
++ awk '/key/{print $3}' /etc/ceph/ceph.client.cinder.keyring
+ CEPH_CINDER_KEYRING=AQDvsStq20MbIBAAKhaW7JDCAym2SKhJkR+Dpg==
+ '[' -n cinder ']'
+ create_virsh_libvirt_secret cinder 457eb676-33da-42ec-9a8c-9293d545c337 AQDvsStq20MbIBAAKhaW7JDCAym2SKhJkR+Dpg==
+ sec_user=cinder
+ sec_uuid=457eb676-33da-42ec-9a8c-9293d545c337
+ sec_ceph_keyring=AQDvsStq20MbIBAAKhaW7JDCAym2SKhJkR+Dpg==
+ cat
+ virsh secret-define --file /tmp/tmp.Q3R2wiOEJN.xml
Secret 457eb676-33da-42ec-9a8c-9293d545c337 created

+ virsh secret-set-value --secret 457eb676-33da-42ec-9a8c-9293d545c337 --base64 AQDvsStq20MbIBAAKhaW7JDCAym2SKhJkR+Dpg==
error: Passing secret value as command-line argument is insecure!
Secret value set

+ '[' -n '' ']'
+ '[' -n '' ']'
+ cleanup
+ rm -f /tmp/tmp.Q3R2wiOEJN.xml
+ '[' -n '' ']'
++ cat /var/run/libvirtd.pid
+ LIBVIRTD_PID=188469
+ kill 188469
+ tail --pid=188469 -f /dev/null
+ cgexec -g cpu,hugetlb,memory,rdma,misc,pids:/osh-libvirt systemd-run --scope --slice=system libvirtd --listen
Running as unit: run-rc431aade0ae547faa743b336edc96abb.scope; invocation ID: 8f6d04fd458c4a84948280f7d45d604b