+ wait_for_file /etc/pki/CA/cacert.pem
+ local file=/etc/pki/CA/cacert.pem
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ sleep 1
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ sleep 1
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ sleep 1
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ sleep 1
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ sleep 1
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ wait_for_file /etc/pki/qemu/ca-cert.pem
+ local file=/etc/pki/qemu/ca-cert.pem
+ '[' '!' -f /etc/pki/qemu/ca-cert.pem ']'
+ wait_for_file /etc/pki/libvirt/servercert.pem
+ local file=/etc/pki/libvirt/servercert.pem
+ '[' '!' -f /etc/pki/libvirt/servercert.pem ']'
+ wait_for_file /etc/pki/libvirt/clientcert.pem
+ local file=/etc/pki/libvirt/clientcert.pem
+ '[' '!' -f /etc/pki/libvirt/clientcert.pem ']'
+ wait_for_file /etc/pki/qemu/server-cert.pem
+ local file=/etc/pki/qemu/server-cert.pem
+ '[' '!' -f /etc/pki/qemu/server-cert.pem ']'
+ wait_for_file /etc/pki/qemu/client-cert.pem
+ local file=/etc/pki/qemu/client-cert.pem
+ '[' '!' -f /etc/pki/qemu/client-cert.pem ']'
+ wait_for_file /etc/pki/libvirt/private/serverkey.pem
+ local file=/etc/pki/libvirt/private/serverkey.pem
+ '[' '!' -f /etc/pki/libvirt/private/serverkey.pem ']'
+ wait_for_file /etc/pki/libvirt/private/clientkey.pem
+ local file=/etc/pki/libvirt/private/clientkey.pem
+ '[' '!' -f /etc/pki/libvirt/private/clientkey.pem ']'
+ wait_for_file /etc/pki/qemu/server-key.pem
+ local file=/etc/pki/qemu/server-key.pem
+ '[' '!' -f /etc/pki/qemu/server-key.pem ']'
+ wait_for_file /etc/pki/qemu/client-key.pem
+ local file=/etc/pki/qemu/client-key.pem
+ '[' '!' -f /etc/pki/qemu/client-key.pem ']'
+ wait_for_file /etc/pki/libvirt-vnc/ca-cert.pem
+ local file=/etc/pki/libvirt-vnc/ca-cert.pem
+ '[' '!' -f /etc/pki/libvirt-vnc/ca-cert.pem ']'
+ wait_for_file /etc/pki/libvirt-vnc/server-cert.pem
+ local file=/etc/pki/libvirt-vnc/server-cert.pem
+ '[' '!' -f /etc/pki/libvirt-vnc/server-cert.pem ']'
+ wait_for_file /etc/pki/libvirt-vnc/server-key.pem
+ local file=/etc/pki/libvirt-vnc/server-key.pem
+ '[' '!' -f /etc/pki/libvirt-vnc/server-key.pem ']'
++ grep -w libvirtd
++ cat /proc/1/comm /proc/10/comm /proc/100/comm /proc/101500/comm /proc/10159/comm /proc/102/comm /proc/103/comm /proc/104/comm /proc/104583/comm /proc/105/comm /proc/106/comm /proc/10670/comm /proc/10671/comm /proc/108/comm /proc/109/comm /proc/109273/comm /proc/109298/comm /proc/109591/comm /proc/109738/comm /proc/109751/comm /proc/109752/comm /proc/11/comm /proc/110/comm /proc/110870/comm /proc/110897/comm /proc/110918/comm /proc/110943/comm /proc/111/comm /proc/111235/comm /proc/111469/comm /proc/111471/comm /proc/111843/comm /proc/112/comm /proc/112132/comm /proc/112500/comm /proc/112692/comm /proc/112846/comm /proc/112870/comm /proc/113/comm /proc/113051/comm /proc/113067/comm /proc/113073/comm /proc/113123/comm /proc/113124/comm /proc/113188/comm /proc/113331/comm /proc/114/comm /proc/114714/comm /proc/114740/comm /proc/114845/comm /proc/114868/comm /proc/115/comm /proc/116/comm /proc/117/comm /proc/117174/comm /proc/117211/comm /proc/1185/comm /proc/118867/comm /proc/12/comm /proc/12106/comm /proc/121334/comm /proc/121363/comm /proc/12137/comm /proc/12192/comm /proc/12215/comm /proc/12229/comm /proc/122424/comm /proc/122465/comm /proc/123226/comm /proc/12466/comm /proc/124936/comm /proc/124948/comm /proc/124949/comm /proc/12495/comm /proc/12551/comm /proc/12576/comm /proc/12596/comm /proc/126387/comm /proc/127781/comm /proc/127803/comm /proc/127862/comm /proc/127885/comm /proc/128388/comm /proc/128923/comm /proc/1290/comm /proc/129043/comm /proc/1291/comm /proc/1292/comm /proc/1293/comm /proc/129772/comm /proc/13/comm /proc/130374/comm /proc/130398/comm /proc/130641/comm /proc/130665/comm /proc/130917/comm /proc/131894/comm /proc/131907/comm /proc/132928/comm /proc/133025/comm /proc/1377/comm /proc/1381/comm /proc/14/comm /proc/1446/comm /proc/1450/comm /proc/145806/comm /proc/1459/comm /proc/147554/comm /proc/147579/comm /proc/147580/comm /proc/148838/comm /proc/148839/comm /proc/15/comm /proc/156041/comm /proc/156042/comm /proc/156045/comm /proc/156046/comm /proc/156064/comm /proc/156161/comm /proc/156229/comm /proc/156230/comm /proc/156787/comm /proc/156811/comm /proc/157123/comm /proc/157299/comm /proc/157335/comm /proc/157348/comm /proc/157407/comm /proc/157408/comm /proc/157410/comm /proc/157411/comm /proc/158517/comm /proc/158538/comm /proc/158740/comm /proc/158915/comm /proc/158938/comm /proc/159140/comm /proc/159673/comm /proc/159832/comm /proc/159855/comm /proc/16/comm /proc/160058/comm /proc/160075/comm /proc/160081/comm /proc/160211/comm /proc/160212/comm /proc/160222/comm /proc/160377/comm /proc/161787/comm /proc/161833/comm /proc/161948/comm /proc/162093/comm /proc/162118/comm /proc/162210/comm /proc/162246/comm /proc/162292/comm /proc/162325/comm /proc/162341/comm /proc/162396/comm /proc/162547/comm /proc/162569/comm /proc/162596/comm /proc/162867/comm /proc/162899/comm /proc/163429/comm /proc/163444/comm /proc/166/comm /proc/166575/comm /proc/167/comm /proc/167548/comm /proc/167554/comm /proc/167579/comm /proc/168/comm /proc/168167/comm /proc/168251/comm /proc/168677/comm /proc/169/comm /proc/169527/comm /proc/170/comm /proc/170473/comm /proc/170706/comm /proc/171/comm /proc/172/comm /proc/172671/comm /proc/172695/comm /proc/172726/comm /proc/172727/comm /proc/172728/comm /proc/172729/comm /proc/173/comm /proc/173532/comm /proc/173554/comm /proc/173741/comm /proc/173813/comm /proc/173820/comm /proc/173905/comm /proc/173906/comm /proc/173919/comm /proc/173921/comm /proc/174/comm /proc/174413/comm /proc/174531/comm /proc/174555/comm /proc/174695/comm /proc/174719/comm /proc/174807/comm /proc/174902/comm /proc/174922/comm /proc/174928/comm /proc/174993/comm /proc/174994/comm /proc/175004/comm /proc/175127/comm /proc/176463/comm /proc/176490/comm /proc/176502/comm /proc/176538/comm /proc/176564/comm /proc/176587/comm /proc/176620/comm /proc/176684/comm /proc/176921/comm /proc/176952/comm /proc/177/comm /proc/177158/comm /proc/177183/comm /proc/177204/comm /proc/177228/comm /proc/177417/comm /proc/177582/comm /proc/177595/comm /proc/177753/comm /proc/177754/comm /proc/177760/comm /proc/18/comm /proc/180/comm /proc/181/comm /proc/181491/comm /proc/181566/comm /proc/181624/comm /proc/182739/comm /proc/182761/comm /proc/182855/comm /proc/182856/comm /proc/183944/comm /proc/183955/comm /proc/183967/comm /proc/184/comm /proc/184356/comm /proc/185862/comm /proc/185863/comm /proc/185864/comm /proc/186/comm /proc/186115/comm /proc/186134/comm /proc/186161/comm /proc/186162/comm /proc/186194/comm /proc/186208/comm /proc/186209/comm /proc/186435/comm /proc/186438/comm /proc/186441/comm /proc/186982/comm /proc/187333/comm /proc/187613/comm /proc/187950/comm /proc/188/comm /proc/188648/comm /proc/188676/comm /proc/188833/comm /proc/188857/comm /proc/189/comm /proc/189023/comm /proc/189163/comm /proc/189441/comm /proc/189764/comm /proc/189783/comm /proc/189786/comm /proc/189787/comm /proc/189788/comm /proc/189790/comm /proc/189792/comm /proc/189862/comm /proc/19/comm /proc/190/comm /proc/190268/comm /proc/190355/comm /proc/190424/comm /proc/190437/comm /proc/190553/comm /proc/190588/comm /proc/190674/comm /proc/190697/comm /proc/190870/comm /proc/190871/comm /proc/190895/comm /proc/190899/comm /proc/190936/comm /proc/190954/comm /proc/190960/comm /proc/191/comm /proc/191009/comm /proc/191010/comm /proc/191011/comm /proc/191012/comm /proc/191013/comm /proc/193/comm /proc/19384/comm /proc/194/comm /proc/19403/comm /proc/19425/comm /proc/19452/comm /proc/19469/comm /proc/195/comm /proc/196/comm /proc/197/comm /proc/2/comm /proc/20/comm /proc/2096/comm /proc/21/comm /proc/21286/comm /proc/21295/comm /proc/21297/comm /proc/21325/comm /proc/215/comm /proc/216/comm /proc/219/comm /proc/22/comm /proc/221/comm /proc/226/comm /proc/24/comm /proc/24292/comm /proc/24562/comm /proc/24579/comm /proc/24603/comm /proc/24615/comm /proc/25/comm /proc/26/comm /proc/268/comm /proc/27/comm /proc/28/comm /proc/285/comm /proc/287/comm /proc/28716/comm /proc/288/comm /proc/289/comm /proc/28978/comm /proc/28996/comm /proc/29019/comm /proc/29032/comm /proc/291/comm /proc/3/comm /proc/30/comm /proc/304/comm /proc/31/comm /proc/311/comm /proc/312/comm /proc/32/comm /proc/33/comm /proc/33201/comm /proc/33466/comm /proc/33483/comm /proc/33506/comm /proc/33520/comm /proc/34/comm /proc/34029/comm /proc/342/comm /proc/350/comm /proc/35089/comm /proc/35091/comm /proc/353/comm /proc/358/comm /proc/36/comm /proc/368/comm /proc/37/comm /proc/38/comm /proc/39/comm /proc/390/comm /proc/39110/comm /proc/39134/comm /proc/39156/comm /proc/39180/comm /proc/39201/comm /proc/39232/comm /proc/39235/comm /proc/39268/comm /proc/39280/comm /proc/39305/comm /proc/39347/comm /proc/39371/comm /proc/39385/comm /proc/394/comm /proc/39404/comm /proc/395/comm /proc/39510/comm /proc/39573/comm /proc/39694/comm /proc/397/comm /proc/39721/comm /proc/39746/comm /proc/4/comm /proc/40/comm /proc/40446/comm /proc/40461/comm /proc/40490/comm /proc/40509/comm /proc/41202/comm /proc/41417/comm /proc/41980/comm /proc/42/comm /proc/42120/comm /proc/42143/comm /proc/42203/comm /proc/42234/comm /proc/42248/comm /proc/42272/comm /proc/42312/comm /proc/42340/comm /proc/42366/comm /proc/42397/comm /proc/42435/comm /proc/42448/comm /proc/42563/comm /proc/42587/comm /proc/42620/comm /proc/42668/comm /proc/42716/comm /proc/42808/comm /proc/43/comm /proc/44/comm /proc/44925/comm /proc/44955/comm /proc/45/comm /proc/45033/comm /proc/45056/comm /proc/45268/comm /proc/45282/comm /proc/453/comm /proc/45368/comm /proc/45425/comm /proc/45734/comm /proc/45767/comm /proc/45823/comm /proc/45847/comm /proc/45900/comm /proc/46/comm /proc/46027/comm /proc/46212/comm /proc/46234/comm /proc/46383/comm /proc/46594/comm /proc/46617/comm /proc/46922/comm /proc/46945/comm /proc/47222/comm /proc/47272/comm /proc/47369/comm /proc/47398/comm /proc/47534/comm /proc/47560/comm /proc/48/comm /proc/49/comm /proc/49327/comm /proc/49351/comm /proc/49484/comm /proc/49507/comm /proc/49595/comm /proc/49700/comm /proc/49920/comm /proc/5/comm /proc/50/comm /proc/50016/comm /proc/50074/comm /proc/51/comm /proc/52/comm /proc/520/comm /proc/521/comm /proc/53813/comm /proc/54/comm /proc/54080/comm /proc/54103/comm /proc/54716/comm /proc/54745/comm /proc/54777/comm /proc/54802/comm /proc/54816/comm /proc/54841/comm /proc/54987/comm /proc/55/comm /proc/55010/comm /proc/55049/comm /proc/55089/comm /proc/55121/comm /proc/55232/comm /proc/56/comm /proc/56130/comm /proc/57/comm /proc/58/comm /proc/59125/comm /proc/59126/comm /proc/59499/comm /proc/59523/comm /proc/59582/comm /proc/59605/comm /proc/59651/comm /proc/59672/comm /proc/59695/comm /proc/59712/comm /proc/6/comm /proc/60/comm /proc/60163/comm /proc/60182/comm /proc/60379/comm /proc/60404/comm /proc/60488/comm /proc/60541/comm /proc/60542/comm /proc/60625/comm /proc/60626/comm /proc/60855/comm /proc/61/comm /proc/61080/comm /proc/613/comm /proc/61486/comm /proc/61588/comm /proc/616/comm /proc/61615/comm /proc/61754/comm /proc/61787/comm /proc/61811/comm /proc/61867/comm /proc/619/comm /proc/62/comm /proc/62096/comm /proc/62120/comm /proc/62341/comm /proc/62365/comm /proc/625/comm /proc/626/comm /proc/62608/comm /proc/62648/comm /proc/62745/comm /proc/62812/comm /proc/62836/comm /proc/63/comm /proc/63015/comm /proc/63042/comm /proc/63190/comm /proc/63206/comm /proc/63207/comm /proc/63208/comm /proc/63209/comm /proc/63210/comm /proc/63292/comm /proc/63316/comm /proc/63838/comm /proc/63894/comm /proc/64/comm /proc/64190/comm /proc/64214/comm /proc/64282/comm /proc/643/comm /proc/64445/comm /proc/64474/comm /proc/64509/comm /proc/64550/comm /proc/64787/comm /proc/648/comm /proc/64965/comm /proc/65288/comm /proc/65397/comm /proc/65484/comm /proc/65518/comm /proc/65636/comm /proc/65680/comm /proc/65816/comm /proc/65840/comm /proc/65893/comm /proc/65931/comm /proc/65982/comm /proc/66/comm /proc/66109/comm /proc/66354/comm /proc/66604/comm /proc/66621/comm /proc/66627/comm /proc/66700/comm /proc/66701/comm /proc/66711/comm /proc/66849/comm /proc/67/comm /proc/68/comm /proc/68155/comm /proc/68182/comm /proc/69/comm /proc/69134/comm /proc/699/comm /proc/70/comm /proc/702/comm /proc/703/comm /proc/716/comm /proc/71817/comm /proc/71843/comm /proc/71844/comm /proc/71845/comm /proc/71846/comm /proc/71847/comm /proc/71852/comm /proc/71854/comm /proc/71856/comm /proc/71857/comm /proc/71858/comm /proc/71859/comm /proc/71860/comm /proc/71861/comm /proc/71862/comm /proc/72/comm /proc/73/comm /proc/74/comm /proc/75/comm /proc/76/comm /proc/77590/comm /proc/77613/comm /proc/77707/comm /proc/77724/comm /proc/77730/comm /proc/77812/comm /proc/77813/comm /proc/77823/comm /proc/77966/comm /proc/78/comm /proc/78861/comm /proc/78884/comm /proc/79/comm /proc/79194/comm /proc/79401/comm /proc/8/comm /proc/80/comm /proc/80278/comm /proc/81/comm /proc/81932/comm /proc/82/comm /proc/84/comm /proc/84316/comm /proc/84330/comm /proc/85/comm /proc/85135/comm /proc/85158/comm /proc/86/comm /proc/86181/comm /proc/864/comm /proc/87/comm /proc/88/comm /proc/88363/comm /proc/88949/comm /proc/89029/comm /proc/9/comm /proc/90/comm /proc/9057/comm /proc/9074/comm /proc/9090/comm /proc/91/comm /proc/9173/comm /proc/92/comm /proc/92348/comm /proc/92374/comm /proc/92606/comm /proc/92638/comm /proc/92646/comm /proc/92720/comm /proc/92721/comm /proc/92731/comm /proc/92973/comm /proc/93/comm /proc/94/comm /proc/95309/comm /proc/95333/comm /proc/95355/comm /proc/95389/comm /proc/95769/comm /proc/95930/comm /proc/96/comm /proc/96008/comm /proc/97/comm /proc/97084/comm /proc/9790/comm /proc/98/comm /proc/99/comm /proc/self/comm /proc/thread-self/comm
+ '[' -n '' ']'
+ rm -f /var/run/libvirtd.pid
+ [[ -c /dev/kvm ]]
+ chmod 660 /dev/kvm
+ chown root:kvm /dev/kvm
+ CGROUPS=
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/blkio ']'
+ grep -w blkio /sys/fs/cgroup/cgroup.controllers
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/cpu ']'
+ grep -w cpu /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=cpu,
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/devices ']'
+ grep -w devices /sys/fs/cgroup/cgroup.controllers
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/freezer ']'
+ grep -w freezer /sys/fs/cgroup/cgroup.controllers
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/hugetlb ']'
+ grep -w hugetlb /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=hugetlb,
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/memory ']'
+ grep -w memory /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=memory,
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/net_cls ']'
+ grep -w net_cls /sys/fs/cgroup/cgroup.controllers
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/perf_event ']'
+ grep -w perf_event /sys/fs/cgroup/cgroup.controllers
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/rdma ']'
+ grep -w rdma /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=rdma,
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/misc ']'
+ grep -w misc /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=misc,
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/pids ']'
+ grep -w pids /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=pids,
+ cgcreate -g cpu,hugetlb,memory,rdma,misc,pids:/osh-libvirt
++ cat /proc/meminfo
++ grep HugePages_Total
++ tr -cd '[:digit:]'
+ hp_count=0
+ '[' 00 -gt 0 ']'
+ '[' -n 457eb676-33da-42ec-9a8c-9293d545c337 ']'
+ cgexec -g cpu,hugetlb,memory,rdma,misc,pids:/osh-libvirt systemd-run --scope --slice=system libvirtd --listen
++ mktemp --suffix .xml
+ tmpsecret=/tmp/tmp.xt0pfg0Qiy.xml
+ '[' -n '' ']'
+ trap cleanup EXIT
+ TIMEOUT=60
+ [[ ! -f /var/run/libvirtd.pid ]]
+ [[ 60 -gt 0 ]]
+ let TIMEOUT-=1
+ sleep 1
Running as unit: run-r4035b6817bf84203925dacdc4187b4ea.scope; invocation ID: a8aab98b3e8e4d1a8e3f7f81b2a27c25
+ [[ ! -f /var/run/libvirtd.pid ]]
+ TIMEOUT=10
+ [[ ! -e /var/run/libvirt/libvirt-sock ]]
+ '[' -z '' ']'
+ '[' -n cinder ']'
++ awk '/key/{print $3}' /etc/ceph/ceph.client.cinder.keyring
+ CEPH_CINDER_KEYRING=AQAffLppPk18KhAAY74MOf7h67Ww7nPnhfwwGA==
+ '[' -n cinder ']'
+ create_virsh_libvirt_secret cinder 457eb676-33da-42ec-9a8c-9293d545c337 AQAffLppPk18KhAAY74MOf7h67Ww7nPnhfwwGA==
+ sec_user=cinder
+ sec_uuid=457eb676-33da-42ec-9a8c-9293d545c337
+ sec_ceph_keyring=AQAffLppPk18KhAAY74MOf7h67Ww7nPnhfwwGA==
+ cat
+ virsh secret-define --file /tmp/tmp.xt0pfg0Qiy.xml
Secret 457eb676-33da-42ec-9a8c-9293d545c337 created

+ virsh secret-set-value --secret 457eb676-33da-42ec-9a8c-9293d545c337 --base64 AQAffLppPk18KhAAY74MOf7h67Ww7nPnhfwwGA==
error: Passing secret value as command-line argument is insecure!
Secret value set

+ '[' -n '' ']'
+ '[' -n '' ']'
+ cleanup
+ rm -f /tmp/tmp.xt0pfg0Qiy.xml
+ '[' -n '' ']'
++ cat /var/run/libvirtd.pid
+ LIBVIRTD_PID=191033
+ kill 191033
+ tail --pid=191033 -f /dev/null
+ cgexec -g cpu,hugetlb,memory,rdma,misc,pids:/osh-libvirt systemd-run --scope --slice=system libvirtd --listen
Running as unit: run-re302cf1f620d4e4e900fc420c958c2a6.scope; invocation ID: f34e6ceca3624f82a3ce6cdbb94382f1