+ wait_for_file /etc/pki/CA/cacert.pem
+ local file=/etc/pki/CA/cacert.pem
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ sleep 1
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ sleep 1
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ sleep 1
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ sleep 1
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ sleep 1
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ wait_for_file /etc/pki/qemu/ca-cert.pem
+ local file=/etc/pki/qemu/ca-cert.pem
+ '[' '!' -f /etc/pki/qemu/ca-cert.pem ']'
+ wait_for_file /etc/pki/libvirt/servercert.pem
+ local file=/etc/pki/libvirt/servercert.pem
+ '[' '!' -f /etc/pki/libvirt/servercert.pem ']'
+ wait_for_file /etc/pki/libvirt/clientcert.pem
+ local file=/etc/pki/libvirt/clientcert.pem
+ '[' '!' -f /etc/pki/libvirt/clientcert.pem ']'
+ wait_for_file /etc/pki/qemu/server-cert.pem
+ local file=/etc/pki/qemu/server-cert.pem
+ '[' '!' -f /etc/pki/qemu/server-cert.pem ']'
+ wait_for_file /etc/pki/qemu/client-cert.pem
+ local file=/etc/pki/qemu/client-cert.pem
+ '[' '!' -f /etc/pki/qemu/client-cert.pem ']'
+ wait_for_file /etc/pki/libvirt/private/serverkey.pem
+ local file=/etc/pki/libvirt/private/serverkey.pem
+ '[' '!' -f /etc/pki/libvirt/private/serverkey.pem ']'
+ wait_for_file /etc/pki/libvirt/private/clientkey.pem
+ local file=/etc/pki/libvirt/private/clientkey.pem
+ '[' '!' -f /etc/pki/libvirt/private/clientkey.pem ']'
+ wait_for_file /etc/pki/qemu/server-key.pem
+ local file=/etc/pki/qemu/server-key.pem
+ '[' '!' -f /etc/pki/qemu/server-key.pem ']'
+ wait_for_file /etc/pki/qemu/client-key.pem
+ local file=/etc/pki/qemu/client-key.pem
+ '[' '!' -f /etc/pki/qemu/client-key.pem ']'
+ wait_for_file /etc/pki/libvirt-vnc/ca-cert.pem
+ local file=/etc/pki/libvirt-vnc/ca-cert.pem
+ '[' '!' -f /etc/pki/libvirt-vnc/ca-cert.pem ']'
+ wait_for_file /etc/pki/libvirt-vnc/server-cert.pem
+ local file=/etc/pki/libvirt-vnc/server-cert.pem
+ '[' '!' -f /etc/pki/libvirt-vnc/server-cert.pem ']'
+ wait_for_file /etc/pki/libvirt-vnc/server-key.pem
+ local file=/etc/pki/libvirt-vnc/server-key.pem
+ '[' '!' -f /etc/pki/libvirt-vnc/server-key.pem ']'
++ grep -w libvirtd
++ cat /proc/1/comm /proc/10/comm /proc/100/comm /proc/102/comm /proc/103/comm /proc/10321/comm /proc/104/comm /proc/105/comm /proc/105269/comm /proc/106/comm /proc/106666/comm /proc/108/comm /proc/10830/comm /proc/10831/comm /proc/1085/comm /proc/109/comm /proc/11/comm /proc/110/comm /proc/111/comm /proc/111060/comm /proc/111086/comm /proc/111494/comm /proc/111509/comm /proc/111510/comm /proc/112/comm /proc/112653/comm /proc/112679/comm /proc/112700/comm /proc/112723/comm /proc/112914/comm /proc/113/comm /proc/113077/comm /proc/113293/comm /proc/113318/comm /proc/114/comm /proc/114163/comm /proc/114410/comm /proc/114681/comm /proc/114704/comm /proc/114828/comm /proc/114845/comm /proc/114851/comm /proc/114925/comm /proc/114926/comm /proc/114936/comm /proc/115/comm /proc/115167/comm /proc/116/comm /proc/116618/comm /proc/116651/comm /proc/116683/comm /proc/116710/comm /proc/117/comm /proc/12/comm /proc/121867/comm /proc/12248/comm /proc/12280/comm /proc/12337/comm /proc/12363/comm /proc/123673/comm /proc/12381/comm /proc/125700/comm /proc/12612/comm /proc/12643/comm /proc/12698/comm /proc/127011/comm /proc/12723/comm /proc/127419/comm /proc/12742/comm /proc/127432/comm /proc/127433/comm /proc/129175/comm /proc/129862/comm /proc/129885/comm /proc/129929/comm /proc/129960/comm /proc/13/comm /proc/130564/comm /proc/131098/comm /proc/131259/comm /proc/132370/comm /proc/137710/comm /proc/14/comm /proc/1416/comm /proc/144274/comm /proc/144314/comm /proc/144337/comm /proc/144896/comm /proc/146098/comm /proc/147352/comm /proc/147399/comm /proc/149188/comm /proc/15/comm /proc/151398/comm /proc/151411/comm /proc/151412/comm /proc/152706/comm /proc/152707/comm /proc/1534/comm /proc/1535/comm /proc/1536/comm /proc/1537/comm /proc/1541/comm /proc/16/comm /proc/160013/comm /proc/160014/comm /proc/160016/comm /proc/160018/comm /proc/160157/comm /proc/160307/comm /proc/1608/comm /proc/1612/comm /proc/161338/comm /proc/161365/comm /proc/161448/comm /proc/1621/comm /proc/162249/comm /proc/162294/comm /proc/162307/comm /proc/162339/comm /proc/162340/comm /proc/162341/comm /proc/162342/comm /proc/163134/comm /proc/163162/comm /proc/163980/comm /proc/164319/comm /proc/164596/comm /proc/164626/comm /proc/164692/comm /proc/164715/comm /proc/164773/comm /proc/164802/comm /proc/164811/comm /proc/165181/comm /proc/165201/comm /proc/165214/comm /proc/165352/comm /proc/165398/comm /proc/165411/comm /proc/165444/comm /proc/165542/comm /proc/165616/comm /proc/165817/comm /proc/165822/comm /proc/165837/comm /proc/166/comm /proc/16640/comm /proc/166549/comm /proc/166576/comm /proc/166690/comm /proc/166706/comm /proc/166712/comm /proc/166795/comm /proc/166796/comm /proc/166806/comm /proc/166858/comm /proc/167/comm /proc/167031/comm /proc/168/comm /proc/169/comm /proc/169133/comm /proc/169165/comm /proc/169181/comm /proc/169206/comm /proc/169227/comm /proc/169256/comm /proc/169344/comm /proc/169367/comm /proc/169414/comm /proc/169430/comm /proc/169477/comm /proc/169571/comm /proc/169676/comm /proc/169707/comm /proc/169923/comm /proc/169948/comm /proc/169998/comm /proc/170/comm /proc/171/comm /proc/172/comm /proc/173/comm /proc/174/comm /proc/177/comm /proc/18/comm /proc/180/comm /proc/181/comm /proc/182530/comm /proc/182550/comm /proc/182577/comm /proc/182608/comm /proc/183/comm /proc/183040/comm /proc/183324/comm /proc/183325/comm /proc/183409/comm /proc/183497/comm /proc/184/comm /proc/184858/comm /proc/185345/comm /proc/186/comm /proc/186308/comm /proc/186315/comm /proc/18709/comm /proc/18729/comm /proc/18752/comm /proc/18778/comm /proc/18796/comm /proc/188/comm /proc/188289/comm /proc/188297/comm /proc/188743/comm /proc/188786/comm /proc/188787/comm /proc/188936/comm /proc/188953/comm /proc/188954/comm /proc/188963/comm /proc/188964/comm /proc/188965/comm /proc/189/comm /proc/189770/comm /proc/189793/comm /proc/189867/comm /proc/189934/comm /proc/189950/comm /proc/19/comm /proc/190/comm /proc/190213/comm /proc/190222/comm /proc/190237/comm /proc/190239/comm /proc/190485/comm /proc/190973/comm /proc/190997/comm /proc/191/comm /proc/191177/comm /proc/191194/comm /proc/191200/comm /proc/191300/comm /proc/191301/comm /proc/191311/comm /proc/191513/comm /proc/192700/comm /proc/192715/comm /proc/192716/comm /proc/192717/comm /proc/192718/comm /proc/192719/comm /proc/192720/comm /proc/192789/comm /proc/192953/comm /proc/192992/comm /proc/193/comm /proc/193038/comm /proc/193092/comm /proc/193144/comm /proc/193175/comm /proc/193222/comm /proc/193283/comm /proc/193299/comm /proc/193332/comm /proc/193395/comm /proc/193492/comm /proc/193572/comm /proc/193628/comm /proc/194/comm /proc/194122/comm /proc/194123/comm /proc/194449/comm /proc/194463/comm /proc/195/comm /proc/196/comm /proc/197/comm /proc/199708/comm /proc/199731/comm /proc/2/comm /proc/20/comm /proc/200749/comm /proc/200983/comm /proc/200995/comm /proc/201/comm /proc/201020/comm /proc/201173/comm /proc/201187/comm /proc/203235/comm /proc/203374/comm /proc/203375/comm /proc/203452/comm /proc/203461/comm /proc/203462/comm /proc/203469/comm /proc/204923/comm /proc/204924/comm /proc/204925/comm /proc/204926/comm /proc/204927/comm /proc/204928/comm /proc/205234/comm /proc/205807/comm /proc/205911/comm /proc/205959/comm /proc/205975/comm /proc/206155/comm /proc/206178/comm /proc/206324/comm /proc/206362/comm /proc/206469/comm /proc/206521/comm /proc/206523/comm /proc/206536/comm /proc/206657/comm /proc/206682/comm /proc/206709/comm /proc/206917/comm /proc/206922/comm /proc/206925/comm /proc/206928/comm /proc/206930/comm /proc/206984/comm /proc/206992/comm /proc/207010/comm /proc/207011/comm /proc/207012/comm /proc/21/comm /proc/210/comm /proc/21735/comm /proc/21792/comm /proc/21793/comm /proc/21806/comm /proc/22/comm /proc/220/comm /proc/221/comm /proc/226/comm /proc/24/comm /proc/248/comm /proc/25/comm /proc/25066/comm /proc/25341/comm /proc/25358/comm /proc/25383/comm /proc/25395/comm /proc/26/comm /proc/27/comm /proc/28/comm /proc/284/comm /proc/286/comm /proc/288/comm /proc/289/comm /proc/29566/comm /proc/29831/comm /proc/29847/comm /proc/29872/comm /proc/29884/comm /proc/3/comm /proc/30/comm /proc/308/comm /proc/309/comm /proc/31/comm /proc/313/comm /proc/314/comm /proc/315/comm /proc/316/comm /proc/317/comm /proc/318/comm /proc/319/comm /proc/32/comm /proc/320/comm /proc/33/comm /proc/34/comm /proc/34077/comm /proc/34359/comm /proc/34376/comm /proc/34400/comm /proc/34412/comm /proc/35338/comm /proc/354/comm /proc/36/comm /proc/361/comm /proc/37/comm /proc/38/comm /proc/380/comm /proc/38966/comm /proc/38968/comm /proc/39/comm /proc/39074/comm /proc/39095/comm /proc/39141/comm /proc/39170/comm /proc/39184/comm /proc/393/comm /proc/397/comm /proc/4/comm /proc/40/comm /proc/41651/comm /proc/41682/comm /proc/41704/comm /proc/41716/comm /proc/41719/comm /proc/41725/comm /proc/41799/comm /proc/41802/comm /proc/41805/comm /proc/41824/comm /proc/41893/comm /proc/41911/comm /proc/41930/comm /proc/41949/comm /proc/42/comm /proc/42059/comm /proc/42122/comm /proc/42280/comm /proc/42302/comm /proc/42327/comm /proc/43/comm /proc/43004/comm /proc/43006/comm /proc/43052/comm /proc/43053/comm /proc/43303/comm /proc/43510/comm /proc/43953/comm /proc/44/comm /proc/44366/comm /proc/44391/comm /proc/44427/comm /proc/44758/comm /proc/44783/comm /proc/44797/comm /proc/44820/comm /proc/44851/comm /proc/44881/comm /proc/45/comm /proc/451/comm /proc/45226/comm /proc/45249/comm /proc/45459/comm /proc/45714/comm /proc/45743/comm /proc/45762/comm /proc/45789/comm /proc/45822/comm /proc/45846/comm /proc/45951/comm /proc/45999/comm /proc/46/comm /proc/46040/comm /proc/47820/comm /proc/47855/comm /proc/47881/comm /proc/47951/comm /proc/47975/comm /proc/48/comm /proc/48227/comm /proc/48239/comm /proc/48310/comm /proc/48388/comm /proc/48939/comm /proc/48963/comm /proc/49/comm /proc/49042/comm /proc/49068/comm /proc/49115/comm /proc/49202/comm /proc/49425/comm /proc/49447/comm /proc/49568/comm /proc/49720/comm /proc/49748/comm /proc/5/comm /proc/50/comm /proc/50121/comm /proc/50144/comm /proc/50171/comm /proc/50250/comm /proc/50357/comm /proc/50456/comm /proc/50481/comm /proc/50567/comm /proc/51/comm /proc/52/comm /proc/520/comm /proc/52258/comm /proc/52551/comm /proc/52574/comm /proc/52716/comm /proc/52740/comm /proc/52805/comm /proc/52898/comm /proc/53076/comm /proc/53123/comm /proc/53212/comm /proc/54/comm /proc/55/comm /proc/56/comm /proc/57/comm /proc/57103/comm /proc/57126/comm /proc/57735/comm /proc/57768/comm /proc/57797/comm /proc/57821/comm /proc/57840/comm /proc/57858/comm /proc/58/comm /proc/58004/comm /proc/58026/comm /proc/58065/comm /proc/58106/comm /proc/58147/comm /proc/58255/comm /proc/6/comm /proc/60/comm /proc/61/comm /proc/612/comm /proc/615/comm /proc/618/comm /proc/62/comm /proc/62211/comm /proc/62274/comm /proc/62335/comm /proc/62367/comm /proc/62389/comm /proc/62413/comm /proc/62428/comm /proc/62451/comm /proc/626/comm /proc/627/comm /proc/62765/comm /proc/63/comm /proc/63036/comm /proc/63063/comm /proc/63088/comm /proc/63484/comm /proc/63485/comm /proc/63538/comm /proc/63539/comm /proc/63700/comm /proc/64/comm /proc/640/comm /proc/64206/comm /proc/64233/comm /proc/64324/comm /proc/64349/comm /proc/64441/comm /proc/64473/comm /proc/646/comm /proc/64667/comm /proc/64693/comm /proc/64723/comm /proc/64745/comm /proc/64982/comm /proc/65009/comm /proc/65056/comm /proc/65180/comm /proc/65202/comm /proc/65367/comm /proc/65398/comm /proc/65399/comm /proc/65400/comm /proc/65401/comm /proc/65402/comm /proc/65439/comm /proc/65463/comm /proc/65739/comm /proc/65812/comm /proc/66/comm /proc/66011/comm /proc/66369/comm /proc/66397/comm /proc/66480/comm /proc/66587/comm /proc/66637/comm /proc/66842/comm /proc/66865/comm /proc/67/comm /proc/67000/comm /proc/67044/comm /proc/67087/comm /proc/67304/comm /proc/67370/comm /proc/67422/comm /proc/67510/comm /proc/67559/comm /proc/67947/comm /proc/67989/comm /proc/68/comm /proc/68030/comm /proc/68102/comm /proc/68160/comm /proc/68235/comm /proc/68264/comm /proc/68448/comm /proc/68474/comm /proc/68809/comm /proc/68825/comm /proc/68831/comm /proc/68962/comm /proc/68963/comm /proc/68973/comm /proc/69/comm /proc/69061/comm /proc/699/comm /proc/70/comm /proc/702/comm /proc/703/comm /proc/70452/comm /proc/70476/comm /proc/716/comm /proc/72/comm /proc/72594/comm /proc/73/comm /proc/73509/comm /proc/73969/comm /proc/73998/comm /proc/73999/comm /proc/74/comm /proc/74000/comm /proc/74001/comm /proc/74002/comm /proc/74003/comm /proc/74004/comm /proc/74008/comm /proc/74012/comm /proc/74013/comm /proc/74014/comm /proc/74015/comm /proc/74016/comm /proc/74017/comm /proc/75/comm /proc/76/comm /proc/78/comm /proc/79/comm /proc/79749/comm /proc/79772/comm /proc/79889/comm /proc/79906/comm /proc/79912/comm /proc/8/comm /proc/80/comm /proc/80043/comm /proc/80044/comm /proc/80054/comm /proc/80212/comm /proc/81/comm /proc/81289/comm /proc/81312/comm /proc/82/comm /proc/84/comm /proc/85/comm /proc/86/comm /proc/861/comm /proc/86781/comm /proc/86794/comm /proc/87/comm /proc/87517/comm /proc/87541/comm /proc/88/comm /proc/88391/comm /proc/90/comm /proc/91/comm /proc/92/comm /proc/9220/comm /proc/9237/comm /proc/9253/comm /proc/93/comm /proc/9335/comm /proc/93960/comm /proc/93985/comm /proc/94/comm /proc/94214/comm /proc/94231/comm /proc/94237/comm /proc/94318/comm /proc/94319/comm /proc/94339/comm /proc/94547/comm /proc/96/comm /proc/97/comm /proc/97764/comm /proc/97765/comm /proc/97810/comm /proc/97820/comm /proc/98/comm /proc/98183/comm /proc/98253/comm /proc/98947/comm /proc/99/comm /proc/9952/comm /proc/self/comm /proc/thread-self/comm
+ '[' -n '' ']'
+ rm -f /var/run/libvirtd.pid
+ [[ -c /dev/kvm ]]
+ chmod 660 /dev/kvm
+ chown root:kvm /dev/kvm
+ CGROUPS=
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/blkio ']'
+ grep -w blkio /sys/fs/cgroup/cgroup.controllers
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/cpu ']'
+ grep -w cpu /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=cpu,
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/devices ']'
+ grep -w devices /sys/fs/cgroup/cgroup.controllers
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/freezer ']'
+ grep -w freezer /sys/fs/cgroup/cgroup.controllers
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/hugetlb ']'
+ grep -w hugetlb /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=hugetlb,
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/memory ']'
+ grep -w memory /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=memory,
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/net_cls ']'
+ grep -w net_cls /sys/fs/cgroup/cgroup.controllers
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/perf_event ']'
+ grep -w perf_event /sys/fs/cgroup/cgroup.controllers
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/rdma ']'
+ grep -w rdma /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=rdma,
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/misc ']'
+ grep -w misc /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=misc,
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/pids ']'
+ grep -w pids /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=pids,
+ cgcreate -g cpu,hugetlb,memory,rdma,misc,pids:/osh-libvirt
++ cat /proc/meminfo
++ grep HugePages_Total
++ tr -cd '[:digit:]'
+ hp_count=0
+ '[' 00 -gt 0 ']'
+ '[' -n 457eb676-33da-42ec-9a8c-9293d545c337 ']'
+ cgexec -g cpu,hugetlb,memory,rdma,misc,pids:/osh-libvirt systemd-run --scope --slice=system libvirtd --listen
++ mktemp --suffix .xml
+ tmpsecret=/tmp/tmp.qnB0iYelhT.xml
+ '[' -n '' ']'
+ trap cleanup EXIT
+ TIMEOUT=60
+ [[ ! -f /var/run/libvirtd.pid ]]
+ [[ 60 -gt 0 ]]
+ let TIMEOUT-=1
+ sleep 1
Running as unit: run-r5f523d832bf44453a54181e4b35edd7d.scope; invocation ID: 7cfe7337223a4ea2bf0c77125709079f
+ [[ ! -f /var/run/libvirtd.pid ]]
+ TIMEOUT=10
+ [[ ! -e /var/run/libvirt/libvirt-sock ]]
+ '[' -z '' ']'
+ '[' -n cinder ']'
++ awk '/key/{print $3}' /etc/ceph/ceph.client.cinder.keyring
+ CEPH_CINDER_KEYRING=AQAqnmxqFbFaLhAAzokAvYhrSlXY/Mat2Tm7oQ==
+ '[' -n cinder ']'
+ create_virsh_libvirt_secret cinder 457eb676-33da-42ec-9a8c-9293d545c337 AQAqnmxqFbFaLhAAzokAvYhrSlXY/Mat2Tm7oQ==
+ sec_user=cinder
+ sec_uuid=457eb676-33da-42ec-9a8c-9293d545c337
+ sec_ceph_keyring=AQAqnmxqFbFaLhAAzokAvYhrSlXY/Mat2Tm7oQ==
+ cat
+ virsh secret-define --file /tmp/tmp.qnB0iYelhT.xml
Secret 457eb676-33da-42ec-9a8c-9293d545c337 created

+ virsh secret-set-value --secret 457eb676-33da-42ec-9a8c-9293d545c337 --base64 AQAqnmxqFbFaLhAAzokAvYhrSlXY/Mat2Tm7oQ==
error: Passing secret value as command-line argument is insecure!
Secret value set

+ '[' -n '' ']'
+ '[' -n '' ']'
+ cleanup
+ rm -f /tmp/tmp.qnB0iYelhT.xml
+ '[' -n '' ']'
++ cat /var/run/libvirtd.pid
+ LIBVIRTD_PID=207033
+ kill 207033
+ tail --pid=207033 -f /dev/null
+ cgexec -g cpu,hugetlb,memory,rdma,misc,pids:/osh-libvirt systemd-run --scope --slice=system libvirtd --listen
Running as unit: run-r3e833c3dee934f4191d1c4ed2389ba37.scope; invocation ID: 43bf63daa5834693867fd1e2fc2728b5