+ wait_for_file /etc/pki/CA/cacert.pem
+ local file=/etc/pki/CA/cacert.pem
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ sleep 1
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ sleep 1
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ sleep 1
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ sleep 1
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ sleep 1
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ wait_for_file /etc/pki/qemu/ca-cert.pem
+ local file=/etc/pki/qemu/ca-cert.pem
+ '[' '!' -f /etc/pki/qemu/ca-cert.pem ']'
+ wait_for_file /etc/pki/libvirt/servercert.pem
+ local file=/etc/pki/libvirt/servercert.pem
+ '[' '!' -f /etc/pki/libvirt/servercert.pem ']'
+ wait_for_file /etc/pki/libvirt/clientcert.pem
+ local file=/etc/pki/libvirt/clientcert.pem
+ '[' '!' -f /etc/pki/libvirt/clientcert.pem ']'
+ wait_for_file /etc/pki/qemu/server-cert.pem
+ local file=/etc/pki/qemu/server-cert.pem
+ '[' '!' -f /etc/pki/qemu/server-cert.pem ']'
+ wait_for_file /etc/pki/qemu/client-cert.pem
+ local file=/etc/pki/qemu/client-cert.pem
+ '[' '!' -f /etc/pki/qemu/client-cert.pem ']'
+ wait_for_file /etc/pki/libvirt/private/serverkey.pem
+ local file=/etc/pki/libvirt/private/serverkey.pem
+ '[' '!' -f /etc/pki/libvirt/private/serverkey.pem ']'
+ wait_for_file /etc/pki/libvirt/private/clientkey.pem
+ local file=/etc/pki/libvirt/private/clientkey.pem
+ '[' '!' -f /etc/pki/libvirt/private/clientkey.pem ']'
+ wait_for_file /etc/pki/qemu/server-key.pem
+ local file=/etc/pki/qemu/server-key.pem
+ '[' '!' -f /etc/pki/qemu/server-key.pem ']'
+ wait_for_file /etc/pki/qemu/client-key.pem
+ local file=/etc/pki/qemu/client-key.pem
+ '[' '!' -f /etc/pki/qemu/client-key.pem ']'
+ wait_for_file /etc/pki/libvirt-vnc/ca-cert.pem
+ local file=/etc/pki/libvirt-vnc/ca-cert.pem
+ '[' '!' -f /etc/pki/libvirt-vnc/ca-cert.pem ']'
+ wait_for_file /etc/pki/libvirt-vnc/server-cert.pem
+ local file=/etc/pki/libvirt-vnc/server-cert.pem
+ '[' '!' -f /etc/pki/libvirt-vnc/server-cert.pem ']'
+ wait_for_file /etc/pki/libvirt-vnc/server-key.pem
+ local file=/etc/pki/libvirt-vnc/server-key.pem
+ '[' '!' -f /etc/pki/libvirt-vnc/server-key.pem ']'
++ grep -w libvirtd
++ cat /proc/1/comm /proc/10/comm /proc/100/comm /proc/100157/comm /proc/100180/comm /proc/100197/comm /proc/100223/comm /proc/100528/comm /proc/100675/comm /proc/101370/comm /proc/102/comm /proc/103/comm /proc/10345/comm /proc/103711/comm /proc/104/comm /proc/105/comm /proc/105815/comm /proc/106/comm /proc/106557/comm /proc/108/comm /proc/10851/comm /proc/10852/comm /proc/109/comm /proc/11/comm /proc/110/comm /proc/1102/comm /proc/111/comm /proc/112/comm /proc/113/comm /proc/114/comm /proc/114264/comm /proc/114288/comm /proc/114651/comm /proc/114664/comm /proc/114665/comm /proc/115/comm /proc/115625/comm /proc/115792/comm /proc/115816/comm /proc/115839/comm /proc/115863/comm /proc/116/comm /proc/116383/comm /proc/116516/comm /proc/116518/comm /proc/116520/comm /proc/117/comm /proc/117646/comm /proc/117805/comm /proc/117826/comm /proc/117910/comm /proc/117933/comm /proc/118135/comm /proc/118154/comm /proc/118160/comm /proc/118277/comm /proc/118278/comm /proc/118288/comm /proc/118423/comm /proc/119758/comm /proc/119783/comm /proc/119798/comm /proc/119836/comm /proc/12/comm /proc/120452/comm /proc/122279/comm /proc/122285/comm /proc/12242/comm /proc/12274/comm /proc/122865/comm /proc/12331/comm /proc/12356/comm /proc/12376/comm /proc/124071/comm /proc/12608/comm /proc/12635/comm /proc/12692/comm /proc/12716/comm /proc/12735/comm /proc/13/comm /proc/134862/comm /proc/14/comm /proc/141155/comm /proc/142841/comm /proc/142856/comm /proc/142857/comm /proc/143202/comm /proc/143227/comm /proc/143288/comm /proc/1433/comm /proc/143310/comm /proc/144841/comm /proc/145016/comm /proc/145193/comm /proc/145572/comm /proc/145734/comm /proc/147336/comm /proc/147360/comm /proc/149070/comm /proc/15/comm /proc/151763/comm /proc/152820/comm /proc/152931/comm /proc/152932/comm /proc/153808/comm /proc/153914/comm /proc/154036/comm /proc/154041/comm /proc/154042/comm /proc/154488/comm /proc/154517/comm /proc/154518/comm /proc/1551/comm /proc/1552/comm /proc/1553/comm /proc/1554/comm /proc/1558/comm /proc/15588/comm /proc/156099/comm /proc/156100/comm /proc/16/comm /proc/1625/comm /proc/1629/comm /proc/163254/comm /proc/163255/comm /proc/163257/comm /proc/163258/comm /proc/163396/comm /proc/1638/comm /proc/164111/comm /proc/164135/comm /proc/164200/comm /proc/164413/comm /proc/164414/comm /proc/164584/comm /proc/164618/comm /proc/164632/comm /proc/164674/comm /proc/164675/comm /proc/164676/comm /proc/164677/comm /proc/165214/comm /proc/165238/comm /proc/166/comm /proc/166067/comm /proc/166114/comm /proc/166117/comm /proc/166118/comm /proc/166380/comm /proc/166403/comm /proc/166419/comm /proc/166448/comm /proc/166695/comm /proc/166718/comm /proc/166763/comm /proc/166779/comm /proc/166825/comm /proc/166841/comm /proc/166980/comm /proc/167/comm /proc/167002/comm /proc/167108/comm /proc/167133/comm /proc/167295/comm /proc/167465/comm /proc/167470/comm /proc/168/comm /proc/168089/comm /proc/168241/comm /proc/168264/comm /proc/168428/comm /proc/168444/comm /proc/168450/comm /proc/168522/comm /proc/168523/comm /proc/168533/comm /proc/168621/comm /proc/168625/comm /proc/169/comm /proc/170/comm /proc/170288/comm /proc/170398/comm /proc/170488/comm /proc/170600/comm /proc/170626/comm /proc/170668/comm /proc/170701/comm /proc/170729/comm /proc/170764/comm /proc/170923/comm /proc/170949/comm /proc/171/comm /proc/171152/comm /proc/171176/comm /proc/171241/comm /proc/171351/comm /proc/171374/comm /proc/171556/comm /proc/172/comm /proc/172054/comm /proc/173/comm /proc/174/comm /proc/176/comm /proc/177037/comm /proc/177048/comm /proc/177595/comm /proc/177749/comm /proc/178/comm /proc/179139/comm /proc/179142/comm /proc/18/comm /proc/180/comm /proc/180506/comm /proc/181/comm /proc/181993/comm /proc/182118/comm /proc/182143/comm /proc/182668/comm /proc/182716/comm /proc/182717/comm /proc/182847/comm /proc/182861/comm /proc/182862/comm /proc/183/comm /proc/183612/comm /proc/183872/comm /proc/184/comm /proc/184140/comm /proc/184193/comm /proc/184208/comm /proc/184464/comm /proc/184465/comm /proc/184573/comm /proc/184574/comm /proc/184678/comm /proc/184680/comm /proc/184857/comm /proc/184880/comm /proc/185034/comm /proc/185051/comm /proc/185057/comm /proc/185181/comm /proc/185182/comm /proc/185192/comm /proc/185302/comm /proc/186/comm /proc/18631/comm /proc/18651/comm /proc/18675/comm /proc/186772/comm /proc/186781/comm /proc/186842/comm /proc/186844/comm /proc/186866/comm /proc/186935/comm /proc/187/comm /proc/187006/comm /proc/18701/comm /proc/187025/comm /proc/187095/comm /proc/187116/comm /proc/187143/comm /proc/18716/comm /proc/187178/comm /proc/187216/comm /proc/187473/comm /proc/187474/comm /proc/187852/comm /proc/187871/comm /proc/187873/comm /proc/188/comm /proc/188009/comm /proc/189/comm /proc/19/comm /proc/190947/comm /proc/191/comm /proc/192287/comm /proc/192312/comm /proc/192923/comm /proc/192966/comm /proc/193042/comm /proc/193070/comm /proc/193198/comm /proc/193209/comm /proc/193648/comm /proc/193653/comm /proc/193682/comm /proc/194661/comm /proc/194783/comm /proc/194953/comm /proc/197170/comm /proc/197208/comm /proc/197316/comm /proc/197598/comm /proc/197599/comm /proc/197600/comm /proc/197672/comm /proc/197728/comm /proc/198046/comm /proc/198065/comm /proc/198097/comm /proc/198098/comm /proc/198110/comm /proc/198136/comm /proc/198143/comm /proc/198144/comm /proc/198237/comm /proc/198262/comm /proc/198272/comm /proc/198274/comm /proc/198476/comm /proc/198483/comm /proc/198484/comm /proc/198485/comm /proc/198515/comm /proc/198529/comm /proc/198530/comm /proc/198531/comm /proc/2/comm /proc/20/comm /proc/203/comm /proc/204/comm /proc/207/comm /proc/21/comm /proc/215/comm /proc/21628/comm /proc/21696/comm /proc/21697/comm /proc/21710/comm /proc/219/comm /proc/22/comm /proc/220/comm /proc/225/comm /proc/24/comm /proc/247/comm /proc/24971/comm /proc/25/comm /proc/25245/comm /proc/25262/comm /proc/25287/comm /proc/25299/comm /proc/26/comm /proc/26065/comm /proc/268/comm /proc/27/comm /proc/272/comm /proc/28/comm /proc/293/comm /proc/294/comm /proc/29563/comm /proc/296/comm /proc/297/comm /proc/29839/comm /proc/29857/comm /proc/29881/comm /proc/29894/comm /proc/3/comm /proc/30/comm /proc/31/comm /proc/316/comm /proc/317/comm /proc/32/comm /proc/321/comm /proc/322/comm /proc/323/comm /proc/324/comm /proc/325/comm /proc/326/comm /proc/327/comm /proc/328/comm /proc/33/comm /proc/34/comm /proc/34269/comm /proc/34543/comm /proc/34559/comm /proc/34585/comm /proc/34597/comm /proc/36/comm /proc/368/comm /proc/37/comm /proc/38/comm /proc/38882/comm /proc/38884/comm /proc/38964/comm /proc/38991/comm /proc/39/comm /proc/39016/comm /proc/39044/comm /proc/39062/comm /proc/399/comm /proc/4/comm /proc/40/comm /proc/403/comm /proc/41585/comm /proc/41630/comm /proc/41631/comm /proc/41636/comm /proc/41654/comm /proc/41656/comm /proc/41731/comm /proc/41741/comm /proc/41742/comm /proc/41765/comm /proc/41822/comm /proc/41840/comm /proc/41858/comm /proc/41889/comm /proc/41981/comm /proc/42/comm /proc/42047/comm /proc/42212/comm /proc/42235/comm /proc/42261/comm /proc/42953/comm /proc/42970/comm /proc/42997/comm /proc/43/comm /proc/43014/comm /proc/43305/comm /proc/43467/comm /proc/43913/comm /proc/44/comm /proc/44329/comm /proc/44355/comm /proc/44379/comm /proc/44751/comm /proc/44782/comm /proc/44787/comm /proc/44814/comm /proc/44844/comm /proc/44870/comm /proc/45/comm /proc/45255/comm /proc/45278/comm /proc/45326/comm /proc/45429/comm /proc/45768/comm /proc/45795/comm /proc/45809/comm /proc/45837/comm /proc/45851/comm /proc/45881/comm /proc/46/comm /proc/46000/comm /proc/46045/comm /proc/46094/comm /proc/462/comm /proc/47863/comm /proc/47958/comm /proc/47985/comm /proc/48/comm /proc/48051/comm /proc/48074/comm /proc/48320/comm /proc/48333/comm /proc/48365/comm /proc/48440/comm /proc/48798/comm /proc/48821/comm /proc/48896/comm /proc/48919/comm /proc/48965/comm /proc/49/comm /proc/49090/comm /proc/49276/comm /proc/49299/comm /proc/49424/comm /proc/49588/comm /proc/49612/comm /proc/49891/comm /proc/49994/comm /proc/5/comm /proc/50/comm /proc/50017/comm /proc/50249/comm /proc/50329/comm /proc/50436/comm /proc/50532/comm /proc/50557/comm /proc/50648/comm /proc/51/comm /proc/51743/comm /proc/52/comm /proc/52521/comm /proc/52545/comm /proc/527/comm /proc/52813/comm /proc/52836/comm /proc/52867/comm /proc/53009/comm /proc/53212/comm /proc/53306/comm /proc/54/comm /proc/55/comm /proc/56/comm /proc/57/comm /proc/58/comm /proc/58002/comm /proc/58025/comm /proc/58688/comm /proc/58713/comm /proc/58727/comm /proc/58753/comm /proc/58772/comm /proc/58800/comm /proc/58820/comm /proc/58991/comm /proc/59015/comm /proc/59053/comm /proc/59115/comm /proc/59163/comm /proc/59252/comm /proc/59266/comm /proc/6/comm /proc/60/comm /proc/60827/comm /proc/61/comm /proc/619/comm /proc/62/comm /proc/623/comm /proc/625/comm /proc/628/comm /proc/629/comm /proc/63/comm /proc/63453/comm /proc/63454/comm /proc/63455/comm /proc/63456/comm /proc/63457/comm /proc/63591/comm /proc/63770/comm /proc/63830/comm /proc/63902/comm /proc/63925/comm /proc/63935/comm /proc/63964/comm /proc/63985/comm /proc/64/comm /proc/64009/comm /proc/64298/comm /proc/64749/comm /proc/64775/comm /proc/649/comm /proc/650/comm /proc/65047/comm /proc/65087/comm /proc/65088/comm /proc/65090/comm /proc/65091/comm /proc/65254/comm /proc/65288/comm /proc/65387/comm /proc/65462/comm /proc/65486/comm /proc/65809/comm /proc/65837/comm /proc/65872/comm /proc/65897/comm /proc/65925/comm /proc/65979/comm /proc/66/comm /proc/66248/comm /proc/66272/comm /proc/66647/comm /proc/66733/comm /proc/66757/comm /proc/66833/comm /proc/66856/comm /proc/67/comm /proc/67366/comm /proc/67386/comm /proc/67387/comm /proc/67388/comm /proc/67389/comm /proc/67390/comm /proc/67539/comm /proc/67563/comm /proc/67889/comm /proc/67987/comm /proc/68/comm /proc/68293/comm /proc/68319/comm /proc/68496/comm /proc/68531/comm /proc/68572/comm /proc/68611/comm /proc/68655/comm /proc/68966/comm /proc/69/comm /proc/69046/comm /proc/69163/comm /proc/69514/comm /proc/69557/comm /proc/69596/comm /proc/69774/comm /proc/69861/comm /proc/69929/comm /proc/69953/comm /proc/69976/comm /proc/69996/comm /proc/70/comm /proc/70048/comm /proc/70066/comm /proc/70704/comm /proc/70720/comm /proc/70726/comm /proc/708/comm /proc/70850/comm /proc/70851/comm /proc/70864/comm /proc/70954/comm /proc/711/comm /proc/712/comm /proc/72/comm /proc/72355/comm /proc/72381/comm /proc/726/comm /proc/73/comm /proc/73843/comm /proc/74/comm /proc/74438/comm /proc/75/comm /proc/75620/comm /proc/75889/comm /proc/75904/comm /proc/75905/comm /proc/75906/comm /proc/75907/comm /proc/75908/comm /proc/75909/comm /proc/75912/comm /proc/75913/comm /proc/75915/comm /proc/75918/comm /proc/75920/comm /proc/75921/comm /proc/75922/comm /proc/75923/comm /proc/76/comm /proc/78/comm /proc/79/comm /proc/8/comm /proc/80/comm /proc/81/comm /proc/81793/comm /proc/81816/comm /proc/81922/comm /proc/81939/comm /proc/81953/comm /proc/82/comm /proc/82071/comm /proc/82072/comm /proc/82082/comm /proc/82257/comm /proc/83251/comm /proc/83278/comm /proc/83484/comm /proc/83664/comm /proc/83690/comm /proc/84/comm /proc/84720/comm /proc/85/comm /proc/85684/comm /proc/86/comm /proc/87/comm /proc/871/comm /proc/88/comm /proc/88352/comm /proc/88664/comm /proc/88679/comm /proc/89593/comm /proc/89619/comm /proc/90/comm /proc/90841/comm /proc/91/comm /proc/92/comm /proc/9238/comm /proc/9255/comm /proc/9271/comm /proc/93/comm /proc/9354/comm /proc/94/comm /proc/94822/comm /proc/96/comm /proc/97/comm /proc/97407/comm /proc/97436/comm /proc/97659/comm /proc/97677/comm /proc/97683/comm /proc/97787/comm /proc/97788/comm /proc/97798/comm /proc/97991/comm /proc/98/comm /proc/99/comm /proc/9973/comm /proc/self/comm /proc/thread-self/comm
+ '[' -n '' ']'
+ rm -f /var/run/libvirtd.pid
+ [[ -c /dev/kvm ]]
+ chmod 660 /dev/kvm
+ chown root:kvm /dev/kvm
+ CGROUPS=
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/blkio ']'
+ grep -w blkio /sys/fs/cgroup/cgroup.controllers
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/cpu ']'
+ grep -w cpu /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=cpu,
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/devices ']'
+ grep -w devices /sys/fs/cgroup/cgroup.controllers
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/freezer ']'
+ grep -w freezer /sys/fs/cgroup/cgroup.controllers
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/hugetlb ']'
+ grep -w hugetlb /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=hugetlb,
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/memory ']'
+ grep -w memory /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=memory,
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/net_cls ']'
+ grep -w net_cls /sys/fs/cgroup/cgroup.controllers
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/perf_event ']'
+ grep -w perf_event /sys/fs/cgroup/cgroup.controllers
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/rdma ']'
+ grep -w rdma /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=rdma,
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/misc ']'
+ grep -w misc /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=misc,
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/pids ']'
+ grep -w pids /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=pids,
+ cgcreate -g cpu,hugetlb,memory,rdma,misc,pids:/osh-libvirt
++ cat /proc/meminfo
++ tr -cd '[:digit:]'
++ grep HugePages_Total
+ hp_count=0
+ '[' 00 -gt 0 ']'
+ '[' -n 457eb676-33da-42ec-9a8c-9293d545c337 ']'
+ cgexec -g cpu,hugetlb,memory,rdma,misc,pids:/osh-libvirt systemd-run --scope --slice=system libvirtd --listen
++ mktemp --suffix .xml
+ tmpsecret=/tmp/tmp.46mbxmOvpu.xml
+ '[' -n '' ']'
+ trap cleanup EXIT
+ TIMEOUT=60
+ [[ ! -f /var/run/libvirtd.pid ]]
+ [[ 60 -gt 0 ]]
+ let TIMEOUT-=1
+ sleep 1
Running as unit: run-rd22f9d17a97a4253b890de7ddbe3d01f.scope; invocation ID: 3aa6e4005fbd4d32a60c5a564daaeb78
+ [[ ! -f /var/run/libvirtd.pid ]]
+ TIMEOUT=10
+ [[ ! -e /var/run/libvirt/libvirt-sock ]]
+ '[' -z '' ']'
+ '[' -n cinder ']'
++ awk '/key/{print $3}' /etc/ceph/ceph.client.cinder.keyring
+ CEPH_CINDER_KEYRING=AQDR7M5q0ULJIRAAMJpUNgGCASGAyx/l/cDc4A==
+ '[' -n cinder ']'
+ create_virsh_libvirt_secret cinder 457eb676-33da-42ec-9a8c-9293d545c337 AQDR7M5q0ULJIRAAMJpUNgGCASGAyx/l/cDc4A==
+ sec_user=cinder
+ sec_uuid=457eb676-33da-42ec-9a8c-9293d545c337
+ sec_ceph_keyring=AQDR7M5q0ULJIRAAMJpUNgGCASGAyx/l/cDc4A==
+ cat
+ virsh secret-define --file /tmp/tmp.46mbxmOvpu.xml
Secret 457eb676-33da-42ec-9a8c-9293d545c337 created

+ virsh secret-set-value --secret 457eb676-33da-42ec-9a8c-9293d545c337 --base64 AQDR7M5q0ULJIRAAMJpUNgGCASGAyx/l/cDc4A==
error: Passing secret value as command-line argument is insecure!
Secret value set

+ '[' -n '' ']'
+ '[' -n '' ']'
+ cleanup
+ rm -f /tmp/tmp.46mbxmOvpu.xml
+ '[' -n '' ']'
++ cat /var/run/libvirtd.pid
+ LIBVIRTD_PID=198551
+ kill 198551
+ tail --pid=198551 -f /dev/null
+ cgexec -g cpu,hugetlb,memory,rdma,misc,pids:/osh-libvirt systemd-run --scope --slice=system libvirtd --listen
Running as unit: run-r9fd0cfb5ee914f45b169288fb0fa1980.scope; invocation ID: 0c861ad3cf7b4097b21c2ba160fcd181