+ wait_for_file /etc/pki/CA/cacert.pem
+ local file=/etc/pki/CA/cacert.pem
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ sleep 1
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ sleep 1
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ sleep 1
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ sleep 1
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ sleep 1
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ wait_for_file /etc/pki/qemu/ca-cert.pem
+ local file=/etc/pki/qemu/ca-cert.pem
+ '[' '!' -f /etc/pki/qemu/ca-cert.pem ']'
+ wait_for_file /etc/pki/libvirt/servercert.pem
+ local file=/etc/pki/libvirt/servercert.pem
+ '[' '!' -f /etc/pki/libvirt/servercert.pem ']'
+ wait_for_file /etc/pki/libvirt/clientcert.pem
+ local file=/etc/pki/libvirt/clientcert.pem
+ '[' '!' -f /etc/pki/libvirt/clientcert.pem ']'
+ wait_for_file /etc/pki/qemu/server-cert.pem
+ local file=/etc/pki/qemu/server-cert.pem
+ '[' '!' -f /etc/pki/qemu/server-cert.pem ']'
+ wait_for_file /etc/pki/qemu/client-cert.pem
+ local file=/etc/pki/qemu/client-cert.pem
+ '[' '!' -f /etc/pki/qemu/client-cert.pem ']'
+ wait_for_file /etc/pki/libvirt/private/serverkey.pem
+ local file=/etc/pki/libvirt/private/serverkey.pem
+ '[' '!' -f /etc/pki/libvirt/private/serverkey.pem ']'
+ wait_for_file /etc/pki/libvirt/private/clientkey.pem
+ local file=/etc/pki/libvirt/private/clientkey.pem
+ '[' '!' -f /etc/pki/libvirt/private/clientkey.pem ']'
+ wait_for_file /etc/pki/qemu/server-key.pem
+ local file=/etc/pki/qemu/server-key.pem
+ '[' '!' -f /etc/pki/qemu/server-key.pem ']'
+ wait_for_file /etc/pki/qemu/client-key.pem
+ local file=/etc/pki/qemu/client-key.pem
+ '[' '!' -f /etc/pki/qemu/client-key.pem ']'
+ wait_for_file /etc/pki/libvirt-vnc/ca-cert.pem
+ local file=/etc/pki/libvirt-vnc/ca-cert.pem
+ '[' '!' -f /etc/pki/libvirt-vnc/ca-cert.pem ']'
+ wait_for_file /etc/pki/libvirt-vnc/server-cert.pem
+ local file=/etc/pki/libvirt-vnc/server-cert.pem
+ '[' '!' -f /etc/pki/libvirt-vnc/server-cert.pem ']'
+ wait_for_file /etc/pki/libvirt-vnc/server-key.pem
+ local file=/etc/pki/libvirt-vnc/server-key.pem
+ '[' '!' -f /etc/pki/libvirt-vnc/server-key.pem ']'
++ grep -w libvirtd
++ cat /proc/1/comm /proc/10/comm /proc/100/comm /proc/101655/comm /proc/102/comm /proc/10228/comm /proc/102537/comm /proc/102600/comm /proc/103/comm /proc/103006/comm /proc/103028/comm /proc/103542/comm /proc/103555/comm /proc/103556/comm /proc/104/comm /proc/104619/comm /proc/104642/comm /proc/104657/comm /proc/104688/comm /proc/105/comm /proc/105054/comm /proc/105291/comm /proc/105293/comm /proc/106/comm /proc/106414/comm /proc/106718/comm /proc/106742/comm /proc/106859/comm /proc/106876/comm /proc/106882/comm /proc/106953/comm /proc/106954/comm /proc/106964/comm /proc/107179/comm /proc/10735/comm /proc/10736/comm /proc/108/comm /proc/108703/comm /proc/108726/comm /proc/108741/comm /proc/108765/comm /proc/109/comm /proc/11/comm /proc/110/comm /proc/110768/comm /proc/111/comm /proc/112/comm /proc/113/comm /proc/114/comm /proc/115/comm /proc/115974/comm /proc/116/comm /proc/116079/comm /proc/116456/comm /proc/117/comm /proc/118462/comm /proc/1185/comm /proc/118550/comm /proc/118564/comm /proc/118565/comm /proc/119935/comm /proc/12/comm /proc/12177/comm /proc/121795/comm /proc/121820/comm /proc/121840/comm /proc/121881/comm /proc/12207/comm /proc/12245/comm /proc/122481/comm /proc/122825/comm /proc/12290/comm /proc/12302/comm /proc/123075/comm /proc/123699/comm /proc/124418/comm /proc/124442/comm /proc/124658/comm /proc/125039/comm /proc/12541/comm /proc/12570/comm /proc/125711/comm /proc/12624/comm /proc/12650/comm /proc/126610/comm /proc/12668/comm /proc/126690/comm /proc/126775/comm /proc/128138/comm /proc/128892/comm /proc/128894/comm /proc/1290/comm /proc/1291/comm /proc/129111/comm /proc/129121/comm /proc/1292/comm /proc/1293/comm /proc/129582/comm /proc/129618/comm /proc/129619/comm /proc/13/comm /proc/131228/comm /proc/131229/comm /proc/138373/comm /proc/138374/comm /proc/138376/comm /proc/138377/comm /proc/138485/comm /proc/1387/comm /proc/139033/comm /proc/139057/comm /proc/1391/comm /proc/139420/comm /proc/139454/comm /proc/139467/comm /proc/139499/comm /proc/139500/comm /proc/139501/comm /proc/139502/comm /proc/14/comm /proc/140519/comm /proc/140542/comm /proc/141012/comm /proc/141037/comm /proc/141135/comm /proc/141485/comm /proc/141620/comm /proc/141622/comm /proc/141829/comm /proc/141854/comm /proc/141933/comm /proc/142031/comm /proc/142037/comm /proc/142121/comm /proc/142122/comm /proc/142132/comm /proc/142262/comm /proc/143093/comm /proc/143901/comm /proc/143927/comm /proc/144021/comm /proc/144073/comm /proc/144097/comm /proc/144178/comm /proc/144206/comm /proc/144214/comm /proc/144441/comm /proc/144479/comm /proc/144575/comm /proc/144620/comm /proc/144664/comm /proc/144720/comm /proc/144749/comm /proc/144839/comm /proc/144863/comm /proc/145397/comm /proc/1470/comm /proc/1474/comm /proc/1483/comm /proc/15/comm /proc/16/comm /proc/162292/comm /proc/162372/comm /proc/162379/comm /proc/162386/comm /proc/163073/comm /proc/163197/comm /proc/164380/comm /proc/165665/comm /proc/165669/comm /proc/165670/comm /proc/165675/comm /proc/166/comm /proc/167/comm /proc/167577/comm /proc/167685/comm /proc/167706/comm /proc/167723/comm /proc/167724/comm /proc/167725/comm /proc/167726/comm /proc/168/comm /proc/168480/comm /proc/168513/comm /proc/168596/comm /proc/168743/comm /proc/168746/comm /proc/168877/comm /proc/168878/comm /proc/168896/comm /proc/168897/comm /proc/169/comm /proc/169204/comm /proc/169465/comm /proc/169659/comm /proc/169683/comm /proc/169841/comm /proc/169858/comm /proc/169864/comm /proc/169988/comm /proc/169989/comm /proc/169999/comm /proc/170/comm /proc/170129/comm /proc/170556/comm /proc/171/comm /proc/171472/comm /proc/171497/comm /proc/171535/comm /proc/171573/comm /proc/171638/comm /proc/171649/comm /proc/171689/comm /proc/171700/comm /proc/171748/comm /proc/171808/comm /proc/172/comm /proc/172016/comm /proc/172049/comm /proc/172055/comm /proc/172085/comm /proc/172347/comm /proc/172581/comm /proc/172595/comm /proc/172703/comm /proc/173/comm /proc/174/comm /proc/175486/comm /proc/175493/comm /proc/176039/comm /proc/177313/comm /proc/177407/comm /proc/178/comm /proc/18/comm /proc/180/comm /proc/180165/comm /proc/180166/comm /proc/180167/comm /proc/180325/comm /proc/180452/comm /proc/180454/comm /proc/180485/comm /proc/180486/comm /proc/180500/comm /proc/180514/comm /proc/180515/comm /proc/180789/comm /proc/180792/comm /proc/180795/comm /proc/181/comm /proc/181355/comm /proc/181428/comm /proc/181810/comm /proc/182087/comm /proc/182362/comm /proc/182897/comm /proc/182929/comm /proc/182932/comm /proc/182989/comm /proc/183/comm /proc/183249/comm /proc/183251/comm /proc/183571/comm /proc/183720/comm /proc/183766/comm /proc/183767/comm /proc/183768/comm /proc/183769/comm /proc/183770/comm /proc/183771/comm /proc/183924/comm /proc/184/comm /proc/184063/comm /proc/184148/comm /proc/184193/comm /proc/184194/comm /proc/184196/comm /proc/184407/comm /proc/184409/comm /proc/184463/comm /proc/184520/comm /proc/184563/comm /proc/184588/comm /proc/184830/comm /proc/184848/comm /proc/184857/comm /proc/184915/comm /proc/184916/comm /proc/184956/comm /proc/184959/comm /proc/184960/comm /proc/184970/comm /proc/185/comm /proc/185024/comm /proc/185027/comm /proc/185028/comm /proc/185029/comm /proc/185030/comm /proc/186/comm /proc/187/comm /proc/188/comm /proc/189/comm /proc/19/comm /proc/191/comm /proc/192/comm /proc/193/comm /proc/19451/comm /proc/19471/comm /proc/19497/comm /proc/19525/comm /proc/19538/comm /proc/2/comm /proc/20/comm /proc/21/comm /proc/21362/comm /proc/21365/comm /proc/21366/comm /proc/21379/comm /proc/215/comm /proc/216/comm /proc/219/comm /proc/22/comm /proc/220/comm /proc/225/comm /proc/24/comm /proc/24405/comm /proc/24681/comm /proc/24699/comm /proc/247/comm /proc/24723/comm /proc/24736/comm /proc/25/comm /proc/25832/comm /proc/26/comm /proc/268/comm /proc/27/comm /proc/28/comm /proc/289/comm /proc/291/comm /proc/29113/comm /proc/292/comm /proc/29388/comm /proc/29405/comm /proc/29430/comm /proc/29442/comm /proc/29936/comm /proc/3/comm /proc/30/comm /proc/31/comm /proc/311/comm /proc/312/comm /proc/316/comm /proc/32/comm /proc/33/comm /proc/33706/comm /proc/33970/comm /proc/33987/comm /proc/34/comm /proc/34011/comm /proc/34023/comm /proc/343/comm /proc/351/comm /proc/352/comm /proc/35592/comm /proc/35594/comm /proc/359/comm /proc/36/comm /proc/367/comm /proc/37/comm /proc/378/comm /proc/379/comm /proc/38/comm /proc/39/comm /proc/392/comm /proc/39362/comm /proc/39375/comm /proc/39417/comm /proc/39425/comm /proc/39436/comm /proc/39454/comm /proc/39497/comm /proc/395/comm /proc/39500/comm /proc/39526/comm /proc/39539/comm /proc/396/comm /proc/39612/comm /proc/39625/comm /proc/39655/comm /proc/39660/comm /proc/39777/comm /proc/39837/comm /proc/399/comm /proc/39937/comm /proc/39960/comm /proc/39985/comm /proc/4/comm /proc/40/comm /proc/40734/comm /proc/40743/comm /proc/40783/comm /proc/40796/comm /proc/41035/comm /proc/41262/comm /proc/41344/comm /proc/41644/comm /proc/42/comm /proc/42115/comm /proc/42140/comm /proc/42182/comm /proc/42519/comm /proc/42542/comm /proc/42564/comm /proc/42589/comm /proc/42607/comm /proc/42654/comm /proc/42976/comm /proc/43/comm /proc/43000/comm /proc/43217/comm /proc/43457/comm /proc/43482/comm /proc/43497/comm /proc/43524/comm /proc/43538/comm /proc/43568/comm /proc/43689/comm /proc/43735/comm /proc/43779/comm /proc/44/comm /proc/45/comm /proc/451/comm /proc/45830/comm /proc/45856/comm /proc/45907/comm /proc/45933/comm /proc/46/comm /proc/46171/comm /proc/46184/comm /proc/46211/comm /proc/46310/comm /proc/46655/comm /proc/46678/comm /proc/46771/comm /proc/46793/comm /proc/46839/comm /proc/47117/comm /proc/47360/comm /proc/47383/comm /proc/47506/comm /proc/47670/comm /proc/47698/comm /proc/478/comm /proc/48/comm /proc/48061/comm /proc/48083/comm /proc/48191/comm /proc/48243/comm /proc/48340/comm /proc/48369/comm /proc/48427/comm /proc/48485/comm /proc/49/comm /proc/49382/comm /proc/495/comm /proc/5/comm /proc/50/comm /proc/50224/comm /proc/50261/comm /proc/50372/comm /proc/50395/comm /proc/50456/comm /proc/50571/comm /proc/50739/comm /proc/50861/comm /proc/51/comm /proc/52/comm /proc/520/comm /proc/54/comm /proc/54663/comm /proc/54687/comm /proc/55/comm /proc/55271/comm /proc/55298/comm /proc/55303/comm /proc/55337/comm /proc/55348/comm /proc/55372/comm /proc/55529/comm /proc/55553/comm /proc/55637/comm /proc/55676/comm /proc/55716/comm /proc/55827/comm /proc/56/comm /proc/57/comm /proc/58/comm /proc/59463/comm /proc/59634/comm /proc/59670/comm /proc/59736/comm /proc/59759/comm /proc/59774/comm /proc/59802/comm /proc/59825/comm /proc/59854/comm /proc/6/comm /proc/60/comm /proc/60226/comm /proc/60251/comm /proc/60418/comm /proc/60490/comm /proc/60517/comm /proc/60520/comm /proc/60521/comm /proc/60522/comm /proc/60787/comm /proc/60878/comm /proc/60896/comm /proc/61/comm /proc/611/comm /proc/61198/comm /proc/615/comm /proc/61529/comm /proc/61556/comm /proc/61606/comm /proc/61633/comm /proc/61661/comm /proc/61673/comm /proc/617/comm /proc/61735/comm /proc/61762/comm /proc/61790/comm /proc/61813/comm /proc/62/comm /proc/62031/comm /proc/62149/comm /proc/62178/comm /proc/62192/comm /proc/622/comm /proc/624/comm /proc/62533/comm /proc/62557/comm /proc/62770/comm /proc/62841/comm /proc/62940/comm /proc/62977/comm /proc/63/comm /proc/63017/comm /proc/63042/comm /proc/63299/comm /proc/63315/comm /proc/63316/comm /proc/63317/comm /proc/63318/comm /proc/63319/comm /proc/63625/comm /proc/63810/comm /proc/63832/comm /proc/63892/comm /proc/63893/comm /proc/63919/comm /proc/63957/comm /proc/63971/comm /proc/64/comm /proc/64065/comm /proc/64114/comm /proc/64239/comm /proc/643/comm /proc/64324/comm /proc/64367/comm /proc/64644/comm /proc/648/comm /proc/64847/comm /proc/65064/comm /proc/65111/comm /proc/65131/comm /proc/65185/comm /proc/65221/comm /proc/65239/comm /proc/65377/comm /proc/65402/comm /proc/66/comm /proc/66184/comm /proc/66201/comm /proc/66207/comm /proc/66260/comm /proc/66261/comm /proc/66271/comm /proc/66364/comm /proc/67/comm /proc/67584/comm /proc/67628/comm /proc/68/comm /proc/68918/comm /proc/69/comm /proc/70/comm /proc/702/comm /proc/705/comm /proc/706/comm /proc/70977/comm /proc/70991/comm /proc/70992/comm /proc/70993/comm /proc/70994/comm /proc/70995/comm /proc/70998/comm /proc/70999/comm /proc/71003/comm /proc/71005/comm /proc/71006/comm /proc/71007/comm /proc/71008/comm /proc/71009/comm /proc/71010/comm /proc/719/comm /proc/72/comm /proc/73/comm /proc/74/comm /proc/75/comm /proc/76/comm /proc/76733/comm /proc/76955/comm /proc/76978/comm /proc/77068/comm /proc/77085/comm /proc/77091/comm /proc/77186/comm /proc/77187/comm /proc/77197/comm /proc/77331/comm /proc/78/comm /proc/78436/comm /proc/78459/comm /proc/78738/comm /proc/78739/comm /proc/79/comm /proc/79679/comm /proc/79878/comm /proc/8/comm /proc/80/comm /proc/81/comm /proc/81398/comm /proc/82/comm /proc/83674/comm /proc/83687/comm /proc/84/comm /proc/84444/comm /proc/84470/comm /proc/85/comm /proc/85139/comm /proc/86/comm /proc/864/comm /proc/87/comm /proc/88/comm /proc/88745/comm /proc/89585/comm /proc/9/comm /proc/90/comm /proc/90568/comm /proc/90593/comm /proc/90736/comm /proc/90753/comm /proc/90762/comm /proc/90909/comm /proc/90910/comm /proc/90920/comm /proc/91/comm /proc/9102/comm /proc/91121/comm /proc/9119/comm /proc/9135/comm /proc/92/comm /proc/9220/comm /proc/93/comm /proc/93909/comm /proc/94/comm /proc/94496/comm /proc/94520/comm /proc/94537/comm /proc/94566/comm /proc/94653/comm /proc/94843/comm /proc/94967/comm /proc/95644/comm /proc/96/comm /proc/96849/comm /proc/97/comm /proc/97580/comm /proc/98/comm /proc/9858/comm /proc/99/comm /proc/99665/comm /proc/self/comm /proc/thread-self/comm
+ '[' -n '' ']'
+ rm -f /var/run/libvirtd.pid
+ [[ -c /dev/kvm ]]
+ chmod 660 /dev/kvm
+ chown root:kvm /dev/kvm
+ CGROUPS=
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/blkio ']'
+ grep -w blkio /sys/fs/cgroup/cgroup.controllers
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/cpu ']'
+ grep -w cpu /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=cpu,
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/devices ']'
+ grep -w devices /sys/fs/cgroup/cgroup.controllers
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/freezer ']'
+ grep -w freezer /sys/fs/cgroup/cgroup.controllers
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/hugetlb ']'
+ grep -w hugetlb /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=hugetlb,
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/memory ']'
+ grep -w memory /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=memory,
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/net_cls ']'
+ grep -w net_cls /sys/fs/cgroup/cgroup.controllers
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/perf_event ']'
+ grep -w perf_event /sys/fs/cgroup/cgroup.controllers
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/rdma ']'
+ grep -w rdma /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=rdma,
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/misc ']'
+ grep -w misc /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=misc,
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/pids ']'
+ grep -w pids /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=pids,
+ cgcreate -g cpu,hugetlb,memory,rdma,misc,pids:/osh-libvirt
++ cat /proc/meminfo
++ grep HugePages_Total
++ tr -cd '[:digit:]'
+ hp_count=0
+ '[' 00 -gt 0 ']'
+ '[' -n 457eb676-33da-42ec-9a8c-9293d545c337 ']'
+ cgexec -g cpu,hugetlb,memory,rdma,misc,pids:/osh-libvirt systemd-run --scope --slice=system libvirtd --listen
++ mktemp --suffix .xml
+ tmpsecret=/tmp/tmp.wrBnaaB3tL.xml
+ '[' -n '' ']'
+ trap cleanup EXIT
+ TIMEOUT=60
+ [[ ! -f /var/run/libvirtd.pid ]]
+ [[ 60 -gt 0 ]]
+ let TIMEOUT-=1
+ sleep 1
Running as unit: run-r1270d71074fc41b7bfdc674d3d61c6f7.scope; invocation ID: dc7654d93010415daaf825959b1d8862
+ [[ ! -f /var/run/libvirtd.pid ]]
+ TIMEOUT=10
+ [[ ! -e /var/run/libvirt/libvirt-sock ]]
+ '[' -z '' ']'
+ '[' -n cinder ']'
++ awk '/key/{print $3}' /etc/ceph/ceph.client.cinder.keyring
+ CEPH_CINDER_KEYRING=AQC3aulpkUH0GBAArqwCgOIFxlHtQyQBG0kmaQ==
+ '[' -n cinder ']'
+ create_virsh_libvirt_secret cinder 457eb676-33da-42ec-9a8c-9293d545c337 AQC3aulpkUH0GBAArqwCgOIFxlHtQyQBG0kmaQ==
+ sec_user=cinder
+ sec_uuid=457eb676-33da-42ec-9a8c-9293d545c337
+ sec_ceph_keyring=AQC3aulpkUH0GBAArqwCgOIFxlHtQyQBG0kmaQ==
+ cat
+ virsh secret-define --file /tmp/tmp.wrBnaaB3tL.xml
Secret 457eb676-33da-42ec-9a8c-9293d545c337 created

+ virsh secret-set-value --secret 457eb676-33da-42ec-9a8c-9293d545c337 --base64 AQC3aulpkUH0GBAArqwCgOIFxlHtQyQBG0kmaQ==
error: Passing secret value as command-line argument is insecure!
Secret value set

+ '[' -n '' ']'
+ '[' -n '' ']'
+ cleanup
+ rm -f /tmp/tmp.wrBnaaB3tL.xml
+ '[' -n '' ']'
++ cat /var/run/libvirtd.pid
+ LIBVIRTD_PID=185052
+ kill 185052
+ tail --pid=185052 -f /dev/null
+ cgexec -g cpu,hugetlb,memory,rdma,misc,pids:/osh-libvirt systemd-run --scope --slice=system libvirtd --listen
Running as unit: run-r7fd935d36cce4ed89d34eb3e91d3aa82.scope; invocation ID: b721979eae834cd088e035eb01f0f8b4