+ wait_for_file /etc/pki/CA/cacert.pem
+ local file=/etc/pki/CA/cacert.pem
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ sleep 1
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ sleep 1
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ sleep 1
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ sleep 1
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ sleep 1
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ wait_for_file /etc/pki/qemu/ca-cert.pem
+ local file=/etc/pki/qemu/ca-cert.pem
+ '[' '!' -f /etc/pki/qemu/ca-cert.pem ']'
+ wait_for_file /etc/pki/libvirt/servercert.pem
+ local file=/etc/pki/libvirt/servercert.pem
+ '[' '!' -f /etc/pki/libvirt/servercert.pem ']'
+ wait_for_file /etc/pki/libvirt/clientcert.pem
+ local file=/etc/pki/libvirt/clientcert.pem
+ '[' '!' -f /etc/pki/libvirt/clientcert.pem ']'
+ wait_for_file /etc/pki/qemu/server-cert.pem
+ local file=/etc/pki/qemu/server-cert.pem
+ '[' '!' -f /etc/pki/qemu/server-cert.pem ']'
+ wait_for_file /etc/pki/qemu/client-cert.pem
+ local file=/etc/pki/qemu/client-cert.pem
+ '[' '!' -f /etc/pki/qemu/client-cert.pem ']'
+ wait_for_file /etc/pki/libvirt/private/serverkey.pem
+ local file=/etc/pki/libvirt/private/serverkey.pem
+ '[' '!' -f /etc/pki/libvirt/private/serverkey.pem ']'
+ wait_for_file /etc/pki/libvirt/private/clientkey.pem
+ local file=/etc/pki/libvirt/private/clientkey.pem
+ '[' '!' -f /etc/pki/libvirt/private/clientkey.pem ']'
+ wait_for_file /etc/pki/qemu/server-key.pem
+ local file=/etc/pki/qemu/server-key.pem
+ '[' '!' -f /etc/pki/qemu/server-key.pem ']'
+ wait_for_file /etc/pki/qemu/client-key.pem
+ local file=/etc/pki/qemu/client-key.pem
+ '[' '!' -f /etc/pki/qemu/client-key.pem ']'
+ wait_for_file /etc/pki/libvirt-vnc/ca-cert.pem
+ local file=/etc/pki/libvirt-vnc/ca-cert.pem
+ '[' '!' -f /etc/pki/libvirt-vnc/ca-cert.pem ']'
+ wait_for_file /etc/pki/libvirt-vnc/server-cert.pem
+ local file=/etc/pki/libvirt-vnc/server-cert.pem
+ '[' '!' -f /etc/pki/libvirt-vnc/server-cert.pem ']'
+ wait_for_file /etc/pki/libvirt-vnc/server-key.pem
+ local file=/etc/pki/libvirt-vnc/server-key.pem
+ '[' '!' -f /etc/pki/libvirt-vnc/server-key.pem ']'
++ grep -w libvirtd
++ cat /proc/1/comm /proc/10/comm /proc/100/comm /proc/101378/comm /proc/102/comm /proc/103/comm /proc/103038/comm /proc/10319/comm /proc/104/comm /proc/105/comm /proc/106/comm /proc/108/comm /proc/108147/comm /proc/108170/comm /proc/10826/comm /proc/10827/comm /proc/108537/comm /proc/108550/comm /proc/108551/comm /proc/109/comm /proc/1095/comm /proc/109728/comm /proc/109754/comm /proc/109765/comm /proc/109795/comm /proc/11/comm /proc/110/comm /proc/110051/comm /proc/110065/comm /proc/110227/comm /proc/110230/comm /proc/111/comm /proc/111363/comm /proc/111644/comm /proc/111668/comm /proc/111781/comm /proc/111798/comm /proc/111804/comm /proc/111851/comm /proc/111852/comm /proc/111862/comm /proc/112/comm /proc/112082/comm /proc/113/comm /proc/113508/comm /proc/113536/comm /proc/113593/comm /proc/113618/comm /proc/114/comm /proc/114070/comm /proc/115/comm /proc/115727/comm /proc/116/comm /proc/116047/comm /proc/116327/comm /proc/117/comm /proc/117413/comm /proc/117415/comm /proc/12/comm /proc/121047/comm /proc/121364/comm /proc/121867/comm /proc/12275/comm /proc/122977/comm /proc/12306/comm /proc/123427/comm /proc/123440/comm /proc/123441/comm /proc/12345/comm /proc/12389/comm /proc/12402/comm /proc/125120/comm /proc/12639/comm /proc/126551/comm /proc/126576/comm /proc/126591/comm /proc/126621/comm /proc/12670/comm /proc/127160/comm /proc/12726/comm /proc/12752/comm /proc/127619/comm /proc/12771/comm /proc/127830/comm /proc/128460/comm /proc/128463/comm /proc/129041/comm /proc/129065/comm /proc/129465/comm /proc/129617/comm /proc/13/comm /proc/130405/comm /proc/130448/comm /proc/132975/comm /proc/133796/comm /proc/133979/comm /proc/134656/comm /proc/134670/comm /proc/134671/comm /proc/135883/comm /proc/135884/comm /proc/14/comm /proc/1426/comm /proc/142973/comm /proc/142974/comm /proc/142976/comm /proc/142977/comm /proc/143197/comm /proc/143212/comm /proc/143478/comm /proc/14930/comm /proc/15/comm /proc/1531/comm /proc/1532/comm /proc/1533/comm /proc/1534/comm /proc/1538/comm /proc/154111/comm /proc/154222/comm /proc/155443/comm /proc/155477/comm /proc/155490/comm /proc/155497/comm /proc/155498/comm /proc/155500/comm /proc/155501/comm /proc/155502/comm /proc/156080/comm /proc/156104/comm /proc/156391/comm /proc/156881/comm /proc/156899/comm /proc/157199/comm /proc/157223/comm /proc/157246/comm /proc/157270/comm /proc/157455/comm /proc/157458/comm /proc/157500/comm /proc/157527/comm /proc/157567/comm /proc/157581/comm /proc/157714/comm /proc/157784/comm /proc/157850/comm /proc/157882/comm /proc/158145/comm /proc/158329/comm /proc/158335/comm /proc/158986/comm /proc/159009/comm /proc/159246/comm /proc/159263/comm /proc/159269/comm /proc/159328/comm /proc/159329/comm /proc/159339/comm /proc/159431/comm /proc/16/comm /proc/1605/comm /proc/1609/comm /proc/161157/comm /proc/161259/comm /proc/161345/comm /proc/161440/comm /proc/161465/comm /proc/161559/comm /proc/161584/comm /proc/161598/comm /proc/161624/comm /proc/161643/comm /proc/161677/comm /proc/161742/comm /proc/161774/comm /proc/1618/comm /proc/161814/comm /proc/162143/comm /proc/162167/comm /proc/162242/comm /proc/162243/comm /proc/162811/comm /proc/166/comm /proc/167/comm /proc/167163/comm /proc/167841/comm /proc/167896/comm /proc/168/comm /proc/168242/comm /proc/169/comm /proc/169158/comm /proc/170/comm /proc/170288/comm /proc/170292/comm /proc/170330/comm /proc/171/comm /proc/171842/comm /proc/171972/comm /proc/171979/comm /proc/171982/comm /proc/172/comm /proc/172493/comm /proc/172530/comm /proc/172531/comm /proc/172533/comm /proc/172590/comm /proc/172605/comm /proc/172606/comm /proc/173/comm /proc/173254/comm /proc/173290/comm /proc/173423/comm /proc/173460/comm /proc/173635/comm /proc/173637/comm /proc/173643/comm /proc/173649/comm /proc/174/comm /proc/174238/comm /proc/174401/comm /proc/174425/comm /proc/174583/comm /proc/174599/comm /proc/174605/comm /proc/174686/comm /proc/174687/comm /proc/174697/comm /proc/174912/comm /proc/175/comm /proc/176/comm /proc/176256/comm /proc/176257/comm /proc/176306/comm /proc/176338/comm /proc/176344/comm /proc/176405/comm /proc/176590/comm /proc/176612/comm /proc/176635/comm /proc/176648/comm /proc/176674/comm /proc/176899/comm /proc/177171/comm /proc/177223/comm /proc/177316/comm /proc/179/comm /proc/18/comm /proc/180/comm /proc/180278/comm /proc/180298/comm /proc/180577/comm /proc/180864/comm /proc/182156/comm /proc/183/comm /proc/183376/comm /proc/183400/comm /proc/183695/comm /proc/184148/comm /proc/184184/comm /proc/184258/comm /proc/184285/comm /proc/184372/comm /proc/184383/comm /proc/185/comm /proc/185437/comm /proc/185585/comm /proc/185586/comm /proc/185587/comm /proc/186/comm /proc/186066/comm /proc/186078/comm /proc/186111/comm /proc/186112/comm /proc/186126/comm /proc/186139/comm /proc/186140/comm /proc/186626/comm /proc/186628/comm /proc/186631/comm /proc/187/comm /proc/187379/comm /proc/187458/comm /proc/187459/comm /proc/187460/comm /proc/187461/comm /proc/187462/comm /proc/187463/comm /proc/188/comm /proc/188154/comm /proc/188208/comm /proc/188235/comm /proc/188505/comm /proc/188513/comm /proc/188623/comm /proc/188640/comm /proc/188646/comm /proc/188856/comm /proc/188857/comm /proc/188867/comm /proc/188963/comm /proc/188970/comm /proc/189/comm /proc/189047/comm /proc/189083/comm /proc/189234/comm /proc/189300/comm /proc/189605/comm /proc/189642/comm /proc/189689/comm /proc/189715/comm /proc/19/comm /proc/190/comm /proc/190019/comm /proc/190025/comm /proc/190078/comm /proc/190079/comm /proc/190080/comm /proc/191/comm /proc/192/comm /proc/193/comm /proc/194/comm /proc/195/comm /proc/19641/comm /proc/19661/comm /proc/19680/comm /proc/19706/comm /proc/19725/comm /proc/198/comm /proc/2/comm /proc/20/comm /proc/201/comm /proc/21/comm /proc/213/comm /proc/214/comm /proc/21791/comm /proc/21794/comm /proc/21795/comm /proc/21808/comm /proc/219/comm /proc/22/comm /proc/220/comm /proc/225/comm /proc/24/comm /proc/24595/comm /proc/247/comm /proc/24865/comm /proc/24882/comm /proc/24907/comm /proc/24919/comm /proc/25/comm /proc/26/comm /proc/268/comm /proc/27/comm /proc/28/comm /proc/287/comm /proc/292/comm /proc/29203/comm /proc/293/comm /proc/29480/comm /proc/29497/comm /proc/29522/comm /proc/29534/comm /proc/3/comm /proc/30/comm /proc/31/comm /proc/313/comm /proc/314/comm /proc/318/comm /proc/32/comm /proc/327/comm /proc/33/comm /proc/33709/comm /proc/33983/comm /proc/33999/comm /proc/34/comm /proc/34024/comm /proc/34037/comm /proc/353/comm /proc/354/comm /proc/35597/comm /proc/35599/comm /proc/36/comm /proc/361/comm /proc/37/comm /proc/37355/comm /proc/379/comm /proc/38/comm /proc/381/comm /proc/382/comm /proc/39/comm /proc/390/comm /proc/396/comm /proc/39641/comm /proc/39682/comm /proc/39687/comm /proc/39706/comm /proc/39707/comm /proc/39712/comm /proc/39785/comm /proc/39791/comm /proc/39807/comm /proc/39810/comm /proc/39884/comm /proc/39903/comm /proc/39920/comm /proc/39931/comm /proc/4/comm /proc/40/comm /proc/40040/comm /proc/40101/comm /proc/402/comm /proc/40267/comm /proc/40289/comm /proc/40318/comm /proc/40971/comm /proc/40991/comm /proc/41026/comm /proc/41038/comm /proc/41222/comm /proc/41473/comm /proc/41848/comm /proc/42/comm /proc/42270/comm /proc/42384/comm /proc/42407/comm /proc/42443/comm /proc/42832/comm /proc/42856/comm /proc/42872/comm /proc/42896/comm /proc/42927/comm /proc/42952/comm /proc/43/comm /proc/43295/comm /proc/43318/comm /proc/43473/comm /proc/43784/comm /proc/43808/comm /proc/43824/comm /proc/43849/comm /proc/43866/comm /proc/43895/comm /proc/44/comm /proc/44012/comm /proc/44055/comm /proc/44102/comm /proc/45/comm /proc/457/comm /proc/46/comm /proc/46165/comm /proc/46198/comm /proc/46233/comm /proc/46257/comm /proc/46472/comm /proc/46484/comm /proc/46519/comm /proc/46623/comm /proc/47017/comm /proc/47043/comm /proc/47061/comm /proc/47091/comm /proc/47156/comm /proc/47238/comm /proc/47453/comm /proc/47476/comm /proc/47809/comm /proc/47951/comm /proc/47981/comm /proc/48/comm /proc/48374/comm /proc/48398/comm /proc/48426/comm /proc/48506/comm /proc/48578/comm /proc/48677/comm /proc/48702/comm /proc/48788/comm /proc/49/comm /proc/493/comm /proc/49638/comm /proc/5/comm /proc/50/comm /proc/50433/comm /proc/50456/comm /proc/50597/comm /proc/50620/comm /proc/50713/comm /proc/50834/comm /proc/51/comm /proc/51034/comm /proc/51090/comm /proc/52/comm /proc/524/comm /proc/54/comm /proc/54971/comm /proc/54995/comm /proc/55/comm /proc/55612/comm /proc/55657/comm /proc/55695/comm /proc/55725/comm /proc/55750/comm /proc/55775/comm /proc/55912/comm /proc/55940/comm /proc/55973/comm /proc/56/comm /proc/56010/comm /proc/56049/comm /proc/56161/comm /proc/57/comm /proc/58/comm /proc/583/comm /proc/59730/comm /proc/59731/comm /proc/59868/comm /proc/59934/comm /proc/6/comm /proc/60/comm /proc/60058/comm /proc/60094/comm /proc/60144/comm /proc/60169/comm /proc/60184/comm /proc/60214/comm /proc/60226/comm /proc/60256/comm /proc/60545/comm /proc/60660/comm /proc/61/comm /proc/61042/comm /proc/61067/comm /proc/61407/comm /proc/61424/comm /proc/61425/comm /proc/61428/comm /proc/61429/comm /proc/61442/comm /proc/61586/comm /proc/616/comm /proc/61696/comm /proc/61723/comm /proc/61757/comm /proc/61780/comm /proc/619/comm /proc/61943/comm /proc/61966/comm /proc/61983/comm /proc/62/comm /proc/62012/comm /proc/62025/comm /proc/62058/comm /proc/622/comm /proc/62454/comm /proc/62478/comm /proc/625/comm /proc/62554/comm /proc/62815/comm /proc/62845/comm /proc/62877/comm /proc/629/comm /proc/63/comm /proc/63176/comm /proc/63212/comm /proc/63357/comm /proc/63401/comm /proc/63424/comm /proc/63455/comm /proc/63493/comm /proc/63742/comm /proc/63758/comm /proc/63759/comm /proc/63760/comm /proc/63761/comm /proc/63762/comm /proc/64/comm /proc/64082/comm /proc/64105/comm /proc/64204/comm /proc/64263/comm /proc/64299/comm /proc/64317/comm /proc/64396/comm /proc/64681/comm /proc/647/comm /proc/64725/comm /proc/64770/comm /proc/64842/comm /proc/64886/comm /proc/651/comm /proc/65159/comm /proc/65213/comm /proc/65315/comm /proc/65337/comm /proc/65374/comm /proc/65406/comm /proc/65593/comm /proc/65612/comm /proc/65721/comm /proc/65751/comm /proc/66/comm /proc/66113/comm /proc/66130/comm /proc/66136/comm /proc/66189/comm /proc/66190/comm /proc/66200/comm /proc/66318/comm /proc/67/comm /proc/67916/comm /proc/67943/comm /proc/68/comm /proc/69/comm /proc/70/comm /proc/705/comm /proc/708/comm /proc/709/comm /proc/71222/comm /proc/71309/comm /proc/71310/comm /proc/71311/comm /proc/71312/comm /proc/71313/comm /proc/71314/comm /proc/71317/comm /proc/71320/comm /proc/71321/comm /proc/71322/comm /proc/71323/comm /proc/71324/comm /proc/71325/comm /proc/71326/comm /proc/71327/comm /proc/72/comm /proc/723/comm /proc/73/comm /proc/74/comm /proc/75/comm /proc/76/comm /proc/77280/comm /proc/77303/comm /proc/77393/comm /proc/77410/comm /proc/77416/comm /proc/77490/comm /proc/77491/comm /proc/77501/comm /proc/77683/comm /proc/78/comm /proc/78746/comm /proc/78770/comm /proc/79/comm /proc/8/comm /proc/80/comm /proc/80043/comm /proc/81/comm /proc/81593/comm /proc/82/comm /proc/83586/comm /proc/83645/comm /proc/84/comm /proc/84027/comm /proc/84041/comm /proc/84794/comm /proc/84818/comm /proc/85/comm /proc/85633/comm /proc/86/comm /proc/868/comm /proc/87/comm /proc/88/comm /proc/90/comm /proc/90764/comm /proc/90911/comm /proc/90934/comm /proc/91/comm /proc/91269/comm /proc/91286/comm /proc/91292/comm /proc/91362/comm /proc/91363/comm /proc/91373/comm /proc/91643/comm /proc/92/comm /proc/9215/comm /proc/9232/comm /proc/9248/comm /proc/93/comm /proc/9330/comm /proc/94/comm /proc/94828/comm /proc/94857/comm /proc/94898/comm /proc/94933/comm /proc/95271/comm /proc/95394/comm /proc/96/comm /proc/96109/comm /proc/97/comm /proc/97209/comm /proc/98/comm /proc/99/comm /proc/99060/comm /proc/9947/comm /proc/self/comm /proc/thread-self/comm
+ '[' -n '' ']'
+ rm -f /var/run/libvirtd.pid
+ [[ -c /dev/kvm ]]
+ chmod 660 /dev/kvm
+ chown root:kvm /dev/kvm
+ CGROUPS=
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/blkio ']'
+ grep -w blkio /sys/fs/cgroup/cgroup.controllers
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/cpu ']'
+ grep -w cpu /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=cpu,
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/devices ']'
+ grep -w devices /sys/fs/cgroup/cgroup.controllers
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/freezer ']'
+ grep -w freezer /sys/fs/cgroup/cgroup.controllers
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/hugetlb ']'
+ grep -w hugetlb /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=hugetlb,
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/memory ']'
+ grep -w memory /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=memory,
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/net_cls ']'
+ grep -w net_cls /sys/fs/cgroup/cgroup.controllers
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/perf_event ']'
+ grep -w perf_event /sys/fs/cgroup/cgroup.controllers
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/rdma ']'
+ grep -w rdma /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=rdma,
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/misc ']'
+ grep -w misc /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=misc,
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/pids ']'
+ grep -w pids /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=pids,
+ cgcreate -g cpu,hugetlb,memory,rdma,misc,pids:/osh-libvirt
++ cat /proc/meminfo
++ grep HugePages_Total
++ tr -cd '[:digit:]'
+ hp_count=0
+ '[' 00 -gt 0 ']'
+ '[' -n 457eb676-33da-42ec-9a8c-9293d545c337 ']'
+ cgexec -g cpu,hugetlb,memory,rdma,misc,pids:/osh-libvirt systemd-run --scope --slice=system libvirtd --listen
++ mktemp --suffix .xml
+ tmpsecret=/tmp/tmp.WUDy4oRoEb.xml
+ '[' -n '' ']'
+ trap cleanup EXIT
+ TIMEOUT=60
+ [[ ! -f /var/run/libvirtd.pid ]]
+ [[ 60 -gt 0 ]]
+ let TIMEOUT-=1
+ sleep 1
Running as unit: run-rc7ecd16b23ba488086a3b0da238befbd.scope; invocation ID: a3a98086bc1e4a8a9af3cec49f02f202
+ [[ ! -f /var/run/libvirtd.pid ]]
+ TIMEOUT=10
+ [[ ! -e /var/run/libvirt/libvirt-sock ]]
+ '[' -z '' ']'
+ '[' -n cinder ']'
++ awk '/key/{print $3}' /etc/ceph/ceph.client.cinder.keyring
+ CEPH_CINDER_KEYRING=AQCQnQxqyTWOLhAAU8i3YJy/RyFNi41di2Ky5w==
+ '[' -n cinder ']'
+ create_virsh_libvirt_secret cinder 457eb676-33da-42ec-9a8c-9293d545c337 AQCQnQxqyTWOLhAAU8i3YJy/RyFNi41di2Ky5w==
+ sec_user=cinder
+ sec_uuid=457eb676-33da-42ec-9a8c-9293d545c337
+ sec_ceph_keyring=AQCQnQxqyTWOLhAAU8i3YJy/RyFNi41di2Ky5w==
+ cat
+ virsh secret-define --file /tmp/tmp.WUDy4oRoEb.xml
Secret 457eb676-33da-42ec-9a8c-9293d545c337 created

+ virsh secret-set-value --secret 457eb676-33da-42ec-9a8c-9293d545c337 --base64 AQCQnQxqyTWOLhAAU8i3YJy/RyFNi41di2Ky5w==
error: Passing secret value as command-line argument is insecure!
Secret value set

+ '[' -n '' ']'
+ '[' -n '' ']'
+ cleanup
+ rm -f /tmp/tmp.WUDy4oRoEb.xml
+ '[' -n '' ']'
++ cat /var/run/libvirtd.pid
+ LIBVIRTD_PID=190100
+ kill 190100
+ tail --pid=190100 -f /dev/null
+ cgexec -g cpu,hugetlb,memory,rdma,misc,pids:/osh-libvirt systemd-run --scope --slice=system libvirtd --listen
Running as unit: run-r0a892808bb864008ae2dfd490e7abc16.scope; invocation ID: aa17e57c516e4ed0b4ec3dd6671e45aa