+ wait_for_file /etc/pki/CA/cacert.pem
+ local file=/etc/pki/CA/cacert.pem
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ sleep 1
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ sleep 1
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ sleep 1
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ sleep 1
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ sleep 1
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ wait_for_file /etc/pki/qemu/ca-cert.pem
+ local file=/etc/pki/qemu/ca-cert.pem
+ '[' '!' -f /etc/pki/qemu/ca-cert.pem ']'
+ wait_for_file /etc/pki/libvirt/servercert.pem
+ local file=/etc/pki/libvirt/servercert.pem
+ '[' '!' -f /etc/pki/libvirt/servercert.pem ']'
+ wait_for_file /etc/pki/libvirt/clientcert.pem
+ local file=/etc/pki/libvirt/clientcert.pem
+ '[' '!' -f /etc/pki/libvirt/clientcert.pem ']'
+ wait_for_file /etc/pki/qemu/server-cert.pem
+ local file=/etc/pki/qemu/server-cert.pem
+ '[' '!' -f /etc/pki/qemu/server-cert.pem ']'
+ wait_for_file /etc/pki/qemu/client-cert.pem
+ local file=/etc/pki/qemu/client-cert.pem
+ '[' '!' -f /etc/pki/qemu/client-cert.pem ']'
+ wait_for_file /etc/pki/libvirt/private/serverkey.pem
+ local file=/etc/pki/libvirt/private/serverkey.pem
+ '[' '!' -f /etc/pki/libvirt/private/serverkey.pem ']'
+ wait_for_file /etc/pki/libvirt/private/clientkey.pem
+ local file=/etc/pki/libvirt/private/clientkey.pem
+ '[' '!' -f /etc/pki/libvirt/private/clientkey.pem ']'
+ wait_for_file /etc/pki/qemu/server-key.pem
+ local file=/etc/pki/qemu/server-key.pem
+ '[' '!' -f /etc/pki/qemu/server-key.pem ']'
+ wait_for_file /etc/pki/qemu/client-key.pem
+ local file=/etc/pki/qemu/client-key.pem
+ '[' '!' -f /etc/pki/qemu/client-key.pem ']'
+ wait_for_file /etc/pki/libvirt-vnc/ca-cert.pem
+ local file=/etc/pki/libvirt-vnc/ca-cert.pem
+ '[' '!' -f /etc/pki/libvirt-vnc/ca-cert.pem ']'
+ wait_for_file /etc/pki/libvirt-vnc/server-cert.pem
+ local file=/etc/pki/libvirt-vnc/server-cert.pem
+ '[' '!' -f /etc/pki/libvirt-vnc/server-cert.pem ']'
+ wait_for_file /etc/pki/libvirt-vnc/server-key.pem
+ local file=/etc/pki/libvirt-vnc/server-key.pem
+ '[' '!' -f /etc/pki/libvirt-vnc/server-key.pem ']'
++ grep -w libvirtd
++ cat /proc/1/comm /proc/10/comm /proc/100/comm /proc/101247/comm /proc/101270/comm /proc/101292/comm /proc/101318/comm /proc/101799/comm /proc/101931/comm /proc/102/comm /proc/102099/comm /proc/103/comm /proc/10321/comm /proc/104/comm /proc/105/comm /proc/105885/comm /proc/105897/comm /proc/106/comm /proc/108/comm /proc/10826/comm /proc/10827/comm /proc/109/comm /proc/109200/comm /proc/1098/comm /proc/11/comm /proc/110/comm /proc/11014/comm /proc/111/comm /proc/112/comm /proc/113/comm /proc/113515/comm /proc/113539/comm /proc/113931/comm /proc/113944/comm /proc/113945/comm /proc/114/comm /proc/115/comm /proc/115554/comm /proc/115557/comm /proc/115602/comm /proc/115605/comm /proc/115754/comm /proc/115948/comm /proc/115970/comm /proc/116/comm /proc/116017/comm /proc/116550/comm /proc/116794/comm /proc/116796/comm /proc/117/comm /proc/117471/comm /proc/118004/comm /proc/118205/comm /proc/118229/comm /proc/118321/comm /proc/118339/comm /proc/118345/comm /proc/118454/comm /proc/118456/comm /proc/118457/comm /proc/118558/comm /proc/118559/comm /proc/118569/comm /proc/118817/comm /proc/119897/comm /proc/119920/comm /proc/119941/comm /proc/119965/comm /proc/12/comm /proc/120499/comm /proc/120511/comm /proc/12222/comm /proc/12252/comm /proc/12278/comm /proc/12327/comm /proc/123284/comm /proc/12344/comm /proc/12584/comm /proc/125996/comm /proc/126007/comm /proc/126008/comm /proc/12613/comm /proc/126582/comm /proc/12660/comm /proc/12698/comm /proc/12717/comm /proc/127789/comm /proc/127847/comm /proc/13/comm /proc/14/comm /proc/140018/comm /proc/141145/comm /proc/141155/comm /proc/142412/comm /proc/142829/comm /proc/142842/comm /proc/142843/comm /proc/1429/comm /proc/142993/comm /proc/143312/comm /proc/143335/comm /proc/143357/comm /proc/143381/comm /proc/143588/comm /proc/144064/comm /proc/144142/comm /proc/144397/comm /proc/144518/comm /proc/144706/comm /proc/144880/comm /proc/146455/comm /proc/146478/comm /proc/147763/comm /proc/15/comm /proc/150064/comm /proc/150078/comm /proc/151561/comm /proc/151589/comm /proc/151590/comm /proc/153117/comm /proc/153118/comm /proc/1534/comm /proc/1535/comm /proc/1536/comm /proc/1537/comm /proc/1541/comm /proc/16/comm /proc/160372/comm /proc/160373/comm /proc/160375/comm /proc/160377/comm /proc/160495/comm /proc/1608/comm /proc/160875/comm /proc/160898/comm /proc/1612/comm /proc/1621/comm /proc/162327/comm /proc/162355/comm /proc/162723/comm /proc/163036/comm /proc/163071/comm /proc/163084/comm /proc/163116/comm /proc/163117/comm /proc/163118/comm /proc/163119/comm /proc/163279/comm /proc/163304/comm /proc/163305/comm /proc/163574/comm /proc/163626/comm /proc/163666/comm /proc/163712/comm /proc/163830/comm /proc/163848/comm /proc/163879/comm /proc/163904/comm /proc/163942/comm /proc/163955/comm /proc/164117/comm /proc/164157/comm /proc/164235/comm /proc/164256/comm /proc/164406/comm /proc/164670/comm /proc/164675/comm /proc/165/comm /proc/165231/comm /proc/165597/comm /proc/165620/comm /proc/165817/comm /proc/165843/comm /proc/165869/comm /proc/166/comm /proc/166047/comm /proc/166049/comm /proc/166050/comm /proc/166072/comm /proc/166073/comm /proc/166083/comm /proc/166302/comm /proc/167/comm /proc/167771/comm /proc/167798/comm /proc/167964/comm /proc/168/comm /proc/168264/comm /proc/168292/comm /proc/168319/comm /proc/168346/comm /proc/168413/comm /proc/168441/comm /proc/168508/comm /proc/168531/comm /proc/168660/comm /proc/168742/comm /proc/168844/comm /proc/168876/comm /proc/168920/comm /proc/168947/comm /proc/169/comm /proc/169949/comm /proc/170/comm /proc/171/comm /proc/171780/comm /proc/172/comm /proc/173/comm /proc/175/comm /proc/176/comm /proc/176130/comm /proc/176219/comm /proc/176325/comm /proc/176329/comm /proc/176731/comm /proc/177066/comm /proc/178289/comm /proc/178290/comm /proc/178665/comm /proc/179/comm /proc/18/comm /proc/180/comm /proc/180917/comm /proc/180986/comm /proc/180987/comm /proc/180994/comm /proc/181065/comm /proc/181523/comm /proc/181566/comm /proc/181567/comm /proc/181632/comm /proc/181693/comm /proc/181694/comm /proc/181699/comm /proc/181700/comm /proc/181701/comm /proc/182/comm /proc/182271/comm /proc/182272/comm /proc/182425/comm /proc/182436/comm /proc/182438/comm /proc/182553/comm /proc/182554/comm /proc/182557/comm /proc/182558/comm /proc/183/comm /proc/183420/comm /proc/183457/comm /proc/183526/comm /proc/183551/comm /proc/183735/comm /proc/183791/comm /proc/183797/comm /proc/183873/comm /proc/183875/comm /proc/183876/comm /proc/183945/comm /proc/183947/comm /proc/183957/comm /proc/184/comm /proc/184110/comm /proc/185/comm /proc/185053/comm /proc/185068/comm /proc/185069/comm /proc/185070/comm /proc/185071/comm /proc/185072/comm /proc/185073/comm /proc/185162/comm /proc/185373/comm /proc/185397/comm /proc/185422/comm /proc/185449/comm /proc/185470/comm /proc/185494/comm /proc/185632/comm /proc/185656/comm /proc/185751/comm /proc/185813/comm /proc/185933/comm /proc/186/comm /proc/186089/comm /proc/186090/comm /proc/186441/comm /proc/186475/comm /proc/186541/comm /proc/186619/comm /proc/186900/comm /proc/186924/comm /proc/187/comm /proc/187183/comm /proc/187196/comm /proc/187601/comm /proc/187624/comm /proc/188/comm /proc/188207/comm /proc/188242/comm /proc/188348/comm /proc/188379/comm /proc/188450/comm /proc/188464/comm /proc/189/comm /proc/19/comm /proc/190/comm /proc/191/comm /proc/191839/comm /proc/192/comm /proc/192816/comm /proc/193/comm /proc/193156/comm /proc/193158/comm /proc/193313/comm /proc/193420/comm /proc/193468/comm /proc/193498/comm /proc/193509/comm /proc/193693/comm /proc/193699/comm /proc/193722/comm /proc/193723/comm /proc/193724/comm /proc/2/comm /proc/20/comm /proc/201/comm /proc/20488/comm /proc/20507/comm /proc/20530/comm /proc/20558/comm /proc/20573/comm /proc/21/comm /proc/212/comm /proc/22/comm /proc/220/comm /proc/221/comm /proc/226/comm /proc/23522/comm /proc/23594/comm /proc/23595/comm /proc/23610/comm /proc/24/comm /proc/248/comm /proc/25/comm /proc/26/comm /proc/268/comm /proc/26840/comm /proc/27/comm /proc/27118/comm /proc/27134/comm /proc/27159/comm /proc/27171/comm /proc/28/comm /proc/287/comm /proc/293/comm /proc/294/comm /proc/295/comm /proc/297/comm /proc/298/comm /proc/3/comm /proc/30/comm /proc/31/comm /proc/31318/comm /proc/31597/comm /proc/31614/comm /proc/31638/comm /proc/31651/comm /proc/317/comm /proc/318/comm /proc/32/comm /proc/322/comm /proc/33/comm /proc/34/comm /proc/356/comm /proc/36/comm /proc/36155/comm /proc/363/comm /proc/36425/comm /proc/36442/comm /proc/36467/comm /proc/36479/comm /proc/37/comm /proc/374/comm /proc/38/comm /proc/382/comm /proc/39/comm /proc/392/comm /proc/395/comm /proc/39664/comm /proc/39666/comm /proc/4/comm /proc/40/comm /proc/402/comm /proc/42/comm /proc/42033/comm /proc/42063/comm /proc/42086/comm /proc/42088/comm /proc/42104/comm /proc/42119/comm /proc/42177/comm /proc/42194/comm /proc/42200/comm /proc/42213/comm /proc/42285/comm /proc/42303/comm /proc/42336/comm /proc/42350/comm /proc/42452/comm /proc/42515/comm /proc/42655/comm /proc/42678/comm /proc/42703/comm /proc/43/comm /proc/43419/comm /proc/43436/comm /proc/43465/comm /proc/43481/comm /proc/43636/comm /proc/43652/comm /proc/43911/comm /proc/44/comm /proc/44017/comm /proc/44297/comm /proc/44596/comm /proc/44774/comm /proc/44797/comm /proc/44828/comm /proc/45/comm /proc/45170/comm /proc/45195/comm /proc/45208/comm /proc/45231/comm /proc/45263/comm /proc/45292/comm /proc/453/comm /proc/45682/comm /proc/45706/comm /proc/46/comm /proc/46180/comm /proc/46207/comm /proc/46227/comm /proc/46242/comm /proc/46261/comm /proc/46315/comm /proc/46339/comm /proc/46444/comm /proc/46488/comm /proc/46530/comm /proc/48/comm /proc/48747/comm /proc/48770/comm /proc/48792/comm /proc/48816/comm /proc/49/comm /proc/49051/comm /proc/49080/comm /proc/49129/comm /proc/49191/comm /proc/49506/comm /proc/49530/comm /proc/49600/comm /proc/49624/comm /proc/49671/comm /proc/49791/comm /proc/49958/comm /proc/49983/comm /proc/5/comm /proc/50/comm /proc/50236/comm /proc/50396/comm /proc/50419/comm /proc/50830/comm /proc/50853/comm /proc/50881/comm /proc/50966/comm /proc/51/comm /proc/51097/comm /proc/51192/comm /proc/51217/comm /proc/51307/comm /proc/52/comm /proc/523/comm /proc/53191/comm /proc/53215/comm /proc/53412/comm /proc/53435/comm /proc/53469/comm /proc/53643/comm /proc/53691/comm /proc/53925/comm /proc/54/comm /proc/54094/comm /proc/55/comm /proc/56/comm /proc/57/comm /proc/58/comm /proc/58265/comm /proc/58291/comm /proc/58906/comm /proc/58932/comm /proc/58980/comm /proc/59005/comm /proc/59019/comm /proc/59051/comm /proc/59058/comm /proc/59214/comm /proc/59240/comm /proc/59326/comm /proc/59362/comm /proc/59395/comm /proc/59511/comm /proc/6/comm /proc/60/comm /proc/61/comm /proc/615/comm /proc/618/comm /proc/62/comm /proc/621/comm /proc/624/comm /proc/625/comm /proc/63/comm /proc/63711/comm /proc/63750/comm /proc/63869/comm /proc/63889/comm /proc/63921/comm /proc/63922/comm /proc/63954/comm /proc/63972/comm /proc/64/comm /proc/64438/comm /proc/646/comm /proc/64668/comm /proc/64693/comm /proc/64718/comm /proc/64818/comm /proc/64819/comm /proc/64953/comm /proc/64954/comm /proc/650/comm /proc/65397/comm /proc/65558/comm /proc/65820/comm /proc/65847/comm /proc/65867/comm /proc/65891/comm /proc/66/comm /proc/66029/comm /proc/66056/comm /proc/66351/comm /proc/66385/comm /proc/66411/comm /proc/66442/comm /proc/66458/comm /proc/66501/comm /proc/66706/comm /proc/66908/comm /proc/66930/comm /proc/67/comm /proc/67071/comm /proc/67095/comm /proc/67113/comm /proc/67135/comm /proc/67136/comm /proc/67137/comm /proc/67138/comm /proc/67139/comm /proc/67971/comm /proc/67997/comm /proc/68/comm /proc/68034/comm /proc/68341/comm /proc/68542/comm /proc/68570/comm /proc/68653/comm /proc/68791/comm /proc/68884/comm /proc/68961/comm /proc/68994/comm /proc/69/comm /proc/69244/comm /proc/69602/comm /proc/69747/comm /proc/69783/comm /proc/69812/comm /proc/70/comm /proc/70083/comm /proc/70107/comm /proc/70137/comm /proc/70183/comm /proc/70238/comm /proc/70348/comm /proc/70387/comm /proc/70415/comm /proc/705/comm /proc/708/comm /proc/709/comm /proc/71025/comm /proc/71052/comm /proc/71058/comm /proc/71105/comm /proc/71107/comm /proc/71108/comm /proc/71119/comm /proc/71120/comm /proc/71130/comm /proc/71243/comm /proc/71287/comm /proc/71394/comm /proc/72/comm /proc/723/comm /proc/72802/comm /proc/72827/comm /proc/73/comm /proc/74/comm /proc/75/comm /proc/75218/comm /proc/76/comm /proc/76317/comm /proc/76361/comm /proc/76362/comm /proc/76363/comm /proc/76364/comm /proc/76365/comm /proc/76366/comm /proc/76373/comm /proc/76374/comm /proc/76375/comm /proc/76376/comm /proc/76377/comm /proc/76378/comm /proc/76379/comm /proc/76380/comm /proc/78/comm /proc/79/comm /proc/79403/comm /proc/8/comm /proc/80/comm /proc/81/comm /proc/81876/comm /proc/81899/comm /proc/81988/comm /proc/82/comm /proc/82005/comm /proc/82011/comm /proc/82091/comm /proc/82093/comm /proc/82094/comm /proc/82182/comm /proc/82183/comm /proc/82193/comm /proc/82285/comm /proc/83365/comm /proc/83390/comm /proc/84/comm /proc/85/comm /proc/85223/comm /proc/86/comm /proc/868/comm /proc/87/comm /proc/87576/comm /proc/88/comm /proc/881/comm /proc/88942/comm /proc/88954/comm /proc/89589/comm /proc/89612/comm /proc/90/comm /proc/90810/comm /proc/91/comm /proc/92/comm /proc/9218/comm /proc/9235/comm /proc/9251/comm /proc/92855/comm /proc/92856/comm /proc/93/comm /proc/9333/comm /proc/94/comm /proc/96/comm /proc/96031/comm /proc/96063/comm /proc/96184/comm /proc/96201/comm /proc/96207/comm /proc/96323/comm /proc/96325/comm /proc/96326/comm /proc/96396/comm /proc/96397/comm /proc/96407/comm /proc/96711/comm /proc/97/comm /proc/98/comm /proc/99/comm /proc/9949/comm /proc/self/comm /proc/thread-self/comm
+ '[' -n '' ']'
+ rm -f /var/run/libvirtd.pid
+ [[ -c /dev/kvm ]]
+ chmod 660 /dev/kvm
+ chown root:kvm /dev/kvm
+ CGROUPS=
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/blkio ']'
+ grep -w blkio /sys/fs/cgroup/cgroup.controllers
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/cpu ']'
+ grep -w cpu /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=cpu,
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/devices ']'
+ grep -w devices /sys/fs/cgroup/cgroup.controllers
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/freezer ']'
+ grep -w freezer /sys/fs/cgroup/cgroup.controllers
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/hugetlb ']'
+ grep -w hugetlb /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=hugetlb,
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/memory ']'
+ grep -w memory /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=memory,
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/net_cls ']'
+ grep -w net_cls /sys/fs/cgroup/cgroup.controllers
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/perf_event ']'
+ grep -w perf_event /sys/fs/cgroup/cgroup.controllers
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/rdma ']'
+ grep -w rdma /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=rdma,
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/misc ']'
+ grep -w misc /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=misc,
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/pids ']'
+ grep -w pids /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=pids,
+ cgcreate -g cpu,hugetlb,memory,rdma,misc,pids:/osh-libvirt
++ cat /proc/meminfo
++ grep HugePages_Total
++ tr -cd '[:digit:]'
+ hp_count=0
+ '[' 00 -gt 0 ']'
+ '[' -n 457eb676-33da-42ec-9a8c-9293d545c337 ']'
+ cgexec -g cpu,hugetlb,memory,rdma,misc,pids:/osh-libvirt systemd-run --scope --slice=system libvirtd --listen
++ mktemp --suffix .xml
+ tmpsecret=/tmp/tmp.5Q3X21UdG4.xml
+ '[' -n '' ']'
+ trap cleanup EXIT
+ TIMEOUT=60
+ [[ ! -f /var/run/libvirtd.pid ]]
+ [[ 60 -gt 0 ]]
+ let TIMEOUT-=1
+ sleep 1
Running scope as unit: run-r2013f6a7d7b84d88ba50c8c1107352d0.scope
+ [[ ! -f /var/run/libvirtd.pid ]]
+ TIMEOUT=10
+ [[ ! -e /var/run/libvirt/libvirt-sock ]]
+ '[' -z '' ']'
+ '[' -n cinder ']'
++ awk '/key/{print $3}' /etc/ceph/ceph.client.cinder.keyring
+ CEPH_CINDER_KEYRING=AQCVZQ9qLfwOMRAA87qVa75q7QDHTHfNikUY+A==
+ '[' -n cinder ']'
+ create_virsh_libvirt_secret cinder 457eb676-33da-42ec-9a8c-9293d545c337 AQCVZQ9qLfwOMRAA87qVa75q7QDHTHfNikUY+A==
+ sec_user=cinder
+ sec_uuid=457eb676-33da-42ec-9a8c-9293d545c337
+ sec_ceph_keyring=AQCVZQ9qLfwOMRAA87qVa75q7QDHTHfNikUY+A==
+ cat
+ virsh secret-define --file /tmp/tmp.5Q3X21UdG4.xml
Secret 457eb676-33da-42ec-9a8c-9293d545c337 created

+ virsh secret-set-value --secret 457eb676-33da-42ec-9a8c-9293d545c337 --base64 AQCVZQ9qLfwOMRAA87qVa75q7QDHTHfNikUY+A==
error: Passing secret value as command-line argument is insecure!
Secret value set

+ '[' -n '' ']'
+ cleanup
+ rm -f /tmp/tmp.5Q3X21UdG4.xml
+ '[' -n '' ']'
++ cat /var/run/libvirtd.pid
+ LIBVIRTD_PID=193744
+ kill 193744
+ tail --pid=193744 -f /dev/null
+ cgexec -g cpu,hugetlb,memory,rdma,misc,pids:/osh-libvirt systemd-run --scope --slice=system libvirtd --listen
Running scope as unit: run-r024015298b454ad2814bcd53ea1011c2.scope