+ wait_for_file /etc/pki/CA/cacert.pem
+ local file=/etc/pki/CA/cacert.pem
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ sleep 1
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ sleep 1
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ sleep 1
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ sleep 1
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ sleep 1
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ wait_for_file /etc/pki/qemu/ca-cert.pem
+ local file=/etc/pki/qemu/ca-cert.pem
+ '[' '!' -f /etc/pki/qemu/ca-cert.pem ']'
+ wait_for_file /etc/pki/libvirt/servercert.pem
+ local file=/etc/pki/libvirt/servercert.pem
+ '[' '!' -f /etc/pki/libvirt/servercert.pem ']'
+ wait_for_file /etc/pki/libvirt/clientcert.pem
+ local file=/etc/pki/libvirt/clientcert.pem
+ '[' '!' -f /etc/pki/libvirt/clientcert.pem ']'
+ wait_for_file /etc/pki/qemu/server-cert.pem
+ local file=/etc/pki/qemu/server-cert.pem
+ '[' '!' -f /etc/pki/qemu/server-cert.pem ']'
+ wait_for_file /etc/pki/qemu/client-cert.pem
+ local file=/etc/pki/qemu/client-cert.pem
+ '[' '!' -f /etc/pki/qemu/client-cert.pem ']'
+ wait_for_file /etc/pki/libvirt/private/serverkey.pem
+ local file=/etc/pki/libvirt/private/serverkey.pem
+ '[' '!' -f /etc/pki/libvirt/private/serverkey.pem ']'
+ wait_for_file /etc/pki/libvirt/private/clientkey.pem
+ local file=/etc/pki/libvirt/private/clientkey.pem
+ '[' '!' -f /etc/pki/libvirt/private/clientkey.pem ']'
+ wait_for_file /etc/pki/qemu/server-key.pem
+ local file=/etc/pki/qemu/server-key.pem
+ '[' '!' -f /etc/pki/qemu/server-key.pem ']'
+ wait_for_file /etc/pki/qemu/client-key.pem
+ local file=/etc/pki/qemu/client-key.pem
+ '[' '!' -f /etc/pki/qemu/client-key.pem ']'
+ wait_for_file /etc/pki/libvirt-vnc/ca-cert.pem
+ local file=/etc/pki/libvirt-vnc/ca-cert.pem
+ '[' '!' -f /etc/pki/libvirt-vnc/ca-cert.pem ']'
+ wait_for_file /etc/pki/libvirt-vnc/server-cert.pem
+ local file=/etc/pki/libvirt-vnc/server-cert.pem
+ '[' '!' -f /etc/pki/libvirt-vnc/server-cert.pem ']'
+ wait_for_file /etc/pki/libvirt-vnc/server-key.pem
+ local file=/etc/pki/libvirt-vnc/server-key.pem
+ '[' '!' -f /etc/pki/libvirt-vnc/server-key.pem ']'
++ grep -w libvirtd
++ cat /proc/1/comm /proc/10/comm /proc/100/comm /proc/101212/comm /proc/102/comm /proc/103/comm /proc/103033/comm /proc/10320/comm /proc/104/comm /proc/105/comm /proc/106/comm /proc/108/comm /proc/10826/comm /proc/10827/comm /proc/109/comm /proc/109202/comm /proc/109226/comm /proc/109578/comm /proc/1096/comm /proc/109600/comm /proc/109601/comm /proc/11/comm /proc/110/comm /proc/110664/comm /proc/110690/comm /proc/110742/comm /proc/110772/comm /proc/110960/comm /proc/110961/comm /proc/110962/comm /proc/111/comm /proc/111124/comm /proc/111341/comm /proc/111405/comm /proc/111407/comm /proc/112/comm /proc/112086/comm /proc/112416/comm /proc/112755/comm /proc/112780/comm /proc/112895/comm /proc/112911/comm /proc/112917/comm /proc/113/comm /proc/113046/comm /proc/113047/comm /proc/113057/comm /proc/113147/comm /proc/114/comm /proc/114576/comm /proc/114600/comm /proc/114620/comm /proc/114643/comm /proc/115/comm /proc/116/comm /proc/116592/comm /proc/116593/comm /proc/117/comm /proc/117658/comm /proc/118303/comm /proc/119437/comm /proc/12/comm /proc/120811/comm /proc/120820/comm /proc/121982/comm /proc/12214/comm /proc/12244/comm /proc/122771/comm /proc/12280/comm /proc/12326/comm /proc/12338/comm /proc/124407/comm /proc/124421/comm /proc/124422/comm /proc/12576/comm /proc/125819/comm /proc/12607/comm /proc/12663/comm /proc/12688/comm /proc/12707/comm /proc/127600/comm /proc/127629/comm /proc/127633/comm /proc/127668/comm /proc/128220/comm /proc/128704/comm /proc/128995/comm /proc/129529/comm /proc/129583/comm /proc/13/comm /proc/130103/comm /proc/130127/comm /proc/131398/comm /proc/131426/comm /proc/131461/comm /proc/132719/comm /proc/132722/comm /proc/14/comm /proc/1427/comm /proc/145894/comm /proc/145909/comm /proc/146987/comm /proc/147114/comm /proc/147145/comm /proc/147146/comm /proc/148608/comm /proc/148609/comm /proc/15/comm /proc/1532/comm /proc/1533/comm /proc/1534/comm /proc/1535/comm /proc/1539/comm /proc/155854/comm /proc/155855/comm /proc/155857/comm /proc/155858/comm /proc/155987/comm /proc/156121/comm /proc/156725/comm /proc/156749/comm /proc/156908/comm /proc/157328/comm /proc/157374/comm /proc/157388/comm /proc/157395/comm /proc/157396/comm /proc/157397/comm /proc/157398/comm /proc/158049/comm /proc/158078/comm /proc/158998/comm /proc/159001/comm /proc/159006/comm /proc/159203/comm /proc/159240/comm /proc/159257/comm /proc/159282/comm /proc/159399/comm /proc/159416/comm /proc/159460/comm /proc/159477/comm /proc/159511/comm /proc/159531/comm /proc/159696/comm /proc/159722/comm /proc/159777/comm /proc/159872/comm /proc/159994/comm /proc/16/comm /proc/160042/comm /proc/160276/comm /proc/160281/comm /proc/1606/comm /proc/160800/comm /proc/160805/comm /proc/1610/comm /proc/161011/comm /proc/161037/comm /proc/161137/comm /proc/161158/comm /proc/161174/comm /proc/161180/comm /proc/161243/comm /proc/161244/comm /proc/161254/comm /proc/161427/comm /proc/1619/comm /proc/163113/comm /proc/163144/comm /proc/163188/comm /proc/163278/comm /proc/163307/comm /proc/163334/comm /proc/163380/comm /proc/163397/comm /proc/163432/comm /proc/163516/comm /proc/163586/comm /proc/163637/comm /proc/163661/comm /proc/163755/comm /proc/164186/comm /proc/164216/comm /proc/164742/comm /proc/16509/comm /proc/166/comm /proc/167/comm /proc/168/comm /proc/168814/comm /proc/169/comm /proc/169086/comm /proc/169676/comm /proc/170/comm /proc/171/comm /proc/171066/comm /proc/171069/comm /proc/172/comm /proc/172200/comm /proc/173/comm /proc/173922/comm /proc/174/comm /proc/174306/comm /proc/174343/comm /proc/174344/comm /proc/174535/comm /proc/174552/comm /proc/174553/comm /proc/175/comm /proc/175379/comm /proc/175467/comm /proc/175472/comm /proc/175605/comm /proc/175606/comm /proc/175611/comm /proc/175614/comm /proc/175947/comm /proc/175949/comm /proc/175961/comm /proc/175963/comm /proc/176/comm /proc/176464/comm /proc/176696/comm /proc/176720/comm /proc/176813/comm /proc/176830/comm /proc/176836/comm /proc/177023/comm /proc/177024/comm /proc/177037/comm /proc/177158/comm /proc/178/comm /proc/178515/comm /proc/178569/comm /proc/178599/comm /proc/178625/comm /proc/178629/comm /proc/178707/comm /proc/178778/comm /proc/178807/comm /proc/178884/comm /proc/178899/comm /proc/178923/comm /proc/178954/comm /proc/178992/comm /proc/179/comm /proc/179521/comm /proc/179537/comm /proc/18/comm /proc/181/comm /proc/182550/comm /proc/182583/comm /proc/183/comm /proc/183237/comm /proc/183246/comm /proc/183248/comm /proc/184/comm /proc/184450/comm /proc/184451/comm /proc/184536/comm /proc/184843/comm /proc/185/comm /proc/185177/comm /proc/185201/comm /proc/185713/comm /proc/18573/comm /proc/185772/comm /proc/185851/comm /proc/185878/comm /proc/18593/comm /proc/185954/comm /proc/185965/comm /proc/186/comm /proc/18614/comm /proc/186282/comm /proc/186287/comm /proc/18642/comm /proc/18659/comm /proc/187/comm /proc/188/comm /proc/188164/comm /proc/188165/comm /proc/188166/comm /proc/188377/comm /proc/188668/comm /proc/188707/comm /proc/188708/comm /proc/188721/comm /proc/188735/comm /proc/188736/comm /proc/189/comm /proc/189885/comm /proc/189887/comm /proc/19/comm /proc/190/comm /proc/190038/comm /proc/190174/comm /proc/190462/comm /proc/190512/comm /proc/190537/comm /proc/190547/comm /proc/190780/comm /proc/190813/comm /proc/190833/comm /proc/190834/comm /proc/190835/comm /proc/190836/comm /proc/191/comm /proc/192/comm /proc/193/comm /proc/199/comm /proc/2/comm /proc/20/comm /proc/205/comm /proc/21/comm /proc/212/comm /proc/21599/comm /proc/21664/comm /proc/21669/comm /proc/21685/comm /proc/218/comm /proc/22/comm /proc/221/comm /proc/226/comm /proc/24/comm /proc/248/comm /proc/24959/comm /proc/25/comm /proc/25220/comm /proc/25237/comm /proc/25262/comm /proc/25274/comm /proc/26/comm /proc/269/comm /proc/27/comm /proc/28/comm /proc/288/comm /proc/29445/comm /proc/296/comm /proc/29725/comm /proc/29742/comm /proc/29767/comm /proc/29779/comm /proc/298/comm /proc/3/comm /proc/30/comm /proc/31/comm /proc/317/comm /proc/318/comm /proc/32/comm /proc/329/comm /proc/33/comm /proc/34/comm /proc/34264/comm /proc/34535/comm /proc/34554/comm /proc/34580/comm /proc/34593/comm /proc/354/comm /proc/35554/comm /proc/35555/comm /proc/357/comm /proc/358/comm /proc/36/comm /proc/365/comm /proc/37/comm /proc/37782/comm /proc/37784/comm /proc/38/comm /proc/383/comm /proc/385/comm /proc/39/comm /proc/395/comm /proc/4/comm /proc/40/comm /proc/400/comm /proc/40130/comm /proc/40143/comm /proc/40174/comm /proc/40195/comm /proc/40197/comm /proc/40218/comm /proc/40250/comm /proc/40282/comm /proc/40284/comm /proc/40304/comm /proc/40361/comm /proc/40380/comm /proc/40409/comm /proc/40412/comm /proc/40518/comm /proc/40581/comm /proc/406/comm /proc/40748/comm /proc/40774/comm /proc/408/comm /proc/40801/comm /proc/41488/comm /proc/41490/comm /proc/41535/comm /proc/41537/comm /proc/41781/comm /proc/41990/comm /proc/42/comm /proc/42405/comm /proc/42824/comm /proc/42849/comm /proc/42874/comm /proc/43/comm /proc/43272/comm /proc/43302/comm /proc/43311/comm /proc/43339/comm /proc/43372/comm /proc/43390/comm /proc/43737/comm /proc/43761/comm /proc/43927/comm /proc/44/comm /proc/44248/comm /proc/44271/comm /proc/44286/comm /proc/44312/comm /proc/44327/comm /proc/44358/comm /proc/44476/comm /proc/44523/comm /proc/44569/comm /proc/45/comm /proc/46/comm /proc/460/comm /proc/46690/comm /proc/46714/comm /proc/46770/comm /proc/46799/comm /proc/46985/comm /proc/46997/comm /proc/47031/comm /proc/47055/comm /proc/47661/comm /proc/47686/comm /proc/47762/comm /proc/47786/comm /proc/47831/comm /proc/47962/comm /proc/48/comm /proc/48146/comm /proc/48169/comm /proc/48285/comm /proc/48448/comm /proc/48473/comm /proc/48869/comm /proc/48894/comm /proc/48990/comm /proc/49/comm /proc/49039/comm /proc/49096/comm /proc/49193/comm /proc/49218/comm /proc/49304/comm /proc/5/comm /proc/50/comm /proc/50150/comm /proc/51/comm /proc/51129/comm /proc/51153/comm /proc/51229/comm /proc/51252/comm /proc/51357/comm /proc/51461/comm /proc/51655/comm /proc/51712/comm /proc/52/comm /proc/528/comm /proc/54/comm /proc/55/comm /proc/55452/comm /proc/55476/comm /proc/56/comm /proc/56137/comm /proc/56166/comm /proc/56197/comm /proc/56219/comm /proc/56245/comm /proc/56260/comm /proc/56385/comm /proc/56409/comm /proc/56491/comm /proc/56532/comm /proc/56566/comm /proc/56637/comm /proc/57/comm /proc/58/comm /proc/6/comm /proc/60/comm /proc/60338/comm /proc/60370/comm /proc/60440/comm /proc/60466/comm /proc/60492/comm /proc/60517/comm /proc/60531/comm /proc/60560/comm /proc/60820/comm /proc/61/comm /proc/61307/comm /proc/61333/comm /proc/61510/comm /proc/61701/comm /proc/61702/comm /proc/61708/comm /proc/61709/comm /proc/61862/comm /proc/61893/comm /proc/61977/comm /proc/62/comm /proc/620/comm /proc/62000/comm /proc/62019/comm /proc/62378/comm /proc/624/comm /proc/62419/comm /proc/62447/comm /proc/62471/comm /proc/62486/comm /proc/62509/comm /proc/626/comm /proc/62907/comm /proc/62931/comm /proc/63/comm /proc/63049/comm /proc/63074/comm /proc/632/comm /proc/633/comm /proc/63396/comm /proc/63774/comm /proc/63807/comm /proc/64/comm /proc/64034/comm /proc/64057/comm /proc/64261/comm /proc/64335/comm /proc/64675/comm /proc/64692/comm /proc/64693/comm /proc/64694/comm /proc/64695/comm /proc/64696/comm /proc/64839/comm /proc/64912/comm /proc/650/comm /proc/65081/comm /proc/651/comm /proc/65184/comm /proc/65217/comm /proc/65232/comm /proc/65374/comm /proc/656/comm /proc/65857/comm /proc/65899/comm /proc/65944/comm /proc/66/comm /proc/66019/comm /proc/66060/comm /proc/66371/comm /proc/66563/comm /proc/66587/comm /proc/66612/comm /proc/66648/comm /proc/66710/comm /proc/66743/comm /proc/66773/comm /proc/66791/comm /proc/67/comm /proc/67182/comm /proc/67200/comm /proc/67207/comm /proc/67264/comm /proc/67265/comm /proc/67275/comm /proc/67466/comm /proc/68/comm /proc/68728/comm /proc/68750/comm /proc/69/comm /proc/69654/comm /proc/70/comm /proc/711/comm /proc/714/comm /proc/715/comm /proc/71632/comm /proc/72/comm /proc/72115/comm /proc/72262/comm /proc/72263/comm /proc/72264/comm /proc/72265/comm /proc/72266/comm /proc/72267/comm /proc/72270/comm /proc/72273/comm /proc/72275/comm /proc/72277/comm /proc/72278/comm /proc/72279/comm /proc/72280/comm /proc/72281/comm /proc/728/comm /proc/73/comm /proc/74/comm /proc/75/comm /proc/76/comm /proc/78/comm /proc/78058/comm /proc/78083/comm /proc/78195/comm /proc/78214/comm /proc/78220/comm /proc/78267/comm /proc/78268/comm /proc/78278/comm /proc/78496/comm /proc/79/comm /proc/79580/comm /proc/79605/comm /proc/79862/comm /proc/79863/comm /proc/8/comm /proc/80/comm /proc/80883/comm /proc/81/comm /proc/82/comm /proc/82500/comm /proc/83311/comm /proc/84/comm /proc/84892/comm /proc/84906/comm /proc/85/comm /proc/85596/comm /proc/85621/comm /proc/86/comm /proc/86521/comm /proc/87/comm /proc/873/comm /proc/88/comm /proc/88319/comm /proc/89539/comm /proc/89578/comm /proc/9/comm /proc/90/comm /proc/90826/comm /proc/90952/comm /proc/91/comm /proc/91871/comm /proc/91893/comm /proc/92/comm /proc/92036/comm /proc/92053/comm /proc/92077/comm /proc/9219/comm /proc/92230/comm /proc/92231/comm /proc/92242/comm /proc/9236/comm /proc/92374/comm /proc/9252/comm /proc/93/comm /proc/9334/comm /proc/94/comm /proc/95907/comm /proc/95931/comm /proc/95946/comm /proc/95970/comm /proc/96/comm /proc/96291/comm /proc/96341/comm /proc/97/comm /proc/97299/comm /proc/98/comm /proc/98868/comm /proc/99/comm /proc/9951/comm /proc/self/comm /proc/thread-self/comm
+ '[' -n '' ']'
+ rm -f /var/run/libvirtd.pid
+ [[ -c /dev/kvm ]]
+ chmod 660 /dev/kvm
+ chown root:kvm /dev/kvm
+ CGROUPS=
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/blkio ']'
+ grep -w blkio /sys/fs/cgroup/cgroup.controllers
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/cpu ']'
+ grep -w cpu /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=cpu,
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/devices ']'
+ grep -w devices /sys/fs/cgroup/cgroup.controllers
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/freezer ']'
+ grep -w freezer /sys/fs/cgroup/cgroup.controllers
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/hugetlb ']'
+ grep -w hugetlb /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=hugetlb,
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/memory ']'
+ grep -w memory /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=memory,
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/net_cls ']'
+ grep -w net_cls /sys/fs/cgroup/cgroup.controllers
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/perf_event ']'
+ grep -w perf_event /sys/fs/cgroup/cgroup.controllers
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/rdma ']'
+ grep -w rdma /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=rdma,
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/misc ']'
+ grep -w misc /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=misc,
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/pids ']'
+ grep -w pids /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=pids,
+ cgcreate -g cpu,hugetlb,memory,rdma,misc,pids:/osh-libvirt
++ cat /proc/meminfo
++ grep HugePages_Total
++ tr -cd '[:digit:]'
+ hp_count=0
+ '[' 00 -gt 0 ']'
+ '[' -n 457eb676-33da-42ec-9a8c-9293d545c337 ']'
+ cgexec -g cpu,hugetlb,memory,rdma,misc,pids:/osh-libvirt systemd-run --scope --slice=system libvirtd --listen
++ mktemp --suffix .xml
+ tmpsecret=/tmp/tmp.fzEidkMNWb.xml
+ '[' -n '' ']'
+ trap cleanup EXIT
+ TIMEOUT=60
+ [[ ! -f /var/run/libvirtd.pid ]]
+ [[ 60 -gt 0 ]]
+ let TIMEOUT-=1
+ sleep 1
Running as unit: run-r6e46e75af8ac4f128a975a80e1a2e184.scope; invocation ID: 54b17fe0a97c4202ade6cb6511cdfdd9
+ [[ ! -f /var/run/libvirtd.pid ]]
+ TIMEOUT=10
+ [[ ! -e /var/run/libvirt/libvirt-sock ]]
+ '[' -z '' ']'
+ '[' -n cinder ']'
++ awk '/key/{print $3}' /etc/ceph/ceph.client.cinder.keyring
+ CEPH_CINDER_KEYRING=AQCygx5qTbUNDhAAvXn0we88pKNkACRL5jfT7g==
+ '[' -n cinder ']'
+ create_virsh_libvirt_secret cinder 457eb676-33da-42ec-9a8c-9293d545c337 AQCygx5qTbUNDhAAvXn0we88pKNkACRL5jfT7g==
+ sec_user=cinder
+ sec_uuid=457eb676-33da-42ec-9a8c-9293d545c337
+ sec_ceph_keyring=AQCygx5qTbUNDhAAvXn0we88pKNkACRL5jfT7g==
+ cat
+ virsh secret-define --file /tmp/tmp.fzEidkMNWb.xml
Secret 457eb676-33da-42ec-9a8c-9293d545c337 created

+ virsh secret-set-value --secret 457eb676-33da-42ec-9a8c-9293d545c337 --base64 AQCygx5qTbUNDhAAvXn0we88pKNkACRL5jfT7g==
error: Passing secret value as command-line argument is insecure!
Secret value set

+ '[' -n '' ']'
+ '[' -n '' ']'
+ cleanup
+ rm -f /tmp/tmp.fzEidkMNWb.xml
+ '[' -n '' ']'
++ cat /var/run/libvirtd.pid
+ LIBVIRTD_PID=190856
+ kill 190856
+ tail --pid=190856 -f /dev/null
+ cgexec -g cpu,hugetlb,memory,rdma,misc,pids:/osh-libvirt systemd-run --scope --slice=system libvirtd --listen
Running as unit: run-r4e91fe5b12504cbe81d3000944394b69.scope; invocation ID: 248c00fa386a44058d33abfce5b5046f