+ wait_for_file /etc/pki/CA/cacert.pem
+ local file=/etc/pki/CA/cacert.pem
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ sleep 1
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ sleep 1
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ sleep 1
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ sleep 1
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ sleep 1
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ wait_for_file /etc/pki/qemu/ca-cert.pem
+ local file=/etc/pki/qemu/ca-cert.pem
+ '[' '!' -f /etc/pki/qemu/ca-cert.pem ']'
+ wait_for_file /etc/pki/libvirt/servercert.pem
+ local file=/etc/pki/libvirt/servercert.pem
+ '[' '!' -f /etc/pki/libvirt/servercert.pem ']'
+ wait_for_file /etc/pki/libvirt/clientcert.pem
+ local file=/etc/pki/libvirt/clientcert.pem
+ '[' '!' -f /etc/pki/libvirt/clientcert.pem ']'
+ wait_for_file /etc/pki/qemu/server-cert.pem
+ local file=/etc/pki/qemu/server-cert.pem
+ '[' '!' -f /etc/pki/qemu/server-cert.pem ']'
+ wait_for_file /etc/pki/qemu/client-cert.pem
+ local file=/etc/pki/qemu/client-cert.pem
+ '[' '!' -f /etc/pki/qemu/client-cert.pem ']'
+ wait_for_file /etc/pki/libvirt/private/serverkey.pem
+ local file=/etc/pki/libvirt/private/serverkey.pem
+ '[' '!' -f /etc/pki/libvirt/private/serverkey.pem ']'
+ wait_for_file /etc/pki/libvirt/private/clientkey.pem
+ local file=/etc/pki/libvirt/private/clientkey.pem
+ '[' '!' -f /etc/pki/libvirt/private/clientkey.pem ']'
+ wait_for_file /etc/pki/qemu/server-key.pem
+ local file=/etc/pki/qemu/server-key.pem
+ '[' '!' -f /etc/pki/qemu/server-key.pem ']'
+ wait_for_file /etc/pki/qemu/client-key.pem
+ local file=/etc/pki/qemu/client-key.pem
+ '[' '!' -f /etc/pki/qemu/client-key.pem ']'
+ wait_for_file /etc/pki/libvirt-vnc/ca-cert.pem
+ local file=/etc/pki/libvirt-vnc/ca-cert.pem
+ '[' '!' -f /etc/pki/libvirt-vnc/ca-cert.pem ']'
+ wait_for_file /etc/pki/libvirt-vnc/server-cert.pem
+ local file=/etc/pki/libvirt-vnc/server-cert.pem
+ '[' '!' -f /etc/pki/libvirt-vnc/server-cert.pem ']'
+ wait_for_file /etc/pki/libvirt-vnc/server-key.pem
+ local file=/etc/pki/libvirt-vnc/server-key.pem
+ '[' '!' -f /etc/pki/libvirt-vnc/server-key.pem ']'
++ grep -w libvirtd
++ cat /proc/1/comm /proc/10/comm /proc/100/comm /proc/102/comm /proc/102095/comm /proc/103/comm /proc/10345/comm /proc/104/comm /proc/104529/comm /proc/104555/comm /proc/105/comm /proc/105144/comm /proc/105157/comm /proc/105158/comm /proc/106/comm /proc/106282/comm /proc/106305/comm /proc/106326/comm /proc/106350/comm /proc/106495/comm /proc/106617/comm /proc/106963/comm /proc/106965/comm /proc/107537/comm /proc/107931/comm /proc/108/comm /proc/108085/comm /proc/108292/comm /proc/108317/comm /proc/108430/comm /proc/108446/comm /proc/108452/comm /proc/108499/comm /proc/108501/comm /proc/108502/comm /proc/108538/comm /proc/108539/comm /proc/108549/comm /proc/10857/comm /proc/10858/comm /proc/108692/comm /proc/109/comm /proc/109994/comm /proc/11/comm /proc/110/comm /proc/110023/comm /proc/110127/comm /proc/110153/comm /proc/1105/comm /proc/110521/comm /proc/111/comm /proc/112/comm /proc/112024/comm /proc/112705/comm /proc/113/comm /proc/113762/comm /proc/114/comm /proc/115/comm /proc/115092/comm /proc/116/comm /proc/116260/comm /proc/116267/comm /proc/117/comm /proc/117181/comm /proc/117201/comm /proc/117276/comm /proc/117292/comm /proc/118229/comm /proc/119351/comm /proc/119875/comm /proc/119888/comm /proc/119889/comm /proc/12/comm /proc/121380/comm /proc/12245/comm /proc/12275/comm /proc/12312/comm /proc/123120/comm /proc/123143/comm /proc/123158/comm /proc/123181/comm /proc/123340/comm /proc/12354/comm /proc/12367/comm /proc/123792/comm /proc/124244/comm /proc/124324/comm /proc/124405/comm /proc/125056/comm /proc/125699/comm /proc/125723/comm /proc/12603/comm /proc/12635/comm /proc/12690/comm /proc/126946/comm /proc/126949/comm /proc/126950/comm /proc/12715/comm /proc/127155/comm /proc/12735/comm /proc/128165/comm /proc/13/comm /proc/130464/comm /proc/130922/comm /proc/130950/comm /proc/130951/comm /proc/132026/comm /proc/132466/comm /proc/132467/comm /proc/139618/comm /proc/139619/comm /proc/139621/comm /proc/139622/comm /proc/139808/comm /proc/14/comm /proc/140333/comm /proc/140358/comm /proc/140763/comm /proc/140797/comm /proc/140811/comm /proc/140843/comm /proc/140844/comm /proc/140845/comm /proc/140846/comm /proc/141910/comm /proc/141939/comm /proc/142319/comm /proc/142343/comm /proc/142521/comm /proc/142996/comm /proc/143001/comm /proc/143148/comm /proc/143171/comm /proc/143232/comm /proc/143253/comm /proc/143271/comm /proc/143277/comm /proc/143335/comm /proc/143337/comm /proc/143338/comm /proc/143419/comm /proc/143420/comm /proc/143430/comm /proc/143625/comm /proc/1440/comm /proc/145100/comm /proc/145163/comm /proc/145305/comm /proc/145455/comm /proc/145506/comm /proc/145534/comm /proc/145565/comm /proc/145580/comm /proc/145608/comm /proc/145630/comm /proc/145673/comm /proc/145761/comm /proc/146079/comm /proc/146106/comm /proc/146165/comm /proc/146188/comm /proc/146497/comm /proc/147033/comm /proc/15/comm /proc/1545/comm /proc/1546/comm /proc/1547/comm /proc/1548/comm /proc/1552/comm /proc/16/comm /proc/1619/comm /proc/1623/comm /proc/1632/comm /proc/164036/comm /proc/164422/comm /proc/164694/comm /proc/164866/comm /proc/16548/comm /proc/166/comm /proc/166047/comm /proc/167/comm /proc/167150/comm /proc/168/comm /proc/168732/comm /proc/169/comm /proc/169279/comm /proc/169308/comm /proc/169309/comm /proc/169444/comm /proc/169467/comm /proc/169468/comm /proc/170/comm /proc/170304/comm /proc/170312/comm /proc/170362/comm /proc/170501/comm /proc/170502/comm /proc/170644/comm /proc/170688/comm /proc/170689/comm /proc/170840/comm /proc/170841/comm /proc/171/comm /proc/171085/comm /proc/171093/comm /proc/171240/comm /proc/171282/comm /proc/171396/comm /proc/171414/comm /proc/171420/comm /proc/171467/comm /proc/171469/comm /proc/171470/comm /proc/171541/comm /proc/171542/comm /proc/171552/comm /proc/171704/comm /proc/171902/comm /proc/172/comm /proc/173/comm /proc/173011/comm /proc/173030/comm /proc/173061/comm /proc/173096/comm /proc/173146/comm /proc/173184/comm /proc/173251/comm /proc/173278/comm /proc/173329/comm /proc/173391/comm /proc/173606/comm /proc/173616/comm /proc/173640/comm /proc/173663/comm /proc/173706/comm /proc/174/comm /proc/174324/comm /proc/174357/comm /proc/174364/comm /proc/174371/comm /proc/174657/comm /proc/176/comm /proc/177/comm /proc/177101/comm /proc/177770/comm /proc/177771/comm /proc/177772/comm /proc/178135/comm /proc/179/comm /proc/179090/comm /proc/18/comm /proc/180/comm /proc/180224/comm /proc/180236/comm /proc/180616/comm /proc/181685/comm /proc/181900/comm /proc/182/comm /proc/182161/comm /proc/182162/comm /proc/182163/comm /proc/182361/comm /proc/182364/comm /proc/182391/comm /proc/182392/comm /proc/182410/comm /proc/182423/comm /proc/182424/comm /proc/182678/comm /proc/182679/comm /proc/182680/comm /proc/183285/comm /proc/183585/comm /proc/183841/comm /proc/184/comm /proc/184050/comm /proc/184619/comm /proc/184643/comm /proc/184797/comm /proc/184846/comm /proc/185/comm /proc/185293/comm /proc/185611/comm /proc/185626/comm /proc/185627/comm /proc/185628/comm /proc/185629/comm /proc/185630/comm /proc/185631/comm /proc/185659/comm /proc/186/comm /proc/186294/comm /proc/186384/comm /proc/186408/comm /proc/186495/comm /proc/186512/comm /proc/186518/comm /proc/186681/comm /proc/186683/comm /proc/186685/comm /proc/186706/comm /proc/186762/comm /proc/186789/comm /proc/186832/comm /proc/186833/comm /proc/186843/comm /proc/186902/comm /proc/187/comm /proc/18702/comm /proc/187120/comm /proc/187131/comm /proc/187132/comm /proc/187133/comm /proc/187134/comm /proc/18722/comm /proc/18744/comm /proc/18769/comm /proc/18787/comm /proc/188/comm /proc/189/comm /proc/19/comm /proc/190/comm /proc/191/comm /proc/192/comm /proc/193/comm /proc/194/comm /proc/195/comm /proc/197/comm /proc/2/comm /proc/20/comm /proc/201/comm /proc/21/comm /proc/212/comm /proc/21742/comm /proc/21807/comm /proc/21808/comm /proc/21824/comm /proc/22/comm /proc/220/comm /proc/221/comm /proc/226/comm /proc/2260/comm /proc/24/comm /proc/248/comm /proc/25/comm /proc/25067/comm /proc/25340/comm /proc/25357/comm /proc/25381/comm /proc/25394/comm /proc/26/comm /proc/267/comm /proc/27/comm /proc/28/comm /proc/284/comm /proc/288/comm /proc/289/comm /proc/291/comm /proc/29752/comm /proc/3/comm /proc/30/comm /proc/30016/comm /proc/30034/comm /proc/30059/comm /proc/30071/comm /proc/31/comm /proc/310/comm /proc/311/comm /proc/315/comm /proc/32/comm /proc/324/comm /proc/33/comm /proc/34/comm /proc/343/comm /proc/34567/comm /proc/34841/comm /proc/34858/comm /proc/34883/comm /proc/34895/comm /proc/357/comm /proc/36/comm /proc/37/comm /proc/38/comm /proc/38073/comm /proc/38075/comm /proc/384/comm /proc/39/comm /proc/390/comm /proc/394/comm /proc/4/comm /proc/40/comm /proc/40447/comm /proc/40448/comm /proc/40495/comm /proc/40496/comm /proc/40497/comm /proc/40563/comm /proc/40584/comm /proc/40587/comm /proc/40613/comm /proc/40614/comm /proc/40682/comm /proc/40696/comm /proc/40726/comm /proc/40729/comm /proc/40851/comm /proc/40905/comm /proc/41005/comm /proc/41029/comm /proc/41053/comm /proc/41778/comm /proc/41791/comm /proc/41825/comm /proc/41839/comm /proc/42/comm /proc/42093/comm /proc/42244/comm /proc/42297/comm /proc/42388/comm /proc/42677/comm /proc/43/comm /proc/43149/comm /proc/43172/comm /proc/43213/comm /proc/43592/comm /proc/43616/comm /proc/43632/comm /proc/43655/comm /proc/43685/comm /proc/43714/comm /proc/44/comm /proc/44066/comm /proc/44090/comm /proc/44234/comm /proc/44314/comm /proc/44559/comm /proc/44581/comm /proc/44597/comm /proc/446/comm /proc/44620/comm /proc/44634/comm /proc/44666/comm /proc/44785/comm /proc/44830/comm /proc/44877/comm /proc/45/comm /proc/452/comm /proc/46/comm /proc/46941/comm /proc/46979/comm /proc/47062/comm /proc/47086/comm /proc/47303/comm /proc/47316/comm /proc/47342/comm /proc/47473/comm /proc/47988/comm /proc/48/comm /proc/48012/comm /proc/48092/comm /proc/48114/comm /proc/48167/comm /proc/48301/comm /proc/48445/comm /proc/48469/comm /proc/48601/comm /proc/487/comm /proc/48757/comm /proc/48782/comm /proc/488/comm /proc/49/comm /proc/49186/comm /proc/49210/comm /proc/49237/comm /proc/49315/comm /proc/49418/comm /proc/49516/comm /proc/49564/comm /proc/49652/comm /proc/5/comm /proc/50/comm /proc/50486/comm /proc/51/comm /proc/51387/comm /proc/51410/comm /proc/51565/comm /proc/51589/comm /proc/51649/comm /proc/518/comm /proc/51811/comm /proc/52/comm /proc/52003/comm /proc/52094/comm /proc/54/comm /proc/55/comm /proc/55801/comm /proc/55824/comm /proc/56/comm /proc/56439/comm /proc/56463/comm /proc/56516/comm /proc/56533/comm /proc/56566/comm /proc/56578/comm /proc/56716/comm /proc/56740/comm /proc/56875/comm /proc/56911/comm /proc/56952/comm /proc/57/comm /proc/57061/comm /proc/576/comm /proc/58/comm /proc/6/comm /proc/60/comm /proc/60546/comm /proc/60609/comm /proc/60747/comm /proc/60781/comm /proc/60857/comm /proc/60877/comm /proc/60905/comm /proc/60935/comm /proc/60939/comm /proc/60970/comm /proc/61/comm /proc/61296/comm /proc/613/comm /proc/61389/comm /proc/61504/comm /proc/61601/comm /proc/61657/comm /proc/61658/comm /proc/617/comm /proc/61719/comm /proc/61728/comm /proc/61729/comm /proc/61787/comm /proc/619/comm /proc/62/comm /proc/62149/comm /proc/62385/comm /proc/62410/comm /proc/62471/comm /proc/62495/comm /proc/625/comm /proc/62682/comm /proc/627/comm /proc/62714/comm /proc/62742/comm /proc/62766/comm /proc/62775/comm /proc/62804/comm /proc/63/comm /proc/63276/comm /proc/63309/comm /proc/63390/comm /proc/63558/comm /proc/63583/comm /proc/63825/comm /proc/63958/comm /proc/63974/comm /proc/63975/comm /proc/63976/comm /proc/63977/comm /proc/63978/comm /proc/64/comm /proc/640/comm /proc/64139/comm /proc/64162/comm /proc/64335/comm /proc/64380/comm /proc/64402/comm /proc/64459/comm /proc/645/comm /proc/64886/comm /proc/64972/comm /proc/65029/comm /proc/65190/comm /proc/65213/comm /proc/65372/comm /proc/65444/comm /proc/65652/comm /proc/65695/comm /proc/65799/comm /proc/65846/comm /proc/65922/comm /proc/66/comm /proc/66110/comm /proc/66163/comm /proc/66429/comm /proc/66461/comm /proc/66496/comm /proc/66621/comm /proc/66631/comm /proc/66644/comm /proc/66817/comm /proc/66843/comm /proc/67/comm /proc/67392/comm /proc/67409/comm /proc/67415/comm /proc/67462/comm /proc/67464/comm /proc/67465/comm /proc/67542/comm /proc/67543/comm /proc/67553/comm /proc/67619/comm /proc/68/comm /proc/68825/comm /proc/68849/comm /proc/69/comm /proc/70/comm /proc/710/comm /proc/713/comm /proc/714/comm /proc/72/comm /proc/72339/comm /proc/72382/comm /proc/72383/comm /proc/72384/comm /proc/72385/comm /proc/72386/comm /proc/72388/comm /proc/72390/comm /proc/72395/comm /proc/72396/comm /proc/72397/comm /proc/72398/comm /proc/72399/comm /proc/72400/comm /proc/72401/comm /proc/728/comm /proc/73/comm /proc/74/comm /proc/75/comm /proc/76/comm /proc/78/comm /proc/78078/comm /proc/78103/comm /proc/78287/comm /proc/78304/comm /proc/78310/comm /proc/78390/comm /proc/78392/comm /proc/78393/comm /proc/78394/comm /proc/78395/comm /proc/78405/comm /proc/78598/comm /proc/79/comm /proc/79611/comm /proc/79635/comm /proc/8/comm /proc/80/comm /proc/81/comm /proc/81002/comm /proc/82/comm /proc/84/comm /proc/85/comm /proc/85071/comm /proc/85086/comm /proc/85786/comm /proc/85810/comm /proc/86/comm /proc/86584/comm /proc/87/comm /proc/875/comm /proc/88/comm /proc/88376/comm /proc/88378/comm /proc/90/comm /proc/91/comm /proc/91885/comm /proc/91909/comm /proc/92/comm /proc/92014/comm /proc/92030/comm /proc/92036/comm /proc/92113/comm /proc/92116/comm /proc/92117/comm /proc/92164/comm /proc/92165/comm /proc/92175/comm /proc/9241/comm /proc/92465/comm /proc/9258/comm /proc/9274/comm /proc/93/comm /proc/9356/comm /proc/94/comm /proc/95791/comm /proc/95814/comm /proc/95833/comm /proc/95872/comm /proc/96/comm /proc/96289/comm /proc/96467/comm /proc/97/comm /proc/97110/comm /proc/98/comm /proc/98035/comm /proc/98036/comm /proc/98038/comm /proc/99/comm /proc/9976/comm /proc/99962/comm /proc/self/comm /proc/thread-self/comm
+ '[' -n '' ']'
+ rm -f /var/run/libvirtd.pid
+ [[ -c /dev/kvm ]]
+ chmod 660 /dev/kvm
+ chown root:kvm /dev/kvm
+ CGROUPS=
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/blkio ']'
+ grep -w blkio /sys/fs/cgroup/cgroup.controllers
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/cpu ']'
+ grep -w cpu /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=cpu,
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/devices ']'
+ grep -w devices /sys/fs/cgroup/cgroup.controllers
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/freezer ']'
+ grep -w freezer /sys/fs/cgroup/cgroup.controllers
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/hugetlb ']'
+ grep -w hugetlb /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=hugetlb,
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/memory ']'
+ grep -w memory /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=memory,
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/net_cls ']'
+ grep -w net_cls /sys/fs/cgroup/cgroup.controllers
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/perf_event ']'
+ grep -w perf_event /sys/fs/cgroup/cgroup.controllers
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/rdma ']'
+ grep -w rdma /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=rdma,
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/misc ']'
+ grep -w misc /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=misc,
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/pids ']'
+ grep -w pids /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=pids,
+ cgcreate -g cpu,hugetlb,memory,rdma,misc,pids:/osh-libvirt
++ cat /proc/meminfo
++ grep HugePages_Total
++ tr -cd '[:digit:]'
+ hp_count=0
+ '[' 00 -gt 0 ']'
+ '[' -n 457eb676-33da-42ec-9a8c-9293d545c337 ']'
+ cgexec -g cpu,hugetlb,memory,rdma,misc,pids:/osh-libvirt systemd-run --scope --slice=system libvirtd --listen
++ mktemp --suffix .xml
+ tmpsecret=/tmp/tmp.uv3PJWobxU.xml
+ '[' -n '' ']'
+ trap cleanup EXIT
+ TIMEOUT=60
+ [[ ! -f /var/run/libvirtd.pid ]]
+ [[ 60 -gt 0 ]]
+ let TIMEOUT-=1
+ sleep 1
Running as unit: run-r47a1a451437746d78bb7622f8171598f.scope; invocation ID: abbf16d37ff041da9c07ac2569d64fa0
+ [[ ! -f /var/run/libvirtd.pid ]]
+ TIMEOUT=10
+ [[ ! -e /var/run/libvirt/libvirt-sock ]]
+ '[' -z '' ']'
+ '[' -n cinder ']'
++ awk '/key/{print $3}' /etc/ceph/ceph.client.cinder.keyring
+ CEPH_CINDER_KEYRING=AQD6bSFq4IFLChAAMURE0PV6MhooAbi3PFjVog==
+ '[' -n cinder ']'
+ create_virsh_libvirt_secret cinder 457eb676-33da-42ec-9a8c-9293d545c337 AQD6bSFq4IFLChAAMURE0PV6MhooAbi3PFjVog==
+ sec_user=cinder
+ sec_uuid=457eb676-33da-42ec-9a8c-9293d545c337
+ sec_ceph_keyring=AQD6bSFq4IFLChAAMURE0PV6MhooAbi3PFjVog==
+ cat
+ virsh secret-define --file /tmp/tmp.uv3PJWobxU.xml
Secret 457eb676-33da-42ec-9a8c-9293d545c337 created

+ virsh secret-set-value --secret 457eb676-33da-42ec-9a8c-9293d545c337 --base64 AQD6bSFq4IFLChAAMURE0PV6MhooAbi3PFjVog==
error: Passing secret value as command-line argument is insecure!
Secret value set

+ '[' -n '' ']'
+ cleanup
+ rm -f /tmp/tmp.uv3PJWobxU.xml
+ '[' -n '' ']'
++ cat /var/run/libvirtd.pid
+ LIBVIRTD_PID=187154
+ kill 187154
+ tail --pid=187154 -f /dev/null
+ cgexec -g cpu,hugetlb,memory,rdma,misc,pids:/osh-libvirt systemd-run --scope --slice=system libvirtd --listen
Running as unit: run-r6e4e53a2289b46818f5676911f9f64a6.scope; invocation ID: 5dd2dc2e990147bead2c039b246dc379