+ wait_for_file /etc/pki/CA/cacert.pem
+ local file=/etc/pki/CA/cacert.pem
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ sleep 1
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ sleep 1
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ sleep 1
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ sleep 1
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ sleep 1
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ wait_for_file /etc/pki/qemu/ca-cert.pem
+ local file=/etc/pki/qemu/ca-cert.pem
+ '[' '!' -f /etc/pki/qemu/ca-cert.pem ']'
+ wait_for_file /etc/pki/libvirt/servercert.pem
+ local file=/etc/pki/libvirt/servercert.pem
+ '[' '!' -f /etc/pki/libvirt/servercert.pem ']'
+ wait_for_file /etc/pki/libvirt/clientcert.pem
+ local file=/etc/pki/libvirt/clientcert.pem
+ '[' '!' -f /etc/pki/libvirt/clientcert.pem ']'
+ wait_for_file /etc/pki/qemu/server-cert.pem
+ local file=/etc/pki/qemu/server-cert.pem
+ '[' '!' -f /etc/pki/qemu/server-cert.pem ']'
+ wait_for_file /etc/pki/qemu/client-cert.pem
+ local file=/etc/pki/qemu/client-cert.pem
+ '[' '!' -f /etc/pki/qemu/client-cert.pem ']'
+ wait_for_file /etc/pki/libvirt/private/serverkey.pem
+ local file=/etc/pki/libvirt/private/serverkey.pem
+ '[' '!' -f /etc/pki/libvirt/private/serverkey.pem ']'
+ wait_for_file /etc/pki/libvirt/private/clientkey.pem
+ local file=/etc/pki/libvirt/private/clientkey.pem
+ '[' '!' -f /etc/pki/libvirt/private/clientkey.pem ']'
+ wait_for_file /etc/pki/qemu/server-key.pem
+ local file=/etc/pki/qemu/server-key.pem
+ '[' '!' -f /etc/pki/qemu/server-key.pem ']'
+ wait_for_file /etc/pki/qemu/client-key.pem
+ local file=/etc/pki/qemu/client-key.pem
+ '[' '!' -f /etc/pki/qemu/client-key.pem ']'
+ wait_for_file /etc/pki/libvirt-vnc/ca-cert.pem
+ local file=/etc/pki/libvirt-vnc/ca-cert.pem
+ '[' '!' -f /etc/pki/libvirt-vnc/ca-cert.pem ']'
+ wait_for_file /etc/pki/libvirt-vnc/server-cert.pem
+ local file=/etc/pki/libvirt-vnc/server-cert.pem
+ '[' '!' -f /etc/pki/libvirt-vnc/server-cert.pem ']'
+ wait_for_file /etc/pki/libvirt-vnc/server-key.pem
+ local file=/etc/pki/libvirt-vnc/server-key.pem
+ '[' '!' -f /etc/pki/libvirt-vnc/server-key.pem ']'
++ grep -w libvirtd
++ cat /proc/1/comm /proc/10/comm /proc/100/comm /proc/100711/comm /proc/102/comm /proc/102428/comm /proc/103/comm /proc/10343/comm /proc/104/comm /proc/105/comm /proc/105076/comm /proc/105081/comm /proc/106/comm /proc/106488/comm /proc/106504/comm /proc/106505/comm /proc/106855/comm /proc/108/comm /proc/10855/comm /proc/10856/comm /proc/109/comm /proc/109145/comm /proc/109169/comm /proc/109185/comm /proc/109216/comm /proc/109369/comm /proc/109382/comm /proc/109762/comm /proc/109802/comm /proc/11/comm /proc/110/comm /proc/110092/comm /proc/110220/comm /proc/1106/comm /proc/110739/comm /proc/110801/comm /proc/111/comm /proc/111448/comm /proc/111472/comm /proc/111610/comm /proc/111779/comm /proc/112/comm /proc/112566/comm /proc/113/comm /proc/113400/comm /proc/114/comm /proc/114309/comm /proc/114310/comm /proc/114666/comm /proc/115/comm /proc/115455/comm /proc/115649/comm /proc/115663/comm /proc/115664/comm /proc/116/comm /proc/116793/comm /proc/116794/comm /proc/117/comm /proc/12/comm /proc/12233/comm /proc/12266/comm /proc/12315/comm /proc/12348/comm /proc/12361/comm /proc/123696/comm /proc/123697/comm /proc/123699/comm /proc/123700/comm /proc/123720/comm /proc/123728/comm /proc/124119/comm /proc/124149/comm /proc/124212/comm /proc/124840/comm /proc/124873/comm /proc/124888/comm /proc/124929/comm /proc/124930/comm /proc/124931/comm /proc/124932/comm /proc/125117/comm /proc/125168/comm /proc/125196/comm /proc/125833/comm /proc/125864/comm /proc/12599/comm /proc/126126/comm /proc/126150/comm /proc/126164/comm /proc/126187/comm /proc/12629/comm /proc/126358/comm /proc/126373/comm /proc/126422/comm /proc/126444/comm /proc/126479/comm /proc/126492/comm /proc/126580/comm /proc/126622/comm /proc/126766/comm /proc/12685/comm /proc/126900/comm /proc/126923/comm /proc/127033/comm /proc/127043/comm /proc/12708/comm /proc/12728/comm /proc/127945/comm /proc/127968/comm /proc/128135/comm /proc/128154/comm /proc/128161/comm /proc/128251/comm /proc/128302/comm /proc/128303/comm /proc/129805/comm /proc/129863/comm /proc/129949/comm /proc/13/comm /proc/130077/comm /proc/130110/comm /proc/130144/comm /proc/130170/comm /proc/130201/comm /proc/130222/comm /proc/130246/comm /proc/130272/comm /proc/130311/comm /proc/130386/comm /proc/130423/comm /proc/130854/comm /proc/130878/comm /proc/131259/comm /proc/131286/comm /proc/135398/comm /proc/136521/comm /proc/138666/comm /proc/14/comm /proc/1437/comm /proc/15/comm /proc/150038/comm /proc/150039/comm /proc/150252/comm /proc/151599/comm /proc/151948/comm /proc/151961/comm /proc/151973/comm /proc/151974/comm /proc/152190/comm /proc/152204/comm /proc/152205/comm /proc/152793/comm /proc/152810/comm /proc/152904/comm /proc/152935/comm /proc/152994/comm /proc/152995/comm /proc/152998/comm /proc/152999/comm /proc/153269/comm /proc/153590/comm /proc/153822/comm /proc/153847/comm /proc/153933/comm /proc/153951/comm /proc/153958/comm /proc/154101/comm /proc/154152/comm /proc/154153/comm /proc/155490/comm /proc/1555/comm /proc/155523/comm /proc/155560/comm /proc/155568/comm /proc/1556/comm /proc/15564/comm /proc/1557/comm /proc/155754/comm /proc/155778/comm /proc/1558/comm /proc/156061/comm /proc/1562/comm /proc/156257/comm /proc/156279/comm /proc/156346/comm /proc/158539/comm /proc/158562/comm /proc/158999/comm /proc/159215/comm /proc/159226/comm /proc/16/comm /proc/161472/comm /proc/161669/comm /proc/161679/comm /proc/161702/comm /proc/162056/comm /proc/162570/comm /proc/162608/comm /proc/162700/comm /proc/162719/comm /proc/162804/comm /proc/162815/comm /proc/1629/comm /proc/1633/comm /proc/163559/comm /proc/163833/comm /proc/163834/comm /proc/163835/comm /proc/164089/comm /proc/164120/comm /proc/164158/comm /proc/164159/comm /proc/1642/comm /proc/164311/comm /proc/164312/comm /proc/164316/comm /proc/164317/comm /proc/164318/comm /proc/164319/comm /proc/164320/comm /proc/16529/comm /proc/165393/comm /proc/165511/comm /proc/165530/comm /proc/165531/comm /proc/165532/comm /proc/165533/comm /proc/165535/comm /proc/165536/comm /proc/165997/comm /proc/166/comm /proc/166069/comm /proc/166077/comm /proc/166118/comm /proc/166119/comm /proc/166141/comm /proc/166166/comm /proc/166313/comm /proc/166381/comm /proc/166404/comm /proc/166411/comm /proc/166602/comm /proc/166654/comm /proc/166657/comm /proc/166658/comm /proc/166677/comm /proc/167/comm /proc/167001/comm /proc/167052/comm /proc/167077/comm /proc/167087/comm /proc/167226/comm /proc/167286/comm /proc/167288/comm /proc/167295/comm /proc/167296/comm /proc/167297/comm /proc/167298/comm /proc/168/comm /proc/169/comm /proc/170/comm /proc/171/comm /proc/172/comm /proc/173/comm /proc/174/comm /proc/175/comm /proc/176/comm /proc/178/comm /proc/179/comm /proc/18/comm /proc/181/comm /proc/182/comm /proc/184/comm /proc/18493/comm /proc/185/comm /proc/18513/comm /proc/18536/comm /proc/18561/comm /proc/18580/comm /proc/186/comm /proc/187/comm /proc/189/comm /proc/19/comm /proc/2/comm /proc/20/comm /proc/202/comm /proc/203/comm /proc/206/comm /proc/207/comm /proc/21/comm /proc/215/comm /proc/21560/comm /proc/21626/comm /proc/21627/comm /proc/21647/comm /proc/219/comm /proc/22/comm /proc/220/comm /proc/225/comm /proc/24/comm /proc/247/comm /proc/24841/comm /proc/25/comm /proc/25102/comm /proc/25118/comm /proc/25145/comm /proc/25158/comm /proc/26/comm /proc/268/comm /proc/27/comm /proc/28/comm /proc/290/comm /proc/295/comm /proc/29519/comm /proc/297/comm /proc/29783/comm /proc/29798/comm /proc/298/comm /proc/29824/comm /proc/29836/comm /proc/3/comm /proc/30/comm /proc/31/comm /proc/317/comm /proc/318/comm /proc/32/comm /proc/322/comm /proc/323/comm /proc/324/comm /proc/325/comm /proc/32549/comm /proc/326/comm /proc/327/comm /proc/328/comm /proc/329/comm /proc/33/comm /proc/330/comm /proc/34/comm /proc/34030/comm /proc/34304/comm /proc/34322/comm /proc/34347/comm /proc/34359/comm /proc/36/comm /proc/37/comm /proc/370/comm /proc/38/comm /proc/38909/comm /proc/38911/comm /proc/39/comm /proc/39015/comm /proc/39035/comm /proc/39078/comm /proc/39106/comm /proc/39123/comm /proc/4/comm /proc/40/comm /proc/402/comm /proc/406/comm /proc/41137/comm /proc/41598/comm /proc/41622/comm /proc/41638/comm /proc/41664/comm /proc/41678/comm /proc/41686/comm /proc/41739/comm /proc/41748/comm /proc/41767/comm /proc/41779/comm /proc/41840/comm /proc/41859/comm /proc/41878/comm /proc/41932/comm /proc/42/comm /proc/42007/comm /proc/42068/comm /proc/42212/comm /proc/42235/comm /proc/42261/comm /proc/42951/comm /proc/42970/comm /proc/42996/comm /proc/43/comm /proc/43013/comm /proc/43267/comm /proc/43473/comm /proc/43894/comm /proc/44/comm /proc/44315/comm /proc/44339/comm /proc/44365/comm /proc/44742/comm /proc/44767/comm /proc/44789/comm /proc/44814/comm /proc/44832/comm /proc/44878/comm /proc/45/comm /proc/45225/comm /proc/45248/comm /proc/45295/comm /proc/45469/comm /proc/45781/comm /proc/45808/comm /proc/45840/comm /proc/45863/comm /proc/45879/comm /proc/45903/comm /proc/46/comm /proc/46016/comm /proc/46063/comm /proc/46106/comm /proc/46194/comm /proc/462/comm /proc/47707/comm /proc/47738/comm /proc/47816/comm /proc/47840/comm /proc/48/comm /proc/48185/comm /proc/48221/comm /proc/48419/comm /proc/48441/comm /proc/48775/comm /proc/48800/comm /proc/48844/comm /proc/48868/comm /proc/48979/comm /proc/49/comm /proc/49045/comm /proc/49205/comm /proc/49229/comm /proc/49348/comm /proc/49548/comm /proc/49572/comm /proc/49843/comm /proc/49867/comm /proc/49892/comm /proc/49999/comm /proc/5/comm /proc/50/comm /proc/50036/comm /proc/50142/comm /proc/50238/comm /proc/51/comm /proc/51074/comm /proc/51529/comm /proc/51552/comm /proc/51700/comm /proc/52/comm /proc/529/comm /proc/53650/comm /proc/53672/comm /proc/54/comm /proc/54080/comm /proc/54235/comm /proc/54268/comm /proc/54283/comm /proc/54306/comm /proc/54437/comm /proc/54460/comm /proc/54587/comm /proc/54623/comm /proc/54691/comm /proc/55/comm /proc/56/comm /proc/57/comm /proc/57402/comm /proc/57456/comm /proc/57540/comm /proc/57564/comm /proc/57595/comm /proc/57620/comm /proc/57636/comm /proc/57659/comm /proc/57894/comm /proc/58/comm /proc/58076/comm /proc/58101/comm /proc/58171/comm /proc/58274/comm /proc/58275/comm /proc/58288/comm /proc/58289/comm /proc/58607/comm /proc/58625/comm /proc/58808/comm /proc/59024/comm /proc/59050/comm /proc/59290/comm /proc/59358/comm /proc/59557/comm /proc/59595/comm /proc/59634/comm /proc/59661/comm /proc/59799/comm /proc/59860/comm /proc/59884/comm /proc/59988/comm /proc/6/comm /proc/60/comm /proc/60013/comm /proc/60132/comm /proc/60151/comm /proc/60152/comm /proc/60153/comm /proc/60154/comm /proc/60155/comm /proc/60421/comm /proc/60657/comm /proc/60682/comm /proc/61/comm /proc/61134/comm /proc/61171/comm /proc/61370/comm /proc/61606/comm /proc/61630/comm /proc/61724/comm /proc/61837/comm /proc/61876/comm /proc/61986/comm /proc/62/comm /proc/621/comm /proc/62259/comm /proc/62300/comm /proc/62363/comm /proc/625/comm /proc/62529/comm /proc/62570/comm /proc/62622/comm /proc/62643/comm /proc/62666/comm /proc/627/comm /proc/62777/comm /proc/62900/comm /proc/63/comm /proc/63009/comm /proc/63026/comm /proc/63033/comm /proc/63087/comm /proc/63140/comm /proc/63141/comm /proc/634/comm /proc/635/comm /proc/63976/comm /proc/63999/comm /proc/64/comm /proc/64450/comm /proc/650/comm /proc/652/comm /proc/66/comm /proc/66319/comm /proc/66691/comm /proc/66706/comm /proc/66707/comm /proc/66708/comm /proc/66709/comm /proc/66710/comm /proc/66712/comm /proc/66713/comm /proc/66715/comm /proc/66719/comm /proc/66720/comm /proc/66721/comm /proc/66723/comm /proc/66724/comm /proc/66725/comm /proc/67/comm /proc/68/comm /proc/69/comm /proc/70/comm /proc/710/comm /proc/71104/comm /proc/71217/comm /proc/71224/comm /proc/71278/comm /proc/713/comm /proc/71303/comm /proc/71386/comm /proc/714/comm /proc/71423/comm /proc/71435/comm /proc/71500/comm /proc/71551/comm /proc/71552/comm /proc/72/comm /proc/72501/comm /proc/72525/comm /proc/728/comm /proc/72959/comm /proc/73/comm /proc/74/comm /proc/74438/comm /proc/74439/comm /proc/75/comm /proc/75646/comm /proc/76/comm /proc/76702/comm /proc/76716/comm /proc/77346/comm /proc/77371/comm /proc/78/comm /proc/78124/comm /proc/79/comm /proc/8/comm /proc/80/comm /proc/81/comm /proc/81977/comm /proc/82/comm /proc/82001/comm /proc/82192/comm /proc/82222/comm /proc/82229/comm /proc/82325/comm /proc/82431/comm /proc/82432/comm /proc/84/comm /proc/84557/comm /proc/85/comm /proc/85458/comm /proc/85461/comm /proc/85652/comm /proc/86/comm /proc/87/comm /proc/875/comm /proc/88/comm /proc/9/comm /proc/90/comm /proc/91/comm /proc/91155/comm /proc/91180/comm /proc/91201/comm /proc/91222/comm /proc/91341/comm /proc/91473/comm /proc/92/comm /proc/92145/comm /proc/9240/comm /proc/9257/comm /proc/9273/comm /proc/93/comm /proc/93162/comm /proc/9355/comm /proc/93805/comm /proc/93828/comm /proc/93946/comm /proc/94/comm /proc/94106/comm /proc/94127/comm /proc/94128/comm /proc/95103/comm /proc/95128/comm /proc/95146/comm /proc/95176/comm /proc/95507/comm /proc/95682/comm /proc/95720/comm /proc/95722/comm /proc/96/comm /proc/96277/comm /proc/96613/comm /proc/96706/comm /proc/96805/comm /proc/96888/comm /proc/96913/comm /proc/96999/comm /proc/97/comm /proc/97016/comm /proc/97023/comm /proc/97079/comm /proc/97130/comm /proc/97131/comm /proc/98/comm /proc/98344/comm /proc/98372/comm /proc/98494/comm /proc/98517/comm /proc/98897/comm /proc/99/comm /proc/9974/comm /proc/self/comm /proc/thread-self/comm
+ '[' -n '' ']'
+ rm -f /var/run/libvirtd.pid
+ [[ -c /dev/kvm ]]
+ chmod 660 /dev/kvm
+ chown root:kvm /dev/kvm
+ CGROUPS=
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/blkio ']'
+ grep -w blkio /sys/fs/cgroup/cgroup.controllers
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/cpu ']'
+ grep -w cpu /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=cpu,
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/devices ']'
+ grep -w devices /sys/fs/cgroup/cgroup.controllers
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/freezer ']'
+ grep -w freezer /sys/fs/cgroup/cgroup.controllers
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/hugetlb ']'
+ grep -w hugetlb /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=hugetlb,
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/memory ']'
+ grep -w memory /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=memory,
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/net_cls ']'
+ grep -w net_cls /sys/fs/cgroup/cgroup.controllers
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/perf_event ']'
+ grep -w perf_event /sys/fs/cgroup/cgroup.controllers
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/rdma ']'
+ grep -w rdma /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=rdma,
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/misc ']'
+ grep -w misc /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=misc,
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/pids ']'
+ grep -w pids /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=pids,
+ cgcreate -g cpu,hugetlb,memory,rdma,misc,pids:/osh-libvirt
++ cat /proc/meminfo
++ grep HugePages_Total
++ tr -cd '[:digit:]'
+ hp_count=0
+ '[' 00 -gt 0 ']'
+ '[' -n 457eb676-33da-42ec-9a8c-9293d545c337 ']'
+ cgexec -g cpu,hugetlb,memory,rdma,misc,pids:/osh-libvirt systemd-run --scope --slice=system libvirtd --listen
++ mktemp --suffix .xml
+ tmpsecret=/tmp/tmp.s2jTOdJAYJ.xml
+ '[' -n '' ']'
+ trap cleanup EXIT
+ TIMEOUT=60
+ [[ ! -f /var/run/libvirtd.pid ]]
+ [[ 60 -gt 0 ]]
+ let TIMEOUT-=1
+ sleep 1
Running scope as unit: run-r0921ceebeffd461fab6ab487d6b4652e.scope
+ [[ ! -f /var/run/libvirtd.pid ]]
+ TIMEOUT=10
+ [[ ! -e /var/run/libvirt/libvirt-sock ]]
+ '[' -z '' ']'
+ '[' -n cinder ']'
++ awk '/key/{print $3}' /etc/ceph/ceph.client.cinder.keyring
+ CEPH_CINDER_KEYRING=AQAq5tBqf7vJAxAADn09awHW5D2UpgU7g7StuA==
+ '[' -n cinder ']'
+ create_virsh_libvirt_secret cinder 457eb676-33da-42ec-9a8c-9293d545c337 AQAq5tBqf7vJAxAADn09awHW5D2UpgU7g7StuA==
+ sec_user=cinder
+ sec_uuid=457eb676-33da-42ec-9a8c-9293d545c337
+ sec_ceph_keyring=AQAq5tBqf7vJAxAADn09awHW5D2UpgU7g7StuA==
+ cat
+ virsh secret-define --file /tmp/tmp.s2jTOdJAYJ.xml
Secret 457eb676-33da-42ec-9a8c-9293d545c337 created

+ virsh secret-set-value --secret 457eb676-33da-42ec-9a8c-9293d545c337 --base64 AQAq5tBqf7vJAxAADn09awHW5D2UpgU7g7StuA==
error: Passing secret value as command-line argument is insecure!
Secret value set

+ '[' -n '' ']'
+ cleanup
+ rm -f /tmp/tmp.s2jTOdJAYJ.xml
+ '[' -n '' ']'
++ cat /var/run/libvirtd.pid
+ LIBVIRTD_PID=167318
+ kill 167318
+ tail --pid=167318 -f /dev/null
+ cgexec -g cpu,hugetlb,memory,rdma,misc,pids:/osh-libvirt systemd-run --scope --slice=system libvirtd --listen
Running scope as unit: run-r946c76f658dc423f9aa8af889559129e.scope