+ wait_for_file /etc/pki/CA/cacert.pem
+ local file=/etc/pki/CA/cacert.pem
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ sleep 1
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ sleep 1
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ sleep 1
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ sleep 1
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ sleep 1
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ wait_for_file /etc/pki/qemu/ca-cert.pem
+ local file=/etc/pki/qemu/ca-cert.pem
+ '[' '!' -f /etc/pki/qemu/ca-cert.pem ']'
+ wait_for_file /etc/pki/libvirt/servercert.pem
+ local file=/etc/pki/libvirt/servercert.pem
+ '[' '!' -f /etc/pki/libvirt/servercert.pem ']'
+ wait_for_file /etc/pki/libvirt/clientcert.pem
+ local file=/etc/pki/libvirt/clientcert.pem
+ '[' '!' -f /etc/pki/libvirt/clientcert.pem ']'
+ wait_for_file /etc/pki/qemu/server-cert.pem
+ local file=/etc/pki/qemu/server-cert.pem
+ '[' '!' -f /etc/pki/qemu/server-cert.pem ']'
+ wait_for_file /etc/pki/qemu/client-cert.pem
+ local file=/etc/pki/qemu/client-cert.pem
+ '[' '!' -f /etc/pki/qemu/client-cert.pem ']'
+ wait_for_file /etc/pki/libvirt/private/serverkey.pem
+ local file=/etc/pki/libvirt/private/serverkey.pem
+ '[' '!' -f /etc/pki/libvirt/private/serverkey.pem ']'
+ wait_for_file /etc/pki/libvirt/private/clientkey.pem
+ local file=/etc/pki/libvirt/private/clientkey.pem
+ '[' '!' -f /etc/pki/libvirt/private/clientkey.pem ']'
+ wait_for_file /etc/pki/qemu/server-key.pem
+ local file=/etc/pki/qemu/server-key.pem
+ '[' '!' -f /etc/pki/qemu/server-key.pem ']'
+ wait_for_file /etc/pki/qemu/client-key.pem
+ local file=/etc/pki/qemu/client-key.pem
+ '[' '!' -f /etc/pki/qemu/client-key.pem ']'
+ wait_for_file /etc/pki/libvirt-vnc/ca-cert.pem
+ local file=/etc/pki/libvirt-vnc/ca-cert.pem
+ '[' '!' -f /etc/pki/libvirt-vnc/ca-cert.pem ']'
+ wait_for_file /etc/pki/libvirt-vnc/server-cert.pem
+ local file=/etc/pki/libvirt-vnc/server-cert.pem
+ '[' '!' -f /etc/pki/libvirt-vnc/server-cert.pem ']'
+ wait_for_file /etc/pki/libvirt-vnc/server-key.pem
+ local file=/etc/pki/libvirt-vnc/server-key.pem
+ '[' '!' -f /etc/pki/libvirt-vnc/server-key.pem ']'
++ grep -w libvirtd
++ cat /proc/1/comm /proc/10/comm /proc/100/comm /proc/102/comm /proc/102180/comm /proc/103/comm /proc/10332/comm /proc/103873/comm /proc/104/comm /proc/104892/comm /proc/105/comm /proc/105772/comm /proc/105801/comm /proc/106/comm /proc/106147/comm /proc/106172/comm /proc/106173/comm /proc/107180/comm /proc/107209/comm /proc/107230/comm /proc/107254/comm /proc/107630/comm /proc/107982/comm /proc/107984/comm /proc/108/comm /proc/108669/comm /proc/109/comm /proc/109142/comm /proc/109379/comm /proc/109403/comm /proc/109531/comm /proc/109548/comm /proc/109554/comm /proc/109623/comm /proc/109624/comm /proc/109634/comm /proc/109880/comm /proc/11/comm /proc/110/comm /proc/11091/comm /proc/11092/comm /proc/111/comm /proc/111024/comm /proc/111047/comm /proc/111068/comm /proc/111090/comm /proc/1111/comm /proc/111703/comm /proc/112/comm /proc/112819/comm /proc/112820/comm /proc/112821/comm /proc/112822/comm /proc/113/comm /proc/114/comm /proc/114524/comm /proc/115/comm /proc/115545/comm /proc/115562/comm /proc/116/comm /proc/116860/comm /proc/117/comm /proc/119966/comm /proc/12/comm /proc/120364/comm /proc/120377/comm /proc/120378/comm /proc/120922/comm /proc/124087/comm /proc/124109/comm /proc/124151/comm /proc/124181/comm /proc/12479/comm /proc/124797/comm /proc/12509/comm /proc/125173/comm /proc/125298/comm /proc/12565/comm /proc/12588/comm /proc/125995/comm /proc/12607/comm /proc/126621/comm /proc/126643/comm /proc/126864/comm /proc/126865/comm /proc/127947/comm /proc/12840/comm /proc/12872/comm /proc/12929/comm /proc/12954/comm /proc/12972/comm /proc/129973/comm /proc/13/comm /proc/130087/comm /proc/130321/comm /proc/131061/comm /proc/131082/comm /proc/131426/comm /proc/131530/comm /proc/131557/comm /proc/131558/comm /proc/132834/comm /proc/132835/comm /proc/139933/comm /proc/139934/comm /proc/139936/comm /proc/139937/comm /proc/14/comm /proc/140111/comm /proc/140120/comm /proc/140672/comm /proc/140695/comm /proc/141031/comm /proc/141065/comm /proc/141077/comm /proc/141109/comm /proc/141110/comm /proc/141111/comm /proc/141112/comm /proc/142196/comm /proc/142220/comm /proc/142616/comm /proc/142639/comm /proc/142798/comm /proc/143278/comm /proc/143284/comm /proc/143431/comm /proc/143454/comm /proc/143524/comm /proc/143537/comm /proc/143553/comm /proc/143559/comm /proc/143693/comm /proc/143694/comm /proc/143704/comm /proc/144010/comm /proc/1442/comm /proc/145387/comm /proc/145424/comm /proc/145546/comm /proc/145661/comm /proc/145690/comm /proc/145699/comm /proc/145717/comm /proc/145744/comm /proc/145849/comm /proc/145893/comm /proc/145912/comm /proc/145966/comm /proc/146035/comm /proc/146094/comm /proc/146132/comm /proc/146742/comm /proc/146764/comm /proc/146846/comm /proc/146916/comm /proc/15/comm /proc/151390/comm /proc/151455/comm /proc/151497/comm /proc/151540/comm /proc/152885/comm /proc/1547/comm /proc/1548/comm /proc/1549/comm /proc/1550/comm /proc/1554/comm /proc/16/comm /proc/1621/comm /proc/1625/comm /proc/1634/comm /proc/167/comm /proc/167425/comm /proc/168/comm /proc/168810/comm /proc/168860/comm /proc/168880/comm /proc/169/comm /proc/169442/comm /proc/169461/comm /proc/169480/comm /proc/169481/comm /proc/169482/comm /proc/169483/comm /proc/169974/comm /proc/169979/comm /proc/170/comm /proc/170063/comm /proc/170075/comm /proc/170341/comm /proc/170342/comm /proc/170345/comm /proc/170346/comm /proc/171/comm /proc/171034/comm /proc/171040/comm /proc/171244/comm /proc/171266/comm /proc/171347/comm /proc/171389/comm /proc/171395/comm /proc/171453/comm /proc/171454/comm /proc/171464/comm /proc/171714/comm /proc/172/comm /proc/173/comm /proc/173055/comm /proc/173089/comm /proc/173125/comm /proc/173131/comm /proc/173157/comm /proc/173159/comm /proc/173276/comm /proc/173277/comm /proc/173279/comm /proc/173335/comm /proc/173585/comm /proc/173603/comm /proc/173625/comm /proc/173644/comm /proc/174/comm /proc/174179/comm /proc/174186/comm /proc/174194/comm /proc/174205/comm /proc/174207/comm /proc/175/comm /proc/176690/comm /proc/176727/comm /proc/177/comm /proc/178/comm /proc/178649/comm /proc/178728/comm /proc/179555/comm /proc/179556/comm /proc/179771/comm /proc/18/comm /proc/180/comm /proc/181/comm /proc/181411/comm /proc/181412/comm /proc/181414/comm /proc/181646/comm /proc/181648/comm /proc/181681/comm /proc/181682/comm /proc/181696/comm /proc/181709/comm /proc/181710/comm /proc/181951/comm /proc/181952/comm /proc/181953/comm /proc/182539/comm /proc/182860/comm /proc/183159/comm /proc/183354/comm /proc/184/comm /proc/184070/comm /proc/184071/comm /proc/184129/comm /proc/184202/comm /proc/184392/comm /proc/184393/comm /proc/184590/comm /proc/184620/comm /proc/184909/comm /proc/184910/comm /proc/185122/comm /proc/185135/comm /proc/185257/comm /proc/185287/comm /proc/185516/comm /proc/185578/comm /proc/185588/comm /proc/185591/comm /proc/185606/comm /proc/185607/comm /proc/185608/comm /proc/185609/comm /proc/185610/comm /proc/185611/comm /proc/185623/comm /proc/185624/comm /proc/185670/comm /proc/185679/comm /proc/185710/comm /proc/185711/comm /proc/185712/comm /proc/186/comm /proc/18732/comm /proc/18751/comm /proc/18773/comm /proc/188/comm /proc/18800/comm /proc/18816/comm /proc/189/comm /proc/19/comm /proc/190/comm /proc/191/comm /proc/193/comm /proc/194/comm /proc/195/comm /proc/196/comm /proc/197/comm /proc/2/comm /proc/20/comm /proc/202/comm /proc/21/comm /proc/21170/comm /proc/215/comm /proc/21760/comm /proc/21816/comm /proc/21817/comm /proc/21837/comm /proc/22/comm /proc/220/comm /proc/221/comm /proc/226/comm /proc/24/comm /proc/248/comm /proc/25/comm /proc/25076/comm /proc/25355/comm /proc/25372/comm /proc/25396/comm /proc/25408/comm /proc/26/comm /proc/27/comm /proc/28/comm /proc/29684/comm /proc/299/comm /proc/29963/comm /proc/29980/comm /proc/3/comm /proc/30/comm /proc/30004/comm /proc/30016/comm /proc/303/comm /proc/304/comm /proc/305/comm /proc/306/comm /proc/31/comm /proc/32/comm /proc/325/comm /proc/326/comm /proc/33/comm /proc/330/comm /proc/34/comm /proc/34222/comm /proc/34499/comm /proc/34516/comm /proc/34541/comm /proc/34553/comm /proc/35638/comm /proc/36/comm /proc/37/comm /proc/370/comm /proc/37734/comm /proc/37736/comm /proc/38/comm /proc/39/comm /proc/397/comm /proc/398/comm /proc/399/comm /proc/4/comm /proc/40/comm /proc/40080/comm /proc/40109/comm /proc/40111/comm /proc/40139/comm /proc/40158/comm /proc/40160/comm /proc/40208/comm /proc/40230/comm /proc/40247/comm /proc/40255/comm /proc/40334/comm /proc/40352/comm /proc/40353/comm /proc/40377/comm /proc/404/comm /proc/40487/comm /proc/405/comm /proc/40538/comm /proc/40683/comm /proc/40706/comm /proc/40731/comm /proc/410/comm /proc/411/comm /proc/41418/comm /proc/41432/comm /proc/41467/comm /proc/41480/comm /proc/415/comm /proc/41731/comm /proc/41940/comm /proc/42/comm /proc/42029/comm /proc/42360/comm /proc/42775/comm /proc/42798/comm /proc/42823/comm /proc/43/comm /proc/43165/comm /proc/43189/comm /proc/43215/comm /proc/43231/comm /proc/43269/comm /proc/43303/comm /proc/43629/comm /proc/43652/comm /proc/43876/comm /proc/44/comm /proc/44095/comm /proc/44121/comm /proc/44147/comm /proc/44171/comm /proc/44188/comm /proc/44214/comm /proc/44325/comm /proc/44369/comm /proc/44414/comm /proc/45/comm /proc/46/comm /proc/46172/comm /proc/46199/comm /proc/46272/comm /proc/46295/comm /proc/46505/comm /proc/46518/comm /proc/46540/comm /proc/46663/comm /proc/467/comm /proc/46992/comm /proc/470/comm /proc/47016/comm /proc/47089/comm /proc/47113/comm /proc/47164/comm /proc/47283/comm /proc/47445/comm /proc/47467/comm /proc/47797/comm /proc/47955/comm /proc/47981/comm /proc/48/comm /proc/48354/comm /proc/48377/comm /proc/48473/comm /proc/48524/comm /proc/48621/comm /proc/48651/comm /proc/48717/comm /proc/48765/comm /proc/49/comm /proc/49684/comm /proc/5/comm /proc/50/comm /proc/505/comm /proc/50503/comm /proc/50528/comm /proc/50694/comm /proc/50718/comm /proc/50782/comm /proc/50875/comm /proc/51/comm /proc/51052/comm /proc/51131/comm /proc/52/comm /proc/537/comm /proc/54/comm /proc/55/comm /proc/55016/comm /proc/55040/comm /proc/55646/comm /proc/55672/comm /proc/55709/comm /proc/55736/comm /proc/55749/comm /proc/55774/comm /proc/55927/comm /proc/55951/comm /proc/55988/comm /proc/56/comm /proc/56027/comm /proc/56061/comm /proc/56153/comm /proc/57/comm /proc/58/comm /proc/59776/comm /proc/59777/comm /proc/6/comm /proc/60/comm /proc/60024/comm /proc/60048/comm /proc/60172/comm /proc/60202/comm /proc/60233/comm /proc/60255/comm /proc/60269/comm /proc/60293/comm /proc/60517/comm /proc/60767/comm /proc/60814/comm /proc/60827/comm /proc/60843/comm /proc/61/comm /proc/61065/comm /proc/61066/comm /proc/61072/comm /proc/61073/comm /proc/61165/comm /proc/61212/comm /proc/61363/comm /proc/61784/comm /proc/61809/comm /proc/61839/comm /proc/61883/comm /proc/61906/comm /proc/61943/comm /proc/62/comm /proc/62022/comm /proc/62049/comm /proc/62075/comm /proc/62099/comm /proc/62371/comm /proc/62543/comm /proc/62570/comm /proc/62709/comm /proc/62775/comm /proc/62794/comm /proc/62795/comm /proc/62796/comm /proc/62797/comm /proc/62798/comm /proc/62850/comm /proc/62875/comm /proc/62909/comm /proc/63/comm /proc/63098/comm /proc/631/comm /proc/63122/comm /proc/63175/comm /proc/63311/comm /proc/634/comm /proc/63666/comm /proc/63689/comm /proc/637/comm /proc/63902/comm /proc/63964/comm /proc/64/comm /proc/64146/comm /proc/64250/comm /proc/644/comm /proc/64441/comm /proc/64463/comm /proc/645/comm /proc/64576/comm /proc/64622/comm /proc/64662/comm /proc/64703/comm /proc/64845/comm /proc/64954/comm /proc/65050/comm /proc/65338/comm /proc/65379/comm /proc/65416/comm /proc/65455/comm /proc/65717/comm /proc/65754/comm /proc/659/comm /proc/66/comm /proc/66060/comm /proc/66085/comm /proc/66338/comm /proc/66355/comm /proc/66361/comm /proc/665/comm /proc/66736/comm /proc/66737/comm /proc/66752/comm /proc/66912/comm /proc/67/comm /proc/68/comm /proc/68003/comm /proc/68026/comm /proc/69/comm /proc/69823/comm /proc/70/comm /proc/70745/comm /proc/71253/comm /proc/71268/comm /proc/71269/comm /proc/71270/comm /proc/71271/comm /proc/71273/comm /proc/71274/comm /proc/71275/comm /proc/71279/comm /proc/71281/comm /proc/71282/comm /proc/71283/comm /proc/71284/comm /proc/71285/comm /proc/71286/comm /proc/72/comm /proc/720/comm /proc/723/comm /proc/724/comm /proc/73/comm /proc/738/comm /proc/74/comm /proc/75/comm /proc/76/comm /proc/76839/comm /proc/77063/comm /proc/77086/comm /proc/77250/comm /proc/77268/comm /proc/77274/comm /proc/77371/comm /proc/77372/comm /proc/77382/comm /proc/77564/comm /proc/78/comm /proc/78547/comm /proc/78571/comm /proc/79/comm /proc/8/comm /proc/80/comm /proc/80344/comm /proc/81/comm /proc/82/comm /proc/82183/comm /proc/83667/comm /proc/83679/comm /proc/84/comm /proc/84360/comm /proc/84384/comm /proc/85/comm /proc/85106/comm /proc/86/comm /proc/87/comm /proc/88/comm /proc/883/comm /proc/89667/comm /proc/89853/comm /proc/9/comm /proc/90/comm /proc/90103/comm /proc/90127/comm /proc/90258/comm /proc/90276/comm /proc/90284/comm /proc/90608/comm /proc/90609/comm /proc/90619/comm /proc/91/comm /proc/91032/comm /proc/92/comm /proc/9232/comm /proc/9249/comm /proc/9265/comm /proc/92770/comm /proc/93/comm /proc/9348/comm /proc/94/comm /proc/96/comm /proc/96317/comm /proc/96593/comm /proc/96620/comm /proc/96658/comm /proc/96689/comm /proc/96927/comm /proc/97/comm /proc/97096/comm /proc/97893/comm /proc/98/comm /proc/98821/comm /proc/99/comm /proc/9964/comm /proc/99995/comm /proc/self/comm /proc/thread-self/comm
+ '[' -n '' ']'
+ rm -f /var/run/libvirtd.pid
+ [[ -c /dev/kvm ]]
+ chmod 660 /dev/kvm
+ chown root:kvm /dev/kvm
+ CGROUPS=
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/blkio ']'
+ grep -w blkio /sys/fs/cgroup/cgroup.controllers
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/cpu ']'
+ grep -w cpu /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=cpu,
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/devices ']'
+ grep -w devices /sys/fs/cgroup/cgroup.controllers
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/freezer ']'
+ grep -w freezer /sys/fs/cgroup/cgroup.controllers
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/hugetlb ']'
+ grep -w hugetlb /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=hugetlb,
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/memory ']'
+ grep -w memory /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=memory,
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/net_cls ']'
+ grep -w net_cls /sys/fs/cgroup/cgroup.controllers
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/perf_event ']'
+ grep -w perf_event /sys/fs/cgroup/cgroup.controllers
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/rdma ']'
+ grep -w rdma /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=rdma,
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/misc ']'
+ grep -w misc /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=misc,
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/pids ']'
+ grep -w pids /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=pids,
+ cgcreate -g cpu,hugetlb,memory,rdma,misc,pids:/osh-libvirt
++ cat /proc/meminfo
++ grep HugePages_Total
++ tr -cd '[:digit:]'
+ hp_count=0
+ '[' 00 -gt 0 ']'
+ '[' -n 457eb676-33da-42ec-9a8c-9293d545c337 ']'
+ cgexec -g cpu,hugetlb,memory,rdma,misc,pids:/osh-libvirt systemd-run --scope --slice=system libvirtd --listen
++ mktemp --suffix .xml
+ tmpsecret=/tmp/tmp.MgwQoeLK8z.xml
+ '[' -n '' ']'
+ trap cleanup EXIT
+ TIMEOUT=60
+ [[ ! -f /var/run/libvirtd.pid ]]
+ [[ 60 -gt 0 ]]
+ let TIMEOUT-=1
+ sleep 1
Running scope as unit: run-rcf1bcb1f5d4741079fec38851883e9f6.scope
+ [[ ! -f /var/run/libvirtd.pid ]]
+ TIMEOUT=10
+ [[ ! -e /var/run/libvirt/libvirt-sock ]]
+ '[' -z '' ']'
+ '[' -n cinder ']'
++ awk '/key/{print $3}' /etc/ceph/ceph.client.cinder.keyring
+ CEPH_CINDER_KEYRING=AQB4txpq6EHYNhAAajfBQixNpq+LGbDNEyyacA==
+ '[' -n cinder ']'
+ create_virsh_libvirt_secret cinder 457eb676-33da-42ec-9a8c-9293d545c337 AQB4txpq6EHYNhAAajfBQixNpq+LGbDNEyyacA==
+ sec_user=cinder
+ sec_uuid=457eb676-33da-42ec-9a8c-9293d545c337
+ sec_ceph_keyring=AQB4txpq6EHYNhAAajfBQixNpq+LGbDNEyyacA==
+ cat
+ virsh secret-define --file /tmp/tmp.MgwQoeLK8z.xml
Secret 457eb676-33da-42ec-9a8c-9293d545c337 created

+ virsh secret-set-value --secret 457eb676-33da-42ec-9a8c-9293d545c337 --base64 AQB4txpq6EHYNhAAajfBQixNpq+LGbDNEyyacA==
error: Passing secret value as command-line argument is insecure!
Secret value set

+ '[' -n '' ']'
+ cleanup
+ rm -f /tmp/tmp.MgwQoeLK8z.xml
+ '[' -n '' ']'
++ cat /var/run/libvirtd.pid
+ LIBVIRTD_PID=185732
+ kill 185732
+ tail --pid=185732 -f /dev/null
+ cgexec -g cpu,hugetlb,memory,rdma,misc,pids:/osh-libvirt systemd-run --scope --slice=system libvirtd --listen
Running scope as unit: run-r7f1c38fe47c747aea79973e7d9759622.scope