+ wait_for_file /etc/pki/CA/cacert.pem
+ local file=/etc/pki/CA/cacert.pem
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ sleep 1
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ sleep 1
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ sleep 1
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ sleep 1
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ sleep 1
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ wait_for_file /etc/pki/qemu/ca-cert.pem
+ local file=/etc/pki/qemu/ca-cert.pem
+ '[' '!' -f /etc/pki/qemu/ca-cert.pem ']'
+ wait_for_file /etc/pki/libvirt/servercert.pem
+ local file=/etc/pki/libvirt/servercert.pem
+ '[' '!' -f /etc/pki/libvirt/servercert.pem ']'
+ wait_for_file /etc/pki/libvirt/clientcert.pem
+ local file=/etc/pki/libvirt/clientcert.pem
+ '[' '!' -f /etc/pki/libvirt/clientcert.pem ']'
+ wait_for_file /etc/pki/qemu/server-cert.pem
+ local file=/etc/pki/qemu/server-cert.pem
+ '[' '!' -f /etc/pki/qemu/server-cert.pem ']'
+ wait_for_file /etc/pki/qemu/client-cert.pem
+ local file=/etc/pki/qemu/client-cert.pem
+ '[' '!' -f /etc/pki/qemu/client-cert.pem ']'
+ wait_for_file /etc/pki/libvirt/private/serverkey.pem
+ local file=/etc/pki/libvirt/private/serverkey.pem
+ '[' '!' -f /etc/pki/libvirt/private/serverkey.pem ']'
+ wait_for_file /etc/pki/libvirt/private/clientkey.pem
+ local file=/etc/pki/libvirt/private/clientkey.pem
+ '[' '!' -f /etc/pki/libvirt/private/clientkey.pem ']'
+ wait_for_file /etc/pki/qemu/server-key.pem
+ local file=/etc/pki/qemu/server-key.pem
+ '[' '!' -f /etc/pki/qemu/server-key.pem ']'
+ wait_for_file /etc/pki/qemu/client-key.pem
+ local file=/etc/pki/qemu/client-key.pem
+ '[' '!' -f /etc/pki/qemu/client-key.pem ']'
+ wait_for_file /etc/pki/libvirt-vnc/ca-cert.pem
+ local file=/etc/pki/libvirt-vnc/ca-cert.pem
+ '[' '!' -f /etc/pki/libvirt-vnc/ca-cert.pem ']'
+ wait_for_file /etc/pki/libvirt-vnc/server-cert.pem
+ local file=/etc/pki/libvirt-vnc/server-cert.pem
+ '[' '!' -f /etc/pki/libvirt-vnc/server-cert.pem ']'
+ wait_for_file /etc/pki/libvirt-vnc/server-key.pem
+ local file=/etc/pki/libvirt-vnc/server-key.pem
+ '[' '!' -f /etc/pki/libvirt-vnc/server-key.pem ']'
++ grep -w libvirtd
++ cat /proc/1/comm /proc/10/comm /proc/100/comm /proc/100056/comm /proc/100070/comm /proc/101299/comm /proc/102/comm /proc/103/comm /proc/10338/comm /proc/10360/comm /proc/10361/comm /proc/104/comm /proc/105/comm /proc/106/comm /proc/107452/comm /proc/108/comm /proc/10846/comm /proc/10847/comm /proc/109/comm /proc/11/comm /proc/110/comm /proc/1100/comm /proc/111/comm /proc/112/comm /proc/112197/comm /proc/112222/comm /proc/112619/comm /proc/112633/comm /proc/112634/comm /proc/113/comm /proc/113537/comm /proc/113915/comm /proc/113942/comm /proc/113965/comm /proc/113988/comm /proc/114/comm /proc/114393/comm /proc/114658/comm /proc/114660/comm /proc/115/comm /proc/115623/comm /proc/115900/comm /proc/115927/comm /proc/115982/comm /proc/116/comm /proc/116072/comm /proc/116113/comm /proc/116120/comm /proc/116221/comm /proc/116222/comm /proc/116232/comm /proc/116500/comm /proc/11678/comm /proc/117/comm /proc/117636/comm /proc/117661/comm /proc/117789/comm /proc/117819/comm /proc/118092/comm /proc/118360/comm /proc/119954/comm /proc/12/comm /proc/12236/comm /proc/122606/comm /proc/12265/comm /proc/12304/comm /proc/12347/comm /proc/12359/comm /proc/124137/comm /proc/124140/comm /proc/12596/comm /proc/126092/comm /proc/12626/comm /proc/12683/comm /proc/12708/comm /proc/12727/comm /proc/127372/comm /proc/127772/comm /proc/127785/comm /proc/127786/comm /proc/129311/comm /proc/13/comm /proc/130688/comm /proc/130712/comm /proc/130726/comm /proc/130756/comm /proc/131431/comm /proc/131868/comm /proc/132006/comm /proc/132766/comm /proc/133441/comm /proc/133467/comm /proc/133991/comm /proc/134829/comm /proc/134830/comm /proc/135953/comm /proc/135966/comm /proc/136340/comm /proc/14/comm /proc/1431/comm /proc/149021/comm /proc/149150/comm /proc/15/comm /proc/150824/comm /proc/150837/comm /proc/150838/comm /proc/152115/comm /proc/152116/comm /proc/1549/comm /proc/1550/comm /proc/1551/comm /proc/1552/comm /proc/1556/comm /proc/159391/comm /proc/159392/comm /proc/159397/comm /proc/159398/comm /proc/159552/comm /proc/16/comm /proc/160139/comm /proc/160162/comm /proc/160230/comm /proc/160232/comm /proc/160408/comm /proc/160537/comm /proc/160571/comm /proc/160584/comm /proc/160614/comm /proc/160615/comm /proc/160616/comm /proc/160617/comm /proc/161136/comm /proc/161163/comm /proc/161445/comm /proc/161467/comm /proc/161967/comm /proc/161968/comm /proc/162296/comm /proc/1623/comm /proc/162323/comm /proc/162363/comm /proc/162392/comm /proc/162536/comm /proc/162542/comm /proc/162574/comm /proc/162594/comm /proc/162650/comm /proc/162663/comm /proc/1627/comm /proc/162809/comm /proc/162840/comm /proc/162948/comm /proc/162974/comm /proc/163223/comm /proc/163414/comm /proc/163419/comm /proc/1636/comm /proc/163850/comm /proc/163953/comm /proc/164185/comm /proc/164209/comm /proc/164415/comm /proc/164432/comm /proc/164438/comm /proc/164490/comm /proc/164491/comm /proc/164501/comm /proc/164699/comm /proc/165/comm /proc/166/comm /proc/166330/comm /proc/166391/comm /proc/166465/comm /proc/166474/comm /proc/166556/comm /proc/166584/comm /proc/166610/comm /proc/166633/comm /proc/166659/comm /proc/166693/comm /proc/166724/comm /proc/166756/comm /proc/166812/comm /proc/166858/comm /proc/166901/comm /proc/167/comm /proc/167292/comm /proc/167316/comm /proc/167840/comm /proc/168/comm /proc/169/comm /proc/170/comm /proc/170497/comm /proc/171/comm /proc/172/comm /proc/172722/comm /proc/172725/comm /proc/173/comm /proc/173310/comm /proc/173486/comm /proc/173504/comm /proc/174855/comm /proc/177/comm /proc/177784/comm /proc/177836/comm /proc/177837/comm /proc/177847/comm /proc/177872/comm /proc/178256/comm /proc/178291/comm /proc/178292/comm /proc/178395/comm /proc/178425/comm /proc/178426/comm /proc/179/comm /proc/179170/comm /proc/179196/comm /proc/179504/comm /proc/179505/comm /proc/179667/comm /proc/179669/comm /proc/179812/comm /proc/18/comm /proc/180/comm /proc/180464/comm /proc/180487/comm /proc/180638/comm /proc/180655/comm /proc/180661/comm /proc/180737/comm /proc/180738/comm /proc/180748/comm /proc/180926/comm /proc/182/comm /proc/182213/comm /proc/182233/comm /proc/182276/comm /proc/182294/comm /proc/182394/comm /proc/182494/comm /proc/182517/comm /proc/182551/comm /proc/182584/comm /proc/182596/comm /proc/182731/comm /proc/182758/comm /proc/182843/comm /proc/183/comm /proc/183274/comm /proc/183297/comm /proc/183756/comm /proc/185/comm /proc/186/comm /proc/186668/comm /proc/186793/comm /proc/186794/comm /proc/186807/comm /proc/18685/comm /proc/187/comm /proc/18705/comm /proc/18728/comm /proc/187531/comm /proc/18754/comm /proc/187547/comm /proc/18771/comm /proc/187877/comm /proc/187900/comm /proc/188/comm /proc/188095/comm /proc/188532/comm /proc/188615/comm /proc/188684/comm /proc/188707/comm /proc/188780/comm /proc/188788/comm /proc/189/comm /proc/189389/comm /proc/189395/comm /proc/19/comm /proc/190/comm /proc/192153/comm /proc/192522/comm /proc/192582/comm /proc/192736/comm /proc/192783/comm /proc/192992/comm /proc/193129/comm /proc/193130/comm /proc/193131/comm /proc/193250/comm /proc/193503/comm /proc/193504/comm /proc/193537/comm /proc/193538/comm /proc/193551/comm /proc/193564/comm /proc/193565/comm /proc/193610/comm /proc/193623/comm /proc/193670/comm /proc/193696/comm /proc/193939/comm /proc/193953/comm /proc/193960/comm /proc/193961/comm /proc/193970/comm /proc/193972/comm /proc/193973/comm /proc/193974/comm /proc/2/comm /proc/20/comm /proc/202/comm /proc/203/comm /proc/207/comm /proc/21/comm /proc/215/comm /proc/21653/comm /proc/21713/comm /proc/21714/comm /proc/21734/comm /proc/219/comm /proc/22/comm /proc/220/comm /proc/225/comm /proc/24/comm /proc/247/comm /proc/24998/comm /proc/25/comm /proc/25275/comm /proc/25292/comm /proc/25317/comm /proc/25329/comm /proc/26/comm /proc/269/comm /proc/27/comm /proc/28/comm /proc/287/comm /proc/291/comm /proc/292/comm /proc/293/comm /proc/29680/comm /proc/29947/comm /proc/29965/comm /proc/29990/comm /proc/3/comm /proc/30/comm /proc/30003/comm /proc/31/comm /proc/312/comm /proc/313/comm /proc/317/comm /proc/318/comm /proc/319/comm /proc/32/comm /proc/320/comm /proc/321/comm /proc/322/comm /proc/323/comm /proc/324/comm /proc/325/comm /proc/33/comm /proc/34/comm /proc/34370/comm /proc/34640/comm /proc/34659/comm /proc/34685/comm /proc/34697/comm /proc/36/comm /proc/365/comm /proc/37/comm /proc/38/comm /proc/39/comm /proc/39228/comm /proc/39230/comm /proc/39344/comm /proc/39365/comm /proc/39390/comm /proc/39418/comm /proc/39447/comm /proc/396/comm /proc/4/comm /proc/40/comm /proc/400/comm /proc/40922/comm /proc/41915/comm /proc/41937/comm /proc/41966/comm /proc/41971/comm /proc/41974/comm /proc/42/comm /proc/42005/comm /proc/42054/comm /proc/42068/comm /proc/42080/comm /proc/42094/comm /proc/42160/comm /proc/42185/comm /proc/42197/comm /proc/42215/comm /proc/42327/comm /proc/42388/comm /proc/42557/comm /proc/42582/comm /proc/42608/comm /proc/43/comm /proc/43278/comm /proc/43297/comm /proc/43328/comm /proc/43341/comm /proc/43602/comm /proc/43786/comm /proc/44/comm /proc/44212/comm /proc/44531/comm /proc/44633/comm /proc/44657/comm /proc/44695/comm /proc/45/comm /proc/45061/comm /proc/45085/comm /proc/45101/comm /proc/45124/comm /proc/45156/comm /proc/45174/comm /proc/455/comm /proc/45559/comm /proc/45584/comm /proc/45708/comm /proc/45732/comm /proc/46/comm /proc/46071/comm /proc/46095/comm /proc/46111/comm /proc/46139/comm /proc/46149/comm /proc/46179/comm /proc/46293/comm /proc/46337/comm /proc/46383/comm /proc/48/comm /proc/48175/comm /proc/48203/comm /proc/48237/comm /proc/48300/comm /proc/48325/comm /proc/48605/comm /proc/48620/comm /proc/48676/comm /proc/48722/comm /proc/49/comm /proc/49069/comm /proc/49093/comm /proc/49108/comm /proc/49135/comm /proc/49205/comm /proc/49538/comm /proc/49708/comm /proc/49733/comm /proc/49856/comm /proc/5/comm /proc/50/comm /proc/50019/comm /proc/50047/comm /proc/50436/comm /proc/50459/comm /proc/50486/comm /proc/50570/comm /proc/50647/comm /proc/50741/comm /proc/50808/comm /proc/50856/comm /proc/51/comm /proc/51696/comm /proc/52/comm /proc/523/comm /proc/52460/comm /proc/52485/comm /proc/52681/comm /proc/52705/comm /proc/52745/comm /proc/52867/comm /proc/53066/comm /proc/53160/comm /proc/54/comm /proc/55/comm /proc/56/comm /proc/57/comm /proc/57385/comm /proc/57408/comm /proc/58/comm /proc/58071/comm /proc/58096/comm /proc/58109/comm /proc/58142/comm /proc/58160/comm /proc/58185/comm /proc/58365/comm /proc/58389/comm /proc/58454/comm /proc/58488/comm /proc/58531/comm /proc/58645/comm /proc/6/comm /proc/60/comm /proc/61/comm /proc/616/comm /proc/619/comm /proc/62/comm /proc/622/comm /proc/62667/comm /proc/628/comm /proc/62886/comm /proc/629/comm /proc/62928/comm /proc/63/comm /proc/63044/comm /proc/63067/comm /proc/63085/comm /proc/63119/comm /proc/63134/comm /proc/63159/comm /proc/63358/comm /proc/63371/comm /proc/63651/comm /proc/63652/comm /proc/63814/comm /proc/63821/comm /proc/64/comm /proc/64064/comm /proc/64103/comm /proc/64257/comm /proc/64258/comm /proc/64261/comm /proc/64262/comm /proc/64312/comm /proc/64434/comm /proc/64474/comm /proc/645/comm /proc/64564/comm /proc/64626/comm /proc/64860/comm /proc/64886/comm /proc/649/comm /proc/64911/comm /proc/64937/comm /proc/64952/comm /proc/64975/comm /proc/65271/comm /proc/65272/comm /proc/65322/comm /proc/65438/comm /proc/65465/comm /proc/65561/comm /proc/65837/comm /proc/65866/comm /proc/66/comm /proc/66007/comm /proc/66031/comm /proc/66039/comm /proc/66042/comm /proc/66043/comm /proc/66044/comm /proc/66045/comm /proc/66060/comm /proc/66659/comm /proc/66811/comm /proc/67/comm /proc/67007/comm /proc/67033/comm /proc/67211/comm /proc/67357/comm /proc/67392/comm /proc/67690/comm /proc/67793/comm /proc/67828/comm /proc/67856/comm /proc/67873/comm /proc/68/comm /proc/68074/comm /proc/68124/comm /proc/68168/comm /proc/68260/comm /proc/68473/comm /proc/68541/comm /proc/68581/comm /proc/68790/comm /proc/68902/comm /proc/68923/comm /proc/68952/comm /proc/69/comm /proc/69220/comm /proc/69245/comm /proc/69577/comm /proc/69593/comm /proc/69599/comm /proc/69682/comm /proc/69683/comm /proc/69693/comm /proc/69761/comm /proc/70/comm /proc/708/comm /proc/71011/comm /proc/71043/comm /proc/711/comm /proc/712/comm /proc/72/comm /proc/726/comm /proc/73/comm /proc/73970/comm /proc/74/comm /proc/74552/comm /proc/74576/comm /proc/74577/comm /proc/74578/comm /proc/74579/comm /proc/74581/comm /proc/74582/comm /proc/74588/comm /proc/74589/comm /proc/74590/comm /proc/74591/comm /proc/74592/comm /proc/74593/comm /proc/74594/comm /proc/74595/comm /proc/75/comm /proc/76/comm /proc/78/comm /proc/79/comm /proc/8/comm /proc/80/comm /proc/80624/comm /proc/80648/comm /proc/80738/comm /proc/80755/comm /proc/80761/comm /proc/80876/comm /proc/80877/comm /proc/80887/comm /proc/80978/comm /proc/81/comm /proc/82/comm /proc/82165/comm /proc/82189/comm /proc/83440/comm /proc/83529/comm /proc/84/comm /proc/85/comm /proc/86/comm /proc/87/comm /proc/871/comm /proc/87464/comm /proc/87476/comm /proc/88/comm /proc/88185/comm /proc/88209/comm /proc/89089/comm /proc/90/comm /proc/91/comm /proc/92/comm /proc/9233/comm /proc/9250/comm /proc/9266/comm /proc/93/comm /proc/93071/comm /proc/9348/comm /proc/94/comm /proc/95137/comm /proc/95160/comm /proc/95423/comm /proc/95457/comm /proc/95466/comm /proc/95574/comm /proc/95575/comm /proc/95585/comm /proc/95744/comm /proc/96/comm /proc/97/comm /proc/98/comm /proc/98317/comm /proc/98345/comm /proc/98494/comm /proc/98521/comm /proc/98861/comm /proc/98863/comm /proc/98949/comm /proc/99/comm /proc/9968/comm /proc/self/comm /proc/thread-self/comm
+ '[' -n '' ']'
+ rm -f /var/run/libvirtd.pid
+ [[ -c /dev/kvm ]]
+ chmod 660 /dev/kvm
+ chown root:kvm /dev/kvm
+ CGROUPS=
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/blkio ']'
+ grep -w blkio /sys/fs/cgroup/cgroup.controllers
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/cpu ']'
+ grep -w cpu /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=cpu,
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/devices ']'
+ grep -w devices /sys/fs/cgroup/cgroup.controllers
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/freezer ']'
+ grep -w freezer /sys/fs/cgroup/cgroup.controllers
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/hugetlb ']'
+ grep -w hugetlb /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=hugetlb,
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/memory ']'
+ grep -w memory /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=memory,
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/net_cls ']'
+ grep -w net_cls /sys/fs/cgroup/cgroup.controllers
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/perf_event ']'
+ grep -w perf_event /sys/fs/cgroup/cgroup.controllers
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/rdma ']'
+ grep -w rdma /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=rdma,
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/misc ']'
+ grep -w misc /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=misc,
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/pids ']'
+ grep -w pids /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=pids,
+ cgcreate -g cpu,hugetlb,memory,rdma,misc,pids:/osh-libvirt
++ cat /proc/meminfo
++ grep HugePages_Total
++ tr -cd '[:digit:]'
+ hp_count=0
+ '[' 00 -gt 0 ']'
+ '[' -n 457eb676-33da-42ec-9a8c-9293d545c337 ']'
+ cgexec -g cpu,hugetlb,memory,rdma,misc,pids:/osh-libvirt systemd-run --scope --slice=system libvirtd --listen
++ mktemp --suffix .xml
+ tmpsecret=/tmp/tmp.97S9vdMYSB.xml
+ '[' -n '' ']'
+ trap cleanup EXIT
+ TIMEOUT=60
+ [[ ! -f /var/run/libvirtd.pid ]]
+ [[ 60 -gt 0 ]]
+ let TIMEOUT-=1
+ sleep 1
Running as unit: run-r805af51d15ae402885956c2771623728.scope; invocation ID: 9df2603743764f11b6e04d9421dca57c
+ [[ ! -f /var/run/libvirtd.pid ]]
+ TIMEOUT=10
+ [[ ! -e /var/run/libvirt/libvirt-sock ]]
+ '[' -z '' ']'
+ '[' -n cinder ']'
++ awk '/key/{print $3}' /etc/ceph/ceph.client.cinder.keyring
+ CEPH_CINDER_KEYRING=AQCcer9qhvK6AhAAjaWsSCS7MqTYMDQfioOArw==
+ '[' -n cinder ']'
+ create_virsh_libvirt_secret cinder 457eb676-33da-42ec-9a8c-9293d545c337 AQCcer9qhvK6AhAAjaWsSCS7MqTYMDQfioOArw==
+ sec_user=cinder
+ sec_uuid=457eb676-33da-42ec-9a8c-9293d545c337
+ sec_ceph_keyring=AQCcer9qhvK6AhAAjaWsSCS7MqTYMDQfioOArw==
+ cat
+ virsh secret-define --file /tmp/tmp.97S9vdMYSB.xml
Secret 457eb676-33da-42ec-9a8c-9293d545c337 created

+ virsh secret-set-value --secret 457eb676-33da-42ec-9a8c-9293d545c337 --base64 AQCcer9qhvK6AhAAjaWsSCS7MqTYMDQfioOArw==
error: Passing secret value as command-line argument is insecure!
Secret value set

+ '[' -n '' ']'
+ '[' -n '' ']'
+ cleanup
+ rm -f /tmp/tmp.97S9vdMYSB.xml
+ '[' -n '' ']'
++ cat /var/run/libvirtd.pid
+ LIBVIRTD_PID=193995
+ kill 193995
+ tail --pid=193995 -f /dev/null
+ cgexec -g cpu,hugetlb,memory,rdma,misc,pids:/osh-libvirt systemd-run --scope --slice=system libvirtd --listen
Running as unit: run-r1d6af6db28bb4c0d91fd6e8363eed122.scope; invocation ID: fb612ea63a15449680b37d32367951cc