+ wait_for_file /etc/pki/CA/cacert.pem
+ local file=/etc/pki/CA/cacert.pem
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ sleep 1
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ sleep 1
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ sleep 1
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ sleep 1
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ sleep 1
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ wait_for_file /etc/pki/qemu/ca-cert.pem
+ local file=/etc/pki/qemu/ca-cert.pem
+ '[' '!' -f /etc/pki/qemu/ca-cert.pem ']'
+ wait_for_file /etc/pki/libvirt/servercert.pem
+ local file=/etc/pki/libvirt/servercert.pem
+ '[' '!' -f /etc/pki/libvirt/servercert.pem ']'
+ wait_for_file /etc/pki/libvirt/clientcert.pem
+ local file=/etc/pki/libvirt/clientcert.pem
+ '[' '!' -f /etc/pki/libvirt/clientcert.pem ']'
+ wait_for_file /etc/pki/qemu/server-cert.pem
+ local file=/etc/pki/qemu/server-cert.pem
+ '[' '!' -f /etc/pki/qemu/server-cert.pem ']'
+ wait_for_file /etc/pki/qemu/client-cert.pem
+ local file=/etc/pki/qemu/client-cert.pem
+ '[' '!' -f /etc/pki/qemu/client-cert.pem ']'
+ wait_for_file /etc/pki/libvirt/private/serverkey.pem
+ local file=/etc/pki/libvirt/private/serverkey.pem
+ '[' '!' -f /etc/pki/libvirt/private/serverkey.pem ']'
+ wait_for_file /etc/pki/libvirt/private/clientkey.pem
+ local file=/etc/pki/libvirt/private/clientkey.pem
+ '[' '!' -f /etc/pki/libvirt/private/clientkey.pem ']'
+ wait_for_file /etc/pki/qemu/server-key.pem
+ local file=/etc/pki/qemu/server-key.pem
+ '[' '!' -f /etc/pki/qemu/server-key.pem ']'
+ wait_for_file /etc/pki/qemu/client-key.pem
+ local file=/etc/pki/qemu/client-key.pem
+ '[' '!' -f /etc/pki/qemu/client-key.pem ']'
+ wait_for_file /etc/pki/libvirt-vnc/ca-cert.pem
+ local file=/etc/pki/libvirt-vnc/ca-cert.pem
+ '[' '!' -f /etc/pki/libvirt-vnc/ca-cert.pem ']'
+ wait_for_file /etc/pki/libvirt-vnc/server-cert.pem
+ local file=/etc/pki/libvirt-vnc/server-cert.pem
+ '[' '!' -f /etc/pki/libvirt-vnc/server-cert.pem ']'
+ wait_for_file /etc/pki/libvirt-vnc/server-key.pem
+ local file=/etc/pki/libvirt-vnc/server-key.pem
+ '[' '!' -f /etc/pki/libvirt-vnc/server-key.pem ']'
++ grep -w libvirtd
++ cat /proc/1/comm /proc/10/comm /proc/100/comm /proc/100828/comm /proc/100853/comm /proc/100885/comm /proc/100922/comm /proc/101171/comm /proc/101232/comm /proc/101336/comm /proc/102/comm /proc/102214/comm /proc/103/comm /proc/10343/comm /proc/104/comm /proc/105/comm /proc/105670/comm /proc/106/comm /proc/108/comm /proc/109/comm /proc/11/comm /proc/110/comm /proc/1106/comm /proc/110876/comm /proc/110900/comm /proc/111/comm /proc/11103/comm /proc/11104/comm /proc/111371/comm /proc/111384/comm /proc/111385/comm /proc/112/comm /proc/113/comm /proc/113659/comm /proc/113684/comm /proc/113707/comm /proc/113768/comm /proc/114/comm /proc/114048/comm /proc/114166/comm /proc/114391/comm /proc/114412/comm /proc/114414/comm /proc/115/comm /proc/115001/comm /proc/115277/comm /proc/115375/comm /proc/115815/comm /proc/115839/comm /proc/115932/comm /proc/115949/comm /proc/115955/comm /proc/116/comm /proc/116006/comm /proc/116007/comm /proc/116017/comm /proc/116251/comm /proc/117/comm /proc/117509/comm /proc/117537/comm /proc/117557/comm /proc/117601/comm /proc/119511/comm /proc/12/comm /proc/120043/comm /proc/12036/comm /proc/12211/comm /proc/12406/comm /proc/12507/comm /proc/12537/comm /proc/12593/comm /proc/12617/comm /proc/126236/comm /proc/12636/comm /proc/126387/comm /proc/126790/comm /proc/126876/comm /proc/126913/comm /proc/126914/comm /proc/127421/comm /proc/12865/comm /proc/12894/comm /proc/12895/comm /proc/12952/comm /proc/12976/comm /proc/12996/comm /proc/13/comm /proc/130660/comm /proc/130683/comm /proc/130704/comm /proc/130728/comm /proc/131256/comm /proc/131676/comm /proc/131868/comm /proc/132539/comm /proc/133231/comm /proc/133254/comm /proc/133703/comm /proc/134556/comm /proc/134926/comm /proc/135630/comm /proc/135991/comm /proc/136774/comm /proc/137673/comm /proc/137696/comm /proc/138428/comm /proc/138448/comm /proc/138449/comm /proc/139/comm /proc/139667/comm /proc/139668/comm /proc/14/comm /proc/1439/comm /proc/146734/comm /proc/146735/comm /proc/146737/comm /proc/146738/comm /proc/147041/comm /proc/15/comm /proc/1557/comm /proc/1558/comm /proc/1559/comm /proc/1560/comm /proc/1564/comm /proc/158930/comm /proc/158956/comm /proc/159239/comm /proc/159279/comm /proc/159340/comm /proc/159353/comm /proc/159385/comm /proc/159386/comm /proc/159387/comm /proc/159388/comm /proc/159938/comm /proc/159965/comm /proc/16/comm /proc/160912/comm /proc/160936/comm /proc/160994/comm /proc/160995/comm /proc/161123/comm /proc/161165/comm /proc/161184/comm /proc/161317/comm /proc/161352/comm /proc/161429/comm /proc/161449/comm /proc/161466/comm /proc/161541/comm /proc/161613/comm /proc/161765/comm /proc/161791/comm /proc/162031/comm /proc/162260/comm /proc/162267/comm /proc/162921/comm /proc/162965/comm /proc/1631/comm /proc/163208/comm /proc/163224/comm /proc/163230/comm /proc/163290/comm /proc/163291/comm /proc/163301/comm /proc/1635/comm /proc/163578/comm /proc/1644/comm /proc/165113/comm /proc/165172/comm /proc/165308/comm /proc/165570/comm /proc/165597/comm /proc/165622/comm /proc/165646/comm /proc/165681/comm /proc/165702/comm /proc/165746/comm /proc/165750/comm /proc/165833/comm /proc/165858/comm /proc/165891/comm /proc/166/comm /proc/166060/comm /proc/166726/comm /proc/166736/comm /proc/166760/comm /proc/167/comm /proc/167246/comm /proc/168/comm /proc/169/comm /proc/170/comm /proc/170993/comm /proc/171/comm /proc/171024/comm /proc/171025/comm /proc/171732/comm /proc/171813/comm /proc/172/comm /proc/172964/comm /proc/173/comm /proc/174/comm /proc/174022/comm /proc/175590/comm /proc/175611/comm /proc/176115/comm /proc/176158/comm /proc/176159/comm /proc/176226/comm /proc/176240/comm /proc/176241/comm /proc/176713/comm /proc/176781/comm /proc/176830/comm /proc/176842/comm /proc/177/comm /proc/177111/comm /proc/177112/comm /proc/177115/comm /proc/177116/comm /proc/178041/comm /proc/178065/comm /proc/178302/comm /proc/178320/comm /proc/178326/comm /proc/178382/comm /proc/178383/comm /proc/178393/comm /proc/178647/comm /proc/179/comm /proc/179249/comm /proc/179762/comm /proc/18/comm /proc/180/comm /proc/180073/comm /proc/180122/comm /proc/180291/comm /proc/180324/comm /proc/180395/comm /proc/180425/comm /proc/180582/comm /proc/180808/comm /proc/180821/comm /proc/182/comm /proc/184/comm /proc/184404/comm /proc/184407/comm /proc/185/comm /proc/185487/comm /proc/185599/comm /proc/185602/comm /proc/186/comm /proc/186729/comm /proc/186791/comm /proc/186805/comm /proc/187/comm /proc/187436/comm /proc/187458/comm /proc/188/comm /proc/188012/comm /proc/188067/comm /proc/188129/comm /proc/188152/comm /proc/188220/comm /proc/188231/comm /proc/188874/comm /proc/188875/comm /proc/189/comm /proc/189118/comm /proc/189119/comm /proc/189120/comm /proc/189340/comm /proc/189376/comm /proc/189389/comm /proc/189390/comm /proc/189683/comm /proc/189684/comm /proc/189686/comm /proc/189687/comm /proc/189688/comm /proc/189689/comm /proc/189690/comm /proc/19/comm /proc/19035/comm /proc/19054/comm /proc/19075/comm /proc/191/comm /proc/19103/comm /proc/19121/comm /proc/191254/comm /proc/191269/comm /proc/191270/comm /proc/191271/comm /proc/191272/comm /proc/191273/comm /proc/191274/comm /proc/191680/comm /proc/192063/comm /proc/192098/comm /proc/192206/comm /proc/192232/comm /proc/192245/comm /proc/192251/comm /proc/192346/comm /proc/192348/comm /proc/192359/comm /proc/192612/comm /proc/192613/comm /proc/192679/comm /proc/192987/comm /proc/193002/comm /proc/193022/comm /proc/193306/comm /proc/193339/comm /proc/193388/comm /proc/193413/comm /proc/193589/comm /proc/193685/comm /proc/193746/comm /proc/193749/comm /proc/193751/comm /proc/193755/comm /proc/193756/comm /proc/193757/comm /proc/197/comm /proc/2/comm /proc/20/comm /proc/202/comm /proc/203/comm /proc/204/comm /proc/205/comm /proc/206/comm /proc/21/comm /proc/215/comm /proc/218/comm /proc/219/comm /proc/22/comm /proc/22023/comm /proc/22096/comm /proc/22097/comm /proc/22112/comm /proc/224/comm /proc/24/comm /proc/246/comm /proc/25/comm /proc/25351/comm /proc/25610/comm /proc/25626/comm /proc/25652/comm /proc/25665/comm /proc/26/comm /proc/267/comm /proc/27/comm /proc/28/comm /proc/29857/comm /proc/299/comm /proc/3/comm /proc/30/comm /proc/30120/comm /proc/30138/comm /proc/30163/comm /proc/30176/comm /proc/302/comm /proc/303/comm /proc/31/comm /proc/32/comm /proc/323/comm /proc/324/comm /proc/328/comm /proc/329/comm /proc/33/comm /proc/330/comm /proc/331/comm /proc/332/comm /proc/333/comm /proc/334/comm /proc/335/comm /proc/336/comm /proc/34/comm /proc/34365/comm /proc/34632/comm /proc/34649/comm /proc/34673/comm /proc/34685/comm /proc/36/comm /proc/37/comm /proc/376/comm /proc/38/comm /proc/39/comm /proc/39190/comm /proc/39192/comm /proc/39347/comm /proc/39366/comm /proc/39411/comm /proc/39437/comm /proc/39454/comm /proc/4/comm /proc/40/comm /proc/409/comm /proc/412/comm /proc/42/comm /proc/42035/comm /proc/42080/comm /proc/42082/comm /proc/42097/comm /proc/42103/comm /proc/42115/comm /proc/42183/comm /proc/42191/comm /proc/42203/comm /proc/42210/comm /proc/42288/comm /proc/42302/comm /proc/42319/comm /proc/42357/comm /proc/42455/comm /proc/42509/comm /proc/42622/comm /proc/42650/comm /proc/42684/comm /proc/43/comm /proc/43435/comm /proc/43461/comm /proc/43477/comm /proc/43498/comm /proc/43739/comm /proc/43953/comm /proc/44/comm /proc/44036/comm /proc/44350/comm /proc/44810/comm /proc/44834/comm /proc/44861/comm /proc/45/comm /proc/45162/comm /proc/45185/comm /proc/45241/comm /proc/45283/comm /proc/45309/comm /proc/45344/comm /proc/45661/comm /proc/45686/comm /proc/45827/comm /proc/46/comm /proc/46184/comm /proc/46207/comm /proc/46221/comm /proc/46247/comm /proc/46266/comm /proc/46293/comm /proc/46410/comm /proc/46459/comm /proc/46504/comm /proc/466/comm /proc/48/comm /proc/48108/comm /proc/48140/comm /proc/48202/comm /proc/48225/comm /proc/48459/comm /proc/48472/comm /proc/48510/comm /proc/48582/comm /proc/49/comm /proc/49080/comm /proc/49116/comm /proc/49233/comm /proc/49256/comm /proc/49302/comm /proc/49423/comm /proc/49593/comm /proc/49616/comm /proc/49737/comm /proc/49970/comm /proc/5/comm /proc/50/comm /proc/50001/comm /proc/50317/comm /proc/50339/comm /proc/50449/comm /proc/50504/comm /proc/50602/comm /proc/50631/comm /proc/50697/comm /proc/50747/comm /proc/51/comm /proc/52/comm /proc/52457/comm /proc/52480/comm /proc/52690/comm /proc/52797/comm /proc/52821/comm /proc/52860/comm /proc/53064/comm /proc/53071/comm /proc/53259/comm /proc/535/comm /proc/54/comm /proc/55/comm /proc/56/comm /proc/57/comm /proc/58/comm /proc/58057/comm /proc/58080/comm /proc/58747/comm /proc/58774/comm /proc/58872/comm /proc/58897/comm /proc/58919/comm /proc/58943/comm /proc/59065/comm /proc/59089/comm /proc/59115/comm /proc/59148/comm /proc/59208/comm /proc/59322/comm /proc/6/comm /proc/60/comm /proc/61/comm /proc/62/comm /proc/629/comm /proc/63/comm /proc/633/comm /proc/635/comm /proc/63857/comm /proc/63858/comm /proc/63859/comm /proc/63860/comm /proc/63863/comm /proc/64/comm /proc/64099/comm /proc/64118/comm /proc/64143/comm /proc/64266/comm /proc/64290/comm /proc/643/comm /proc/64304/comm /proc/64346/comm /proc/64347/comm /proc/64374/comm /proc/644/comm /proc/64584/comm /proc/64966/comm /proc/65168/comm /proc/65282/comm /proc/65333/comm /proc/65452/comm /proc/65453/comm /proc/65491/comm /proc/65492/comm /proc/65505/comm /proc/65548/comm /proc/65589/comm /proc/65752/comm /proc/65775/comm /proc/66/comm /proc/660/comm /proc/66108/comm /proc/66141/comm /proc/66170/comm /proc/66195/comm /proc/66212/comm /proc/66235/comm /proc/665/comm /proc/66601/comm /proc/66700/comm /proc/66723/comm /proc/67/comm /proc/67054/comm /proc/67079/comm /proc/67160/comm /proc/67178/comm /proc/67179/comm /proc/67180/comm /proc/67181/comm /proc/67182/comm /proc/67419/comm /proc/67449/comm /proc/67567/comm /proc/67651/comm /proc/67922/comm /proc/67951/comm /proc/68/comm /proc/68183/comm /proc/68250/comm /proc/68264/comm /proc/68309/comm /proc/68355/comm /proc/68646/comm /proc/68672/comm /proc/68901/comm /proc/68942/comm /proc/68967/comm /proc/69/comm /proc/69028/comm /proc/69080/comm /proc/69180/comm /proc/69331/comm /proc/69380/comm /proc/69466/comm /proc/69516/comm /proc/69600/comm /proc/69668/comm /proc/70/comm /proc/70102/comm /proc/70125/comm /proc/70455/comm /proc/70475/comm /proc/70481/comm /proc/70778/comm /proc/70779/comm /proc/70789/comm /proc/70996/comm /proc/72/comm /proc/72109/comm /proc/72146/comm /proc/725/comm /proc/728/comm /proc/72817/comm /proc/72818/comm /proc/729/comm /proc/73/comm /proc/74/comm /proc/742/comm /proc/75/comm /proc/75391/comm /proc/75406/comm /proc/75407/comm /proc/75408/comm /proc/75409/comm /proc/75410/comm /proc/75411/comm /proc/75413/comm /proc/75414/comm /proc/75418/comm /proc/75420/comm /proc/75422/comm /proc/75423/comm /proc/75424/comm /proc/75425/comm /proc/76/comm /proc/78/comm /proc/78640/comm /proc/78860/comm /proc/79/comm /proc/8/comm /proc/80/comm /proc/81/comm /proc/81411/comm /proc/81434/comm /proc/81593/comm /proc/81610/comm /proc/81616/comm /proc/81663/comm /proc/81664/comm /proc/81674/comm /proc/81899/comm /proc/82/comm /proc/82926/comm /proc/82950/comm /proc/84/comm /proc/84169/comm /proc/84869/comm /proc/85/comm /proc/86/comm /proc/86518/comm /proc/86519/comm /proc/87/comm /proc/87689/comm /proc/87971/comm /proc/88/comm /proc/88004/comm /proc/88025/comm /proc/88676/comm /proc/88699/comm /proc/887/comm /proc/89655/comm /proc/90/comm /proc/90629/comm /proc/91/comm /proc/92/comm /proc/9243/comm /proc/92530/comm /proc/9260/comm /proc/9276/comm /proc/93/comm /proc/9358/comm /proc/94/comm /proc/94027/comm /proc/95291/comm /proc/95317/comm /proc/95486/comm /proc/95503/comm /proc/95509/comm /proc/95591/comm /proc/95592/comm /proc/95602/comm /proc/96/comm /proc/96183/comm /proc/97/comm /proc/98/comm /proc/98216/comm /proc/99/comm /proc/9974/comm /proc/self/comm /proc/thread-self/comm
+ '[' -n '' ']'
+ rm -f /var/run/libvirtd.pid
+ [[ -c /dev/kvm ]]
+ chmod 660 /dev/kvm
+ chown root:kvm /dev/kvm
+ CGROUPS=
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/blkio ']'
+ grep -w blkio /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/cpu ']'
+ grep -w cpu /sys/fs/cgroup/cgroup.controllers
+ CGROUPS+=cpu,
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/devices ']'
+ grep -w devices /sys/fs/cgroup/cgroup.controllers
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/freezer ']'
+ grep -w freezer /sys/fs/cgroup/cgroup.controllers
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/hugetlb ']'
+ grep -w hugetlb /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=hugetlb,
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/memory ']'
+ grep -w memory /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=memory,
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/net_cls ']'
+ grep -w net_cls /sys/fs/cgroup/cgroup.controllers
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/perf_event ']'
+ grep -w perf_event /sys/fs/cgroup/cgroup.controllers
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/rdma ']'
+ grep -w rdma /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=rdma,
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/misc ']'
+ grep -w misc /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=misc,
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/pids ']'
+ grep -w pids /sys/fs/cgroup/cgroup.controllers
+ CGROUPS+=pids,
+ cgcreate -g cpu,hugetlb,memory,rdma,misc,pids:/osh-libvirt
cpuset cpu io memory hugetlb pids rdma misc
++ cat /proc/meminfo
++ grep HugePages_Total
++ tr -cd '[:digit:]'
+ hp_count=0
+ '[' 00 -gt 0 ']'
+ '[' -n 457eb676-33da-42ec-9a8c-9293d545c337 ']'
+ cgexec -g cpu,hugetlb,memory,rdma,misc,pids:/osh-libvirt systemd-run --scope --slice=system libvirtd --listen
++ mktemp --suffix .xml
+ tmpsecret=/tmp/tmp.ZLGXEEmsQ3.xml
+ '[' -n '' ']'
+ trap cleanup EXIT
+ TIMEOUT=60
+ [[ ! -f /var/run/libvirtd.pid ]]
+ [[ 60 -gt 0 ]]
+ let TIMEOUT-=1
+ sleep 1
Running scope as unit: run-rb331e0c9a1904382b38f6fb77adc8a95.scope
+ [[ ! -f /var/run/libvirtd.pid ]]
+ TIMEOUT=10
+ [[ ! -e /var/run/libvirt/libvirt-sock ]]
+ '[' -z '' ']'
+ '[' -n cinder ']'
++ awk '/key/{print $3}' /etc/ceph/ceph.client.cinder.keyring
+ CEPH_CINDER_KEYRING=AQAtD5FqiQpzJRAA/NkPrAe3s7V12/aBxCVkmA==
+ '[' -n cinder ']'
+ create_virsh_libvirt_secret cinder 457eb676-33da-42ec-9a8c-9293d545c337 AQAtD5FqiQpzJRAA/NkPrAe3s7V12/aBxCVkmA==
+ sec_user=cinder
+ sec_uuid=457eb676-33da-42ec-9a8c-9293d545c337
+ sec_ceph_keyring=AQAtD5FqiQpzJRAA/NkPrAe3s7V12/aBxCVkmA==
+ cat
+ virsh secret-define --file /tmp/tmp.ZLGXEEmsQ3.xml
Secret 457eb676-33da-42ec-9a8c-9293d545c337 created

+ virsh secret-set-value --secret 457eb676-33da-42ec-9a8c-9293d545c337 --base64 AQAtD5FqiQpzJRAA/NkPrAe3s7V12/aBxCVkmA==
error: Passing secret value as command-line argument is insecure!
Secret value set

+ '[' -n '' ']'
+ cleanup
+ rm -f /tmp/tmp.ZLGXEEmsQ3.xml
+ '[' -n '' ']'
++ cat /var/run/libvirtd.pid
+ LIBVIRTD_PID=193777
+ kill 193777
+ tail --pid=193777 -f /dev/null
+ cgexec -g cpu,hugetlb,memory,rdma,misc,pids:/osh-libvirt systemd-run --scope --slice=system libvirtd --listen
Running scope as unit: run-rb49f9996c4ea4e739d7e9abf10d0a1e0.scope