+ wait_for_file /etc/pki/CA/cacert.pem
+ local file=/etc/pki/CA/cacert.pem
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ sleep 1
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ sleep 1
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ sleep 1
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ sleep 1
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ sleep 1
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ wait_for_file /etc/pki/qemu/ca-cert.pem
+ local file=/etc/pki/qemu/ca-cert.pem
+ '[' '!' -f /etc/pki/qemu/ca-cert.pem ']'
+ wait_for_file /etc/pki/libvirt/servercert.pem
+ local file=/etc/pki/libvirt/servercert.pem
+ '[' '!' -f /etc/pki/libvirt/servercert.pem ']'
+ wait_for_file /etc/pki/libvirt/clientcert.pem
+ local file=/etc/pki/libvirt/clientcert.pem
+ '[' '!' -f /etc/pki/libvirt/clientcert.pem ']'
+ wait_for_file /etc/pki/qemu/server-cert.pem
+ local file=/etc/pki/qemu/server-cert.pem
+ '[' '!' -f /etc/pki/qemu/server-cert.pem ']'
+ wait_for_file /etc/pki/qemu/client-cert.pem
+ local file=/etc/pki/qemu/client-cert.pem
+ '[' '!' -f /etc/pki/qemu/client-cert.pem ']'
+ wait_for_file /etc/pki/libvirt/private/serverkey.pem
+ local file=/etc/pki/libvirt/private/serverkey.pem
+ '[' '!' -f /etc/pki/libvirt/private/serverkey.pem ']'
+ wait_for_file /etc/pki/libvirt/private/clientkey.pem
+ local file=/etc/pki/libvirt/private/clientkey.pem
+ '[' '!' -f /etc/pki/libvirt/private/clientkey.pem ']'
+ wait_for_file /etc/pki/qemu/server-key.pem
+ local file=/etc/pki/qemu/server-key.pem
+ '[' '!' -f /etc/pki/qemu/server-key.pem ']'
+ wait_for_file /etc/pki/qemu/client-key.pem
+ local file=/etc/pki/qemu/client-key.pem
+ '[' '!' -f /etc/pki/qemu/client-key.pem ']'
+ wait_for_file /etc/pki/libvirt-vnc/ca-cert.pem
+ local file=/etc/pki/libvirt-vnc/ca-cert.pem
+ '[' '!' -f /etc/pki/libvirt-vnc/ca-cert.pem ']'
+ wait_for_file /etc/pki/libvirt-vnc/server-cert.pem
+ local file=/etc/pki/libvirt-vnc/server-cert.pem
+ '[' '!' -f /etc/pki/libvirt-vnc/server-cert.pem ']'
+ wait_for_file /etc/pki/libvirt-vnc/server-key.pem
+ local file=/etc/pki/libvirt-vnc/server-key.pem
+ '[' '!' -f /etc/pki/libvirt-vnc/server-key.pem ']'
++ grep -w libvirtd
++ cat /proc/1/comm /proc/10/comm /proc/100/comm /proc/100248/comm /proc/10169/comm /proc/102/comm /proc/102612/comm /proc/103/comm /proc/104/comm /proc/104290/comm /proc/104697/comm /proc/104710/comm /proc/104711/comm /proc/104990/comm /proc/105/comm /proc/106/comm /proc/107794/comm /proc/107819/comm /proc/107834/comm /proc/107859/comm /proc/107991/comm /proc/108/comm /proc/108372/comm /proc/108587/comm /proc/108618/comm /proc/108755/comm /proc/109/comm /proc/10929/comm /proc/10930/comm /proc/109396/comm /proc/109999/comm /proc/11/comm /proc/110/comm /proc/110023/comm /proc/110350/comm /proc/110395/comm /proc/110396/comm /proc/111/comm /proc/111942/comm /proc/112/comm /proc/112016/comm /proc/112860/comm /proc/112929/comm /proc/113/comm /proc/113658/comm /proc/113684/comm /proc/114/comm /proc/114016/comm /proc/114337/comm /proc/114350/comm /proc/114351/comm /proc/115/comm /proc/115372/comm /proc/115373/comm /proc/116/comm /proc/117/comm /proc/1190/comm /proc/12/comm /proc/122242/comm /proc/122243/comm /proc/122245/comm /proc/122246/comm /proc/122313/comm /proc/122610/comm /proc/122635/comm /proc/123476/comm /proc/123567/comm /proc/12362/comm /proc/123634/comm /proc/123673/comm /proc/123686/comm /proc/123719/comm /proc/123720/comm /proc/123721/comm /proc/123722/comm /proc/12391/comm /proc/124170/comm /proc/124194/comm /proc/12447/comm /proc/124585/comm /proc/124610/comm /proc/12473/comm /proc/124766/comm /proc/12492/comm /proc/125255/comm /proc/125283/comm /proc/125425/comm /proc/125449/comm /proc/125552/comm /proc/125569/comm /proc/125576/comm /proc/125643/comm /proc/125713/comm /proc/125714/comm /proc/127214/comm /proc/127259/comm /proc/12727/comm /proc/127365/comm /proc/127496/comm /proc/127521/comm /proc/127536/comm /proc/12756/comm /proc/127565/comm /proc/127622/comm /proc/127674/comm /proc/127784/comm /proc/127860/comm /proc/127888/comm /proc/127948/comm /proc/127984/comm /proc/12811/comm /proc/128231/comm /proc/128243/comm /proc/128269/comm /proc/12836/comm /proc/12856/comm /proc/128592/comm /proc/1295/comm /proc/1296/comm /proc/1297/comm /proc/1298/comm /proc/13/comm /proc/131649/comm /proc/131650/comm /proc/132250/comm /proc/132736/comm /proc/132761/comm /proc/132821/comm /proc/133609/comm /proc/133637/comm /proc/1389/comm /proc/1393/comm /proc/14/comm /proc/1458/comm /proc/1462/comm /proc/1471/comm /proc/148295/comm /proc/148333/comm /proc/148366/comm /proc/148394/comm /proc/148849/comm /proc/148891/comm /proc/148892/comm /proc/148893/comm /proc/148977/comm /proc/148996/comm /proc/148997/comm /proc/14916/comm /proc/149690/comm /proc/149831/comm /proc/149986/comm /proc/149987/comm /proc/15/comm /proc/150069/comm /proc/150070/comm /proc/150260/comm /proc/150584/comm /proc/150598/comm /proc/150825/comm /proc/150849/comm /proc/150913/comm /proc/150935/comm /proc/150952/comm /proc/150959/comm /proc/151041/comm /proc/151092/comm /proc/151093/comm /proc/152260/comm /proc/152284/comm /proc/152334/comm /proc/152374/comm /proc/152385/comm /proc/152410/comm /proc/152418/comm /proc/152476/comm /proc/152481/comm /proc/152485/comm /proc/152568/comm /proc/152829/comm /proc/152847/comm /proc/152875/comm /proc/152913/comm /proc/152936/comm /proc/153414/comm /proc/153429/comm /proc/153591/comm /proc/153597/comm /proc/155478/comm /proc/155543/comm /proc/156022/comm /proc/156023/comm /proc/156035/comm /proc/157121/comm /proc/157132/comm /proc/157346/comm /proc/158071/comm /proc/158081/comm /proc/159152/comm /proc/159163/comm /proc/159423/comm /proc/159424/comm /proc/159425/comm /proc/159599/comm /proc/159606/comm /proc/159637/comm /proc/159638/comm /proc/159651/comm /proc/159665/comm /proc/159666/comm /proc/159776/comm /proc/159777/comm /proc/159778/comm /proc/16/comm /proc/160447/comm /proc/160615/comm /proc/160741/comm /proc/160939/comm /proc/161709/comm /proc/161710/comm /proc/161954/comm /proc/162087/comm /proc/162090/comm /proc/162091/comm /proc/162211/comm /proc/162357/comm /proc/162668/comm /proc/162684/comm /proc/162685/comm /proc/162686/comm /proc/162687/comm /proc/162688/comm /proc/162689/comm /proc/162698/comm /proc/162716/comm /proc/162719/comm /proc/162724/comm /proc/162725/comm /proc/162726/comm /proc/162727/comm /proc/162728/comm /proc/162729/comm /proc/162730/comm /proc/162731/comm /proc/162732/comm /proc/162733/comm /proc/162734/comm /proc/162735/comm /proc/162736/comm /proc/162737/comm /proc/162738/comm /proc/162739/comm /proc/162740/comm /proc/162741/comm /proc/162742/comm /proc/162743/comm /proc/162744/comm /proc/162745/comm /proc/162746/comm /proc/162747/comm /proc/162748/comm /proc/162749/comm /proc/162750/comm /proc/162751/comm /proc/162752/comm /proc/162753/comm /proc/162754/comm /proc/162908/comm /proc/162955/comm /proc/162980/comm /proc/163031/comm /proc/163078/comm /proc/163145/comm /proc/163236/comm /proc/163268/comm /proc/163316/comm /proc/163343/comm /proc/163344/comm /proc/163366/comm /proc/163401/comm /proc/163403/comm /proc/163488/comm /proc/163489/comm /proc/163490/comm /proc/168/comm /proc/169/comm /proc/170/comm /proc/171/comm /proc/172/comm /proc/173/comm /proc/174/comm /proc/175/comm /proc/176/comm /proc/178/comm /proc/179/comm /proc/18/comm /proc/181/comm /proc/182/comm /proc/184/comm /proc/185/comm /proc/186/comm /proc/188/comm /proc/189/comm /proc/19/comm /proc/190/comm /proc/191/comm /proc/193/comm /proc/194/comm /proc/195/comm /proc/196/comm /proc/19622/comm /proc/19642/comm /proc/19664/comm /proc/19690/comm /proc/197/comm /proc/19708/comm /proc/2/comm /proc/20/comm /proc/201/comm /proc/21/comm /proc/211/comm /proc/212/comm /proc/21767/comm /proc/21777/comm /proc/21778/comm /proc/21792/comm /proc/22/comm /proc/220/comm /proc/221/comm /proc/22159/comm /proc/226/comm /proc/24/comm /proc/24563/comm /proc/248/comm /proc/24842/comm /proc/24859/comm /proc/24882/comm /proc/24895/comm /proc/25/comm /proc/26/comm /proc/27/comm /proc/272/comm /proc/28/comm /proc/283/comm /proc/291/comm /proc/29186/comm /proc/292/comm /proc/293/comm /proc/294/comm /proc/29463/comm /proc/29481/comm /proc/29507/comm /proc/29519/comm /proc/3/comm /proc/30/comm /proc/31/comm /proc/313/comm /proc/314/comm /proc/32/comm /proc/33/comm /proc/33847/comm /proc/34/comm /proc/34118/comm /proc/34135/comm /proc/34159/comm /proc/34172/comm /proc/344/comm /proc/352/comm /proc/353/comm /proc/356/comm /proc/36/comm /proc/361/comm /proc/37/comm /proc/37423/comm /proc/37424/comm /proc/38/comm /proc/380/comm /proc/388/comm /proc/39/comm /proc/394/comm /proc/395/comm /proc/396/comm /proc/39808/comm /proc/39830/comm /proc/39850/comm /proc/39863/comm /proc/39885/comm /proc/39888/comm /proc/39951/comm /proc/39954/comm /proc/39955/comm /proc/39979/comm /proc/4/comm /proc/40/comm /proc/40046/comm /proc/40059/comm /proc/401/comm /proc/402/comm /proc/40202/comm /proc/40269/comm /proc/40436/comm /proc/40459/comm /proc/40485/comm /proc/41163/comm /proc/41195/comm /proc/41209/comm /proc/41242/comm /proc/41549/comm /proc/41601/comm /proc/41609/comm /proc/41843/comm /proc/42/comm /proc/42219/comm /proc/42640/comm /proc/42778/comm /proc/42800/comm /proc/42825/comm /proc/43/comm /proc/43189/comm /proc/43221/comm /proc/43222/comm /proc/43249/comm /proc/43284/comm /proc/43405/comm /proc/43644/comm /proc/43667/comm /proc/43804/comm /proc/43949/comm /proc/44/comm /proc/44256/comm /proc/44279/comm /proc/44299/comm /proc/44324/comm /proc/44339/comm /proc/44362/comm /proc/44473/comm /proc/44522/comm /proc/44566/comm /proc/45/comm /proc/459/comm /proc/46/comm /proc/46357/comm /proc/46388/comm /proc/46451/comm /proc/46475/comm /proc/46700/comm /proc/46713/comm /proc/46751/comm /proc/46817/comm /proc/47185/comm /proc/47212/comm /proc/47299/comm /proc/47323/comm /proc/47379/comm /proc/47497/comm /proc/47694/comm /proc/47718/comm /proc/47981/comm /proc/48/comm /proc/48126/comm /proc/48152/comm /proc/48394/comm /proc/48468/comm /proc/48552/comm /proc/48575/comm /proc/48661/comm /proc/48747/comm /proc/48760/comm /proc/48866/comm /proc/49/comm /proc/49834/comm /proc/5/comm /proc/50/comm /proc/50183/comm /proc/50207/comm /proc/50307/comm /proc/51/comm /proc/52/comm /proc/52259/comm /proc/52283/comm /proc/524/comm /proc/52869/comm /proc/52891/comm /proc/52905/comm /proc/52931/comm /proc/53065/comm /proc/53089/comm /proc/53153/comm /proc/53202/comm /proc/53307/comm /proc/54/comm /proc/55/comm /proc/55842/comm /proc/55987/comm /proc/56/comm /proc/56021/comm /proc/56066/comm /proc/56095/comm /proc/56105/comm /proc/56130/comm /proc/56313/comm /proc/56336/comm /proc/56467/comm /proc/56631/comm /proc/56656/comm /proc/56737/comm /proc/56738/comm /proc/56739/comm /proc/56740/comm /proc/56796/comm /proc/57/comm /proc/57027/comm /proc/57503/comm /proc/57549/comm /proc/57979/comm /proc/58/comm /proc/58016/comm /proc/58072/comm /proc/58107/comm /proc/58131/comm /proc/58153/comm /proc/58176/comm /proc/58219/comm /proc/58376/comm /proc/58406/comm /proc/58407/comm /proc/58408/comm /proc/58409/comm /proc/58410/comm /proc/58789/comm /proc/58815/comm /proc/58933/comm /proc/59089/comm /proc/59112/comm /proc/59411/comm /proc/59445/comm /proc/59573/comm /proc/59599/comm /proc/59917/comm /proc/59953/comm /proc/6/comm /proc/60/comm /proc/60006/comm /proc/60251/comm /proc/60275/comm /proc/60454/comm /proc/60503/comm /proc/60538/comm /proc/60692/comm /proc/60985/comm /proc/61/comm /proc/61175/comm /proc/61176/comm /proc/61242/comm /proc/61306/comm /proc/61347/comm /proc/61447/comm /proc/61510/comm /proc/61534/comm /proc/616/comm /proc/61721/comm /proc/61739/comm /proc/61746/comm /proc/61809/comm /proc/61912/comm /proc/61913/comm /proc/62/comm /proc/620/comm /proc/622/comm /proc/62807/comm /proc/62832/comm /proc/63/comm /proc/630/comm /proc/631/comm /proc/64/comm /proc/647/comm /proc/648/comm /proc/65580/comm /proc/65594/comm /proc/65595/comm /proc/65596/comm /proc/65597/comm /proc/65598/comm /proc/65600/comm /proc/65601/comm /proc/65605/comm /proc/65606/comm /proc/65609/comm /proc/65610/comm /proc/65611/comm /proc/65612/comm /proc/65613/comm /proc/66/comm /proc/67/comm /proc/68/comm /proc/69/comm /proc/70/comm /proc/70051/comm /proc/70075/comm /proc/70218/comm /proc/70236/comm /proc/70243/comm /proc/70297/comm /proc/703/comm /proc/70348/comm /proc/70349/comm /proc/706/comm /proc/707/comm /proc/71319/comm /proc/71342/comm /proc/72/comm /proc/721/comm /proc/73/comm /proc/74/comm /proc/75/comm /proc/75392/comm /proc/75404/comm /proc/76/comm /proc/76003/comm /proc/76027/comm /proc/76678/comm /proc/78/comm /proc/79/comm /proc/8/comm /proc/80/comm /proc/80423/comm /proc/80698/comm /proc/80721/comm /proc/80932/comm /proc/80959/comm /proc/80977/comm /proc/81/comm /proc/81117/comm /proc/81177/comm /proc/81178/comm /proc/82/comm /proc/82930/comm /proc/82931/comm /proc/83163/comm /proc/84/comm /proc/84273/comm /proc/84276/comm /proc/85/comm /proc/85193/comm /proc/86/comm /proc/866/comm /proc/87/comm /proc/87934/comm /proc/87975/comm /proc/88/comm /proc/88053/comm /proc/88076/comm /proc/88176/comm /proc/88281/comm /proc/88979/comm /proc/9/comm /proc/90/comm /proc/90085/comm /proc/9067/comm /proc/90672/comm /proc/90678/comm /proc/9084/comm /proc/91/comm /proc/9100/comm /proc/9182/comm /proc/92/comm /proc/92263/comm /proc/92289/comm /proc/92577/comm /proc/92614/comm /proc/92627/comm /proc/92628/comm /proc/93/comm /proc/93646/comm /proc/93669/comm /proc/93691/comm /proc/93724/comm /proc/93964/comm /proc/94/comm /proc/94152/comm /proc/94154/comm /proc/95103/comm /proc/95257/comm /proc/95259/comm /proc/95394/comm /proc/95419/comm /proc/95503/comm /proc/95520/comm /proc/95528/comm /proc/95591/comm /proc/95644/comm /proc/95645/comm /proc/96/comm /proc/97/comm /proc/97130/comm /proc/97155/comm /proc/97172/comm /proc/97204/comm /proc/97567/comm /proc/9798/comm /proc/98/comm /proc/98544/comm /proc/99/comm /proc/99081/comm /proc/99900/comm /proc/self/comm /proc/thread-self/comm
+ '[' -n '' ']'
+ rm -f /var/run/libvirtd.pid
+ [[ -c /dev/kvm ]]
+ chmod 660 /dev/kvm
+ chown root:kvm /dev/kvm
+ CGROUPS=
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/blkio ']'
+ grep -w blkio /sys/fs/cgroup/cgroup.controllers
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/cpu ']'
+ grep -w cpu /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=cpu,
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/devices ']'
+ grep -w devices /sys/fs/cgroup/cgroup.controllers
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/freezer ']'
+ grep -w freezer /sys/fs/cgroup/cgroup.controllers
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/hugetlb ']'
+ grep -w hugetlb /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=hugetlb,
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/memory ']'
+ grep -w memory /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=memory,
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/net_cls ']'
+ grep -w net_cls /sys/fs/cgroup/cgroup.controllers
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/perf_event ']'
+ grep -w perf_event /sys/fs/cgroup/cgroup.controllers
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/rdma ']'
+ grep -w rdma /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=rdma,
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/misc ']'
+ grep -w misc /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=misc,
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/pids ']'
+ grep -w pids /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=pids,
+ cgcreate -g cpu,hugetlb,memory,rdma,misc,pids:/osh-libvirt
++ cat /proc/meminfo
++ grep HugePages_Total
++ tr -cd '[:digit:]'
+ hp_count=0
+ '[' 00 -gt 0 ']'
+ '[' -n 457eb676-33da-42ec-9a8c-9293d545c337 ']'
+ cgexec -g cpu,hugetlb,memory,rdma,misc,pids:/osh-libvirt systemd-run --scope --slice=system libvirtd --listen
++ mktemp --suffix .xml
+ tmpsecret=/tmp/tmp.KU1JNDaKx4.xml
+ '[' -n '' ']'
+ trap cleanup EXIT
+ TIMEOUT=60
+ [[ ! -f /var/run/libvirtd.pid ]]
+ [[ 60 -gt 0 ]]
+ let TIMEOUT-=1
+ sleep 1
Running scope as unit: run-reb0bd80d328b499d85b4ca4036a422c3.scope
+ [[ ! -f /var/run/libvirtd.pid ]]
+ TIMEOUT=10
+ [[ ! -e /var/run/libvirt/libvirt-sock ]]
+ '[' -z '' ']'
+ '[' -n cinder ']'
++ awk '/key/{print $3}' /etc/ceph/ceph.client.cinder.keyring
+ CEPH_CINDER_KEYRING=AQCCwe5pAQvHHRAAFgWDGcb1H35xp5IbzCHakw==
+ '[' -n cinder ']'
+ create_virsh_libvirt_secret cinder 457eb676-33da-42ec-9a8c-9293d545c337 AQCCwe5pAQvHHRAAFgWDGcb1H35xp5IbzCHakw==
+ sec_user=cinder
+ sec_uuid=457eb676-33da-42ec-9a8c-9293d545c337
+ sec_ceph_keyring=AQCCwe5pAQvHHRAAFgWDGcb1H35xp5IbzCHakw==
+ cat
+ virsh secret-define --file /tmp/tmp.KU1JNDaKx4.xml
Secret 457eb676-33da-42ec-9a8c-9293d545c337 created

+ virsh secret-set-value --secret 457eb676-33da-42ec-9a8c-9293d545c337 --base64 AQCCwe5pAQvHHRAAFgWDGcb1H35xp5IbzCHakw==
error: Passing secret value as command-line argument is insecure!
Secret value set

+ '[' -n '' ']'
+ cleanup
+ rm -f /tmp/tmp.KU1JNDaKx4.xml
+ '[' -n '' ']'
++ cat /var/run/libvirtd.pid
+ LIBVIRTD_PID=163512
+ kill 163512
+ tail --pid=163512 -f /dev/null
+ cgexec -g cpu,hugetlb,memory,rdma,misc,pids:/osh-libvirt systemd-run --scope --slice=system libvirtd --listen
Running scope as unit: run-r9f315e00d3244191a2f6f5fc35f399e4.scope