+ wait_for_file /etc/pki/CA/cacert.pem
+ local file=/etc/pki/CA/cacert.pem
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ sleep 1
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ sleep 1
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ sleep 1
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ sleep 1
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ sleep 1
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ wait_for_file /etc/pki/qemu/ca-cert.pem
+ local file=/etc/pki/qemu/ca-cert.pem
+ '[' '!' -f /etc/pki/qemu/ca-cert.pem ']'
+ wait_for_file /etc/pki/libvirt/servercert.pem
+ local file=/etc/pki/libvirt/servercert.pem
+ '[' '!' -f /etc/pki/libvirt/servercert.pem ']'
+ wait_for_file /etc/pki/libvirt/clientcert.pem
+ local file=/etc/pki/libvirt/clientcert.pem
+ '[' '!' -f /etc/pki/libvirt/clientcert.pem ']'
+ wait_for_file /etc/pki/qemu/server-cert.pem
+ local file=/etc/pki/qemu/server-cert.pem
+ '[' '!' -f /etc/pki/qemu/server-cert.pem ']'
+ wait_for_file /etc/pki/qemu/client-cert.pem
+ local file=/etc/pki/qemu/client-cert.pem
+ '[' '!' -f /etc/pki/qemu/client-cert.pem ']'
+ wait_for_file /etc/pki/libvirt/private/serverkey.pem
+ local file=/etc/pki/libvirt/private/serverkey.pem
+ '[' '!' -f /etc/pki/libvirt/private/serverkey.pem ']'
+ wait_for_file /etc/pki/libvirt/private/clientkey.pem
+ local file=/etc/pki/libvirt/private/clientkey.pem
+ '[' '!' -f /etc/pki/libvirt/private/clientkey.pem ']'
+ wait_for_file /etc/pki/qemu/server-key.pem
+ local file=/etc/pki/qemu/server-key.pem
+ '[' '!' -f /etc/pki/qemu/server-key.pem ']'
+ wait_for_file /etc/pki/qemu/client-key.pem
+ local file=/etc/pki/qemu/client-key.pem
+ '[' '!' -f /etc/pki/qemu/client-key.pem ']'
+ wait_for_file /etc/pki/libvirt-vnc/ca-cert.pem
+ local file=/etc/pki/libvirt-vnc/ca-cert.pem
+ '[' '!' -f /etc/pki/libvirt-vnc/ca-cert.pem ']'
+ wait_for_file /etc/pki/libvirt-vnc/server-cert.pem
+ local file=/etc/pki/libvirt-vnc/server-cert.pem
+ '[' '!' -f /etc/pki/libvirt-vnc/server-cert.pem ']'
+ wait_for_file /etc/pki/libvirt-vnc/server-key.pem
+ local file=/etc/pki/libvirt-vnc/server-key.pem
+ '[' '!' -f /etc/pki/libvirt-vnc/server-key.pem ']'
++ grep -w libvirtd
++ cat /proc/1/comm /proc/10/comm /proc/100/comm /proc/100459/comm /proc/102/comm /proc/103/comm /proc/10317/comm /proc/10341/comm /proc/104/comm /proc/104169/comm /proc/105/comm /proc/105954/comm /proc/106/comm /proc/108/comm /proc/1086/comm /proc/109/comm /proc/11/comm /proc/110/comm /proc/110613/comm /proc/110636/comm /proc/11078/comm /proc/11079/comm /proc/110977/comm /proc/111/comm /proc/111010/comm /proc/111011/comm /proc/112/comm /proc/112059/comm /proc/112083/comm /proc/112231/comm /proc/112264/comm /proc/112632/comm /proc/112759/comm /proc/112774/comm /proc/112787/comm /proc/113/comm /proc/113445/comm /proc/113833/comm /proc/114/comm /proc/114178/comm /proc/114201/comm /proc/114293/comm /proc/114311/comm /proc/114317/comm /proc/114471/comm /proc/114472/comm /proc/114482/comm /proc/114599/comm /proc/115/comm /proc/116/comm /proc/116046/comm /proc/116070/comm /proc/116183/comm /proc/116228/comm /proc/116584/comm /proc/117/comm /proc/118025/comm /proc/118513/comm /proc/119741/comm /proc/119744/comm /proc/12/comm /proc/122252/comm /proc/122260/comm /proc/122607/comm /proc/124355/comm /proc/12466/comm /proc/12496/comm /proc/12533/comm /proc/12573/comm /proc/12589/comm /proc/125926/comm /proc/125940/comm /proc/125941/comm /proc/127337/comm /proc/12829/comm /proc/12859/comm /proc/129073/comm /proc/129098/comm /proc/129118/comm /proc/12914/comm /proc/129156/comm /proc/12938/comm /proc/12957/comm /proc/129703/comm /proc/13/comm /proc/130235/comm /proc/130431/comm /proc/131177/comm /proc/131879/comm /proc/131900/comm /proc/132164/comm /proc/132218/comm /proc/133038/comm /proc/134276/comm /proc/14/comm /proc/1419/comm /proc/14248/comm /proc/147450/comm /proc/148361/comm /proc/149125/comm /proc/149172/comm /proc/149187/comm /proc/149188/comm /proc/15/comm /proc/150327/comm /proc/150328/comm /proc/1524/comm /proc/1525/comm /proc/1526/comm /proc/1527/comm /proc/1531/comm /proc/157489/comm /proc/157490/comm /proc/157492/comm /proc/157493/comm /proc/157640/comm /proc/158180/comm /proc/158204/comm /proc/158607/comm /proc/158641/comm /proc/158654/comm /proc/158688/comm /proc/158689/comm /proc/158690/comm /proc/158691/comm /proc/158694/comm /proc/159256/comm /proc/159283/comm /proc/1598/comm /proc/16/comm /proc/160022/comm /proc/160077/comm /proc/160109/comm /proc/160110/comm /proc/1602/comm /proc/160372/comm /proc/160395/comm /proc/160449/comm /proc/160478/comm /proc/160626/comm /proc/160627/comm /proc/160662/comm /proc/160687/comm /proc/160735/comm /proc/160759/comm /proc/160941/comm /proc/160963/comm /proc/161018/comm /proc/161041/comm /proc/1611/comm /proc/161307/comm /proc/161549/comm /proc/161555/comm /proc/161959/comm /proc/161963/comm /proc/161965/comm /proc/162206/comm /proc/162230/comm /proc/162534/comm /proc/162551/comm /proc/162557/comm /proc/162620/comm /proc/162621/comm /proc/162631/comm /proc/162814/comm /proc/164369/comm /proc/164443/comm /proc/164550/comm /proc/164678/comm /proc/164708/comm /proc/164723/comm /proc/164752/comm /proc/164810/comm /proc/164869/comm /proc/164930/comm /proc/164985/comm /proc/165/comm /proc/165007/comm /proc/165126/comm /proc/165158/comm /proc/165491/comm /proc/165515/comm /proc/166/comm /proc/166117/comm /proc/166472/comm /proc/167/comm /proc/168/comm /proc/169/comm /proc/170/comm /proc/170141/comm /proc/170401/comm /proc/171/comm /proc/171047/comm /proc/171291/comm /proc/172/comm /proc/172412/comm /proc/172420/comm /proc/172490/comm /proc/173/comm /proc/175415/comm /proc/175849/comm /proc/175869/comm /proc/175870/comm /proc/175952/comm /proc/176/comm /proc/176003/comm /proc/176017/comm /proc/176018/comm /proc/176891/comm /proc/176899/comm /proc/177332/comm /proc/177334/comm /proc/177353/comm /proc/177356/comm /proc/177837/comm /proc/177838/comm /proc/178/comm /proc/178036/comm /proc/178064/comm /proc/178190/comm /proc/178208/comm /proc/178214/comm /proc/178262/comm /proc/178263/comm /proc/178273/comm /proc/178434/comm /proc/179/comm /proc/179127/comm /proc/179796/comm /proc/179801/comm /proc/179876/comm /proc/179891/comm /proc/179905/comm /proc/179992/comm /proc/18/comm /proc/180058/comm /proc/180117/comm /proc/180187/comm /proc/180211/comm /proc/180233/comm /proc/180257/comm /proc/180746/comm /proc/180759/comm /proc/180886/comm /proc/180890/comm /proc/181/comm /proc/183/comm /proc/183888/comm /proc/183944/comm /proc/184492/comm /proc/185/comm /proc/185805/comm /proc/185833/comm /proc/186/comm /proc/186528/comm /proc/186556/comm /proc/187/comm /proc/187016/comm /proc/187066/comm /proc/187146/comm /proc/187170/comm /proc/18724/comm /proc/187294/comm /proc/187305/comm /proc/18744/comm /proc/18766/comm /proc/187661/comm /proc/187666/comm /proc/18793/comm /proc/188/comm /proc/18810/comm /proc/189680/comm /proc/189681/comm /proc/189682/comm /proc/189903/comm /proc/19/comm /proc/190/comm /proc/190115/comm /proc/190151/comm /proc/190152/comm /proc/190165/comm /proc/190178/comm /proc/190179/comm /proc/190722/comm /proc/190877/comm /proc/191/comm /proc/191221/comm /proc/191223/comm /proc/191576/comm /proc/191840/comm /proc/191853/comm /proc/191902/comm /proc/191928/comm /proc/192/comm /proc/192001/comm /proc/192014/comm /proc/192015/comm /proc/192155/comm /proc/192176/comm /proc/192177/comm /proc/192178/comm /proc/192179/comm /proc/192180/comm /proc/192181/comm /proc/192236/comm /proc/192242/comm /proc/192243/comm /proc/192244/comm /proc/193/comm /proc/2/comm /proc/20/comm /proc/200/comm /proc/209/comm /proc/21/comm /proc/21735/comm /proc/21809/comm /proc/21810/comm /proc/21823/comm /proc/22/comm /proc/220/comm /proc/221/comm /proc/226/comm /proc/24/comm /proc/248/comm /proc/25/comm /proc/25065/comm /proc/25333/comm /proc/25350/comm /proc/25375/comm /proc/25387/comm /proc/26/comm /proc/267/comm /proc/27/comm /proc/28/comm /proc/291/comm /proc/293/comm /proc/294/comm /proc/295/comm /proc/29556/comm /proc/296/comm /proc/29838/comm /proc/29856/comm /proc/29880/comm /proc/29893/comm /proc/3/comm /proc/30/comm /proc/31/comm /proc/315/comm /proc/316/comm /proc/32/comm /proc/320/comm /proc/33/comm /proc/34/comm /proc/34364/comm /proc/34633/comm /proc/34651/comm /proc/34677/comm /proc/34690/comm /proc/35195/comm /proc/352/comm /proc/355/comm /proc/36/comm /proc/362/comm /proc/37/comm /proc/373/comm /proc/37864/comm /proc/37866/comm /proc/38/comm /proc/389/comm /proc/39/comm /proc/390/comm /proc/396/comm /proc/4/comm /proc/40/comm /proc/400/comm /proc/40212/comm /proc/40247/comm /proc/40263/comm /proc/40278/comm /proc/40280/comm /proc/40286/comm /proc/40366/comm /proc/40376/comm /proc/40381/comm /proc/40394/comm /proc/40464/comm /proc/40491/comm /proc/40507/comm /proc/40520/comm /proc/40631/comm /proc/40685/comm /proc/40845/comm /proc/40869/comm /proc/40893/comm /proc/41005/comm /proc/41556/comm /proc/41582/comm /proc/41605/comm /proc/41624/comm /proc/41870/comm /proc/42/comm /proc/42081/comm /proc/42501/comm /proc/43/comm /proc/43184/comm /proc/43208/comm /proc/43250/comm /proc/43303/comm /proc/43330/comm /proc/43341/comm /proc/43367/comm /proc/43407/comm /proc/43425/comm /proc/43777/comm /proc/43800/comm /proc/43887/comm /proc/439/comm /proc/44/comm /proc/44297/comm /proc/44320/comm /proc/44343/comm /proc/44369/comm /proc/44385/comm /proc/44404/comm /proc/44521/comm /proc/44568/comm /proc/44612/comm /proc/45/comm /proc/458/comm /proc/46/comm /proc/46571/comm /proc/46665/comm /proc/46695/comm /proc/46729/comm /proc/46754/comm /proc/46984/comm /proc/46997/comm /proc/47060/comm /proc/47137/comm /proc/47468/comm /proc/47490/comm /proc/47564/comm /proc/47587/comm /proc/47632/comm /proc/47712/comm /proc/47945/comm /proc/47968/comm /proc/48/comm /proc/48254/comm /proc/48400/comm /proc/48427/comm /proc/48788/comm /proc/48812/comm /proc/48928/comm /proc/48981/comm /proc/49/comm /proc/49078/comm /proc/49107/comm /proc/49174/comm /proc/49265/comm /proc/5/comm /proc/50/comm /proc/50183/comm /proc/50997/comm /proc/51/comm /proc/51020/comm /proc/51178/comm /proc/51202/comm /proc/51276/comm /proc/51383/comm /proc/51625/comm /proc/51732/comm /proc/52/comm /proc/522/comm /proc/54/comm /proc/55/comm /proc/55878/comm /proc/55902/comm /proc/56/comm /proc/56525/comm /proc/56550/comm /proc/56571/comm /proc/56601/comm /proc/56632/comm /proc/56656/comm /proc/56783/comm /proc/56831/comm /proc/56915/comm /proc/56955/comm /proc/56997/comm /proc/57/comm /proc/57106/comm /proc/58/comm /proc/6/comm /proc/60/comm /proc/61/comm /proc/613/comm /proc/61662/comm /proc/61663/comm /proc/617/comm /proc/61846/comm /proc/619/comm /proc/61913/comm /proc/61958/comm /proc/62/comm /proc/62030/comm /proc/62051/comm /proc/62068/comm /proc/62096/comm /proc/62102/comm /proc/62139/comm /proc/62208/comm /proc/62354/comm /proc/62546/comm /proc/626/comm /proc/62632/comm /proc/62698/comm /proc/627/comm /proc/62988/comm /proc/62989/comm /proc/63/comm /proc/63059/comm /proc/63060/comm /proc/63170/comm /proc/63361/comm /proc/63362/comm /proc/63363/comm /proc/636/comm /proc/63761/comm /proc/63788/comm /proc/63826/comm /proc/63853/comm /proc/63882/comm /proc/63909/comm /proc/63963/comm /proc/63987/comm /proc/64/comm /proc/64104/comm /proc/64131/comm /proc/64425/comm /proc/64455/comm /proc/64573/comm /proc/64820/comm /proc/64844/comm /proc/649/comm /proc/64915/comm /proc/64934/comm /proc/64935/comm /proc/64936/comm /proc/64937/comm /proc/64938/comm /proc/65075/comm /proc/65097/comm /proc/65316/comm /proc/65341/comm /proc/65378/comm /proc/65446/comm /proc/65566/comm /proc/66/comm /proc/66165/comm /proc/66186/comm /proc/66205/comm /proc/66272/comm /proc/66330/comm /proc/66419/comm /proc/66479/comm /proc/66693/comm /proc/66753/comm /proc/66781/comm /proc/67/comm /proc/67108/comm /proc/67150/comm /proc/67195/comm /proc/67319/comm /proc/67369/comm /proc/67380/comm /proc/67450/comm /proc/67468/comm /proc/67567/comm /proc/67590/comm /proc/68/comm /proc/68020/comm /proc/68037/comm /proc/68043/comm /proc/68091/comm /proc/68092/comm /proc/68102/comm /proc/68290/comm /proc/69/comm /proc/69705/comm /proc/69729/comm /proc/70/comm /proc/705/comm /proc/708/comm /proc/709/comm /proc/71/comm /proc/71676/comm /proc/72/comm /proc/722/comm /proc/73/comm /proc/73111/comm /proc/73127/comm /proc/73128/comm /proc/73129/comm /proc/73130/comm /proc/73132/comm /proc/73134/comm /proc/73137/comm /proc/73140/comm /proc/73141/comm /proc/73142/comm /proc/73143/comm /proc/73144/comm /proc/73145/comm /proc/73146/comm /proc/74/comm /proc/75/comm /proc/76/comm /proc/78/comm /proc/79/comm /proc/79132/comm /proc/79157/comm /proc/79350/comm /proc/79367/comm /proc/79373/comm /proc/79432/comm /proc/79433/comm /proc/79443/comm /proc/79508/comm /proc/8/comm /proc/80/comm /proc/80702/comm /proc/80725/comm /proc/81/comm /proc/81981/comm /proc/81983/comm /proc/82/comm /proc/82660/comm /proc/84/comm /proc/84583/comm /proc/85/comm /proc/86/comm /proc/86245/comm /proc/86257/comm /proc/867/comm /proc/86978/comm /proc/87/comm /proc/87001/comm /proc/88/comm /proc/88012/comm /proc/9/comm /proc/90/comm /proc/90787/comm /proc/91/comm /proc/92/comm /proc/9212/comm /proc/9229/comm /proc/9245/comm /proc/93/comm /proc/9328/comm /proc/93322/comm /proc/93344/comm /proc/93506/comm /proc/93541/comm /proc/93547/comm /proc/93709/comm /proc/93710/comm /proc/93721/comm /proc/93941/comm /proc/94/comm /proc/96/comm /proc/97/comm /proc/97199/comm /proc/97222/comm /proc/97237/comm /proc/97268/comm /proc/97600/comm /proc/97757/comm /proc/98/comm /proc/98427/comm /proc/98762/comm /proc/99/comm /proc/9945/comm /proc/99647/comm /proc/99847/comm /proc/self/comm /proc/thread-self/comm
+ '[' -n '' ']'
+ rm -f /var/run/libvirtd.pid
+ [[ -c /dev/kvm ]]
+ chmod 660 /dev/kvm
+ chown root:kvm /dev/kvm
+ CGROUPS=
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/blkio ']'
+ grep -w blkio /sys/fs/cgroup/cgroup.controllers
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/cpu ']'
+ grep -w cpu /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=cpu,
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/devices ']'
+ grep -w devices /sys/fs/cgroup/cgroup.controllers
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/freezer ']'
+ grep -w freezer /sys/fs/cgroup/cgroup.controllers
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/hugetlb ']'
+ grep -w hugetlb /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=hugetlb,
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/memory ']'
+ grep -w memory /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=memory,
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/net_cls ']'
+ grep -w net_cls /sys/fs/cgroup/cgroup.controllers
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/perf_event ']'
+ grep -w perf_event /sys/fs/cgroup/cgroup.controllers
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/rdma ']'
+ grep -w rdma /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=rdma,
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/misc ']'
+ grep -w misc /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=misc,
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/pids ']'
+ grep -w pids /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=pids,
+ cgcreate -g cpu,hugetlb,memory,rdma,misc,pids:/osh-libvirt
++ cat /proc/meminfo
++ grep HugePages_Total
++ tr -cd '[:digit:]'
+ hp_count=0
+ '[' 00 -gt 0 ']'
+ '[' -n 457eb676-33da-42ec-9a8c-9293d545c337 ']'
+ cgexec -g cpu,hugetlb,memory,rdma,misc,pids:/osh-libvirt systemd-run --scope --slice=system libvirtd --listen
++ mktemp --suffix .xml
+ tmpsecret=/tmp/tmp.mP6WZe45bz.xml
+ '[' -n '' ']'
+ trap cleanup EXIT
+ TIMEOUT=60
+ [[ ! -f /var/run/libvirtd.pid ]]
+ [[ 60 -gt 0 ]]
+ let TIMEOUT-=1
+ sleep 1
Running as unit: run-r1e943ff6588c416c8322c0479af7b5e1.scope; invocation ID: 4e6cb89897384292a42b526d425d8ed6
+ [[ ! -f /var/run/libvirtd.pid ]]
+ TIMEOUT=10
+ [[ ! -e /var/run/libvirt/libvirt-sock ]]
+ '[' -z '' ']'
+ '[' -n cinder ']'
++ awk '/key/{print $3}' /etc/ceph/ceph.client.cinder.keyring
+ CEPH_CINDER_KEYRING=AQB0VA1qTrc7BxAATat5tp57rgbe8IlgYKODBw==
+ '[' -n cinder ']'
+ create_virsh_libvirt_secret cinder 457eb676-33da-42ec-9a8c-9293d545c337 AQB0VA1qTrc7BxAATat5tp57rgbe8IlgYKODBw==
+ sec_user=cinder
+ sec_uuid=457eb676-33da-42ec-9a8c-9293d545c337
+ sec_ceph_keyring=AQB0VA1qTrc7BxAATat5tp57rgbe8IlgYKODBw==
+ cat
+ virsh secret-define --file /tmp/tmp.mP6WZe45bz.xml
Secret 457eb676-33da-42ec-9a8c-9293d545c337 created

+ virsh secret-set-value --secret 457eb676-33da-42ec-9a8c-9293d545c337 --base64 AQB0VA1qTrc7BxAATat5tp57rgbe8IlgYKODBw==
error: Passing secret value as command-line argument is insecure!
Secret value set

+ '[' -n '' ']'
+ '[' -n '' ']'
+ cleanup
+ rm -f /tmp/tmp.mP6WZe45bz.xml
+ '[' -n '' ']'
++ cat /var/run/libvirtd.pid
+ LIBVIRTD_PID=192264
+ kill 192264
+ tail --pid=192264 -f /dev/null
+ cgexec -g cpu,hugetlb,memory,rdma,misc,pids:/osh-libvirt systemd-run --scope --slice=system libvirtd --listen
Running as unit: run-rcb7b47bfcbf8431588a4fabe3e49a9e6.scope; invocation ID: 92e298da5a6a4e83ab24e3c6d821fb71