+ wait_for_file /etc/pki/CA/cacert.pem
+ local file=/etc/pki/CA/cacert.pem
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ sleep 1
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ sleep 1
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ sleep 1
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ sleep 1
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ sleep 1
cpuset cpu io memory hugetlb pids rdma misc
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ wait_for_file /etc/pki/qemu/ca-cert.pem
+ local file=/etc/pki/qemu/ca-cert.pem
+ '[' '!' -f /etc/pki/qemu/ca-cert.pem ']'
+ wait_for_file /etc/pki/libvirt/servercert.pem
+ local file=/etc/pki/libvirt/servercert.pem
+ '[' '!' -f /etc/pki/libvirt/servercert.pem ']'
+ wait_for_file /etc/pki/libvirt/clientcert.pem
+ local file=/etc/pki/libvirt/clientcert.pem
+ '[' '!' -f /etc/pki/libvirt/clientcert.pem ']'
+ wait_for_file /etc/pki/qemu/server-cert.pem
+ local file=/etc/pki/qemu/server-cert.pem
+ '[' '!' -f /etc/pki/qemu/server-cert.pem ']'
+ wait_for_file /etc/pki/qemu/client-cert.pem
+ local file=/etc/pki/qemu/client-cert.pem
+ '[' '!' -f /etc/pki/qemu/client-cert.pem ']'
+ wait_for_file /etc/pki/libvirt/private/serverkey.pem
+ local file=/etc/pki/libvirt/private/serverkey.pem
+ '[' '!' -f /etc/pki/libvirt/private/serverkey.pem ']'
+ wait_for_file /etc/pki/libvirt/private/clientkey.pem
+ local file=/etc/pki/libvirt/private/clientkey.pem
+ '[' '!' -f /etc/pki/libvirt/private/clientkey.pem ']'
+ wait_for_file /etc/pki/qemu/server-key.pem
+ local file=/etc/pki/qemu/server-key.pem
+ '[' '!' -f /etc/pki/qemu/server-key.pem ']'
+ wait_for_file /etc/pki/qemu/client-key.pem
+ local file=/etc/pki/qemu/client-key.pem
+ '[' '!' -f /etc/pki/qemu/client-key.pem ']'
+ wait_for_file /etc/pki/libvirt-vnc/ca-cert.pem
+ local file=/etc/pki/libvirt-vnc/ca-cert.pem
+ '[' '!' -f /etc/pki/libvirt-vnc/ca-cert.pem ']'
+ wait_for_file /etc/pki/libvirt-vnc/server-cert.pem
+ local file=/etc/pki/libvirt-vnc/server-cert.pem
+ '[' '!' -f /etc/pki/libvirt-vnc/server-cert.pem ']'
+ wait_for_file /etc/pki/libvirt-vnc/server-key.pem
+ local file=/etc/pki/libvirt-vnc/server-key.pem
+ '[' '!' -f /etc/pki/libvirt-vnc/server-key.pem ']'
++ grep -w libvirtd
++ cat /proc/1/comm /proc/10/comm /proc/100/comm /proc/102/comm /proc/103/comm /proc/10368/comm /proc/104/comm /proc/104141/comm /proc/105/comm /proc/105568/comm /proc/105591/comm /proc/106/comm /proc/106169/comm /proc/106183/comm /proc/106184/comm /proc/107303/comm /proc/107327/comm /proc/107341/comm /proc/107366/comm /proc/107629/comm /proc/107765/comm /proc/107949/comm /proc/107951/comm /proc/108/comm /proc/10873/comm /proc/10874/comm /proc/108892/comm /proc/108921/comm /proc/109/comm /proc/109271/comm /proc/109302/comm /proc/109439/comm /proc/109458/comm /proc/109464/comm /proc/109522/comm /proc/109523/comm /proc/109550/comm /proc/109705/comm /proc/11/comm /proc/110/comm /proc/111/comm /proc/111152/comm /proc/111180/comm /proc/111187/comm /proc/111224/comm /proc/112/comm /proc/1121/comm /proc/113/comm /proc/113025/comm /proc/113213/comm /proc/114/comm /proc/115/comm /proc/115948/comm /proc/115973/comm /proc/116/comm /proc/117/comm /proc/119666/comm /proc/12/comm /proc/121275/comm /proc/121313/comm /proc/121344/comm /proc/121345/comm /proc/12265/comm /proc/122865/comm /proc/12294/comm /proc/12337/comm /proc/12375/comm /proc/12387/comm /proc/124332/comm /proc/124357/comm /proc/124389/comm /proc/124418/comm /proc/124604/comm /proc/124623/comm /proc/125029/comm /proc/125484/comm /proc/125649/comm /proc/12624/comm /proc/12655/comm /proc/12656/comm /proc/126654/comm /proc/12711/comm /proc/127275/comm /proc/127299/comm /proc/12736/comm /proc/12756/comm /proc/127646/comm /proc/128609/comm /proc/13/comm /proc/131261/comm /proc/132306/comm /proc/132313/comm /proc/133359/comm /proc/133375/comm /proc/133376/comm /proc/135153/comm /proc/135306/comm /proc/135416/comm /proc/135466/comm /proc/135468/comm /proc/135538/comm /proc/135575/comm /proc/136471/comm /proc/136832/comm /proc/136833/comm /proc/14/comm /proc/144048/comm /proc/144049/comm /proc/144051/comm /proc/144052/comm /proc/144354/comm /proc/1452/comm /proc/15/comm /proc/156366/comm /proc/156391/comm /proc/156698/comm /proc/156733/comm /proc/156746/comm /proc/156800/comm /proc/156801/comm /proc/156802/comm /proc/156803/comm /proc/1570/comm /proc/1571/comm /proc/1572/comm /proc/1573/comm /proc/1577/comm /proc/157866/comm /proc/157895/comm /proc/158296/comm /proc/158319/comm /proc/158495/comm /proc/159086/comm /proc/159091/comm /proc/159270/comm /proc/159293/comm /proc/159455/comm /proc/159472/comm /proc/159479/comm /proc/159536/comm /proc/159537/comm /proc/159547/comm /proc/159638/comm /proc/16/comm /proc/161194/comm /proc/161285/comm /proc/161389/comm /proc/161477/comm /proc/161509/comm /proc/161670/comm /proc/161695/comm /proc/161709/comm /proc/161737/comm /proc/161753/comm /proc/161784/comm /proc/161819/comm /proc/161985/comm /proc/162014/comm /proc/162624/comm /proc/162656/comm /proc/162753/comm /proc/162832/comm /proc/1644/comm /proc/1649/comm /proc/1658/comm /proc/166/comm /proc/167/comm /proc/167580/comm /proc/167957/comm /proc/168/comm /proc/168273/comm /proc/168330/comm /proc/168616/comm /proc/169/comm /proc/169663/comm /proc/169779/comm /proc/170/comm /proc/170929/comm /proc/171/comm /proc/172/comm /proc/172586/comm /proc/172642/comm /proc/173/comm /proc/173017/comm /proc/173086/comm /proc/173140/comm /proc/173141/comm /proc/173146/comm /proc/173296/comm /proc/173323/comm /proc/173324/comm /proc/174/comm /proc/174072/comm /proc/174092/comm /proc/174321/comm /proc/174334/comm /proc/174582/comm /proc/174607/comm /proc/174626/comm /proc/174628/comm /proc/175099/comm /proc/175123/comm /proc/175284/comm /proc/175301/comm /proc/175307/comm /proc/175424/comm /proc/175425/comm /proc/175439/comm /proc/175529/comm /proc/177/comm /proc/177376/comm /proc/177402/comm /proc/177418/comm /proc/177442/comm /proc/177474/comm /proc/177502/comm /proc/177589/comm /proc/177609/comm /proc/177641/comm /proc/177659/comm /proc/177688/comm /proc/177715/comm /proc/177722/comm /proc/177748/comm /proc/178061/comm /proc/178705/comm /proc/179/comm /proc/179180/comm /proc/179196/comm /proc/18/comm /proc/180/comm /proc/182/comm /proc/183741/comm /proc/183783/comm /proc/183789/comm /proc/184/comm /proc/184147/comm /proc/184451/comm /proc/186/comm /proc/186780/comm /proc/187/comm /proc/187056/comm /proc/187061/comm /proc/187085/comm /proc/188/comm /proc/18809/comm /proc/18829/comm /proc/18850/comm /proc/188701/comm /proc/188748/comm /proc/18878/comm /proc/18896/comm /proc/189/comm /proc/189077/comm /proc/189078/comm /proc/189079/comm /proc/189276/comm /proc/189280/comm /proc/189313/comm /proc/189314/comm /proc/189327/comm /proc/189340/comm /proc/189341/comm /proc/189696/comm /proc/189699/comm /proc/189702/comm /proc/189943/comm /proc/19/comm /proc/190201/comm /proc/190696/comm /proc/190951/comm /proc/191/comm /proc/191248/comm /proc/191677/comm /proc/191678/comm /proc/191985/comm /proc/191994/comm /proc/192/comm /proc/192107/comm /proc/192184/comm /proc/192364/comm /proc/192451/comm /proc/192462/comm /proc/192721/comm /proc/192722/comm /proc/192723/comm /proc/192724/comm /proc/192727/comm /proc/192738/comm /proc/192893/comm /proc/193/comm /proc/193018/comm /proc/193037/comm /proc/193038/comm /proc/193039/comm /proc/193040/comm /proc/193041/comm /proc/193042/comm /proc/193287/comm /proc/193405/comm /proc/193477/comm /proc/193532/comm /proc/193600/comm /proc/193604/comm /proc/193696/comm /proc/193861/comm /proc/193884/comm /proc/193920/comm /proc/193921/comm /proc/193946/comm /proc/194/comm /proc/194000/comm /proc/194026/comm /proc/194037/comm /proc/194192/comm /proc/194224/comm /proc/194226/comm /proc/194230/comm /proc/194238/comm /proc/194246/comm /proc/194247/comm /proc/194248/comm /proc/194249/comm /proc/194252/comm /proc/2/comm /proc/20/comm /proc/200/comm /proc/20472/comm /proc/21/comm /proc/217/comm /proc/21863/comm /proc/21934/comm /proc/21935/comm /proc/21950/comm /proc/22/comm /proc/220/comm /proc/221/comm /proc/226/comm /proc/24/comm /proc/24839/comm /proc/25/comm /proc/25190/comm /proc/25453/comm /proc/25471/comm /proc/25496/comm /proc/25508/comm /proc/26/comm /proc/266/comm /proc/27/comm /proc/28/comm /proc/285/comm /proc/287/comm /proc/288/comm /proc/289/comm /proc/291/comm /proc/29876/comm /proc/3/comm /proc/30/comm /proc/30157/comm /proc/30174/comm /proc/30199/comm /proc/30211/comm /proc/31/comm /proc/310/comm /proc/311/comm /proc/315/comm /proc/316/comm /proc/32/comm /proc/33/comm /proc/34/comm /proc/34615/comm /proc/34888/comm /proc/34905/comm /proc/34928/comm /proc/34941/comm /proc/350/comm /proc/353/comm /proc/35744/comm /proc/358/comm /proc/36/comm /proc/363/comm /proc/37/comm /proc/38/comm /proc/387/comm /proc/39/comm /proc/393/comm /proc/39489/comm /proc/39491/comm /proc/39594/comm /proc/39613/comm /proc/39656/comm /proc/39683/comm /proc/397/comm /proc/39701/comm /proc/398/comm /proc/4/comm /proc/40/comm /proc/401/comm /proc/42/comm /proc/42197/comm /proc/42209/comm /proc/42241/comm /proc/42254/comm /proc/42256/comm /proc/42311/comm /proc/42323/comm /proc/42349/comm /proc/42365/comm /proc/42366/comm /proc/42448/comm /proc/42497/comm /proc/42630/comm /proc/42785/comm /proc/42809/comm /proc/42833/comm /proc/43/comm /proc/43536/comm /proc/43554/comm /proc/43589/comm /proc/43600/comm /proc/44/comm /proc/44047/comm /proc/44480/comm /proc/44877/comm /proc/44900/comm /proc/45/comm /proc/45326/comm /proc/45350/comm /proc/45370/comm /proc/45401/comm /proc/45413/comm /proc/45464/comm /proc/455/comm /proc/45799/comm /proc/45823/comm /proc/45915/comm /proc/46/comm /proc/46303/comm /proc/46328/comm /proc/46364/comm /proc/46388/comm /proc/46408/comm /proc/46431/comm /proc/46544/comm /proc/46591/comm /proc/46635/comm /proc/48/comm /proc/48491/comm /proc/48523/comm /proc/48604/comm /proc/48643/comm /proc/48841/comm /proc/48853/comm /proc/48939/comm /proc/49/comm /proc/49005/comm /proc/49586/comm /proc/49609/comm /proc/49625/comm /proc/49648/comm /proc/5/comm /proc/50/comm /proc/50017/comm /proc/50040/comm /proc/50322/comm /proc/50347/comm /proc/50737/comm /proc/50761/comm /proc/50789/comm /proc/50868/comm /proc/50946/comm /proc/51/comm /proc/51067/comm /proc/51094/comm /proc/51180/comm /proc/52/comm /proc/52014/comm /proc/522/comm /proc/52769/comm /proc/52791/comm /proc/53015/comm /proc/53038/comm /proc/53068/comm /proc/53219/comm /proc/53411/comm /proc/53513/comm /proc/54/comm /proc/55/comm /proc/56/comm /proc/57/comm /proc/57138/comm /proc/57162/comm /proc/57814/comm /proc/57840/comm /proc/57889/comm /proc/57915/comm /proc/57928/comm /proc/57953/comm /proc/58/comm /proc/58061/comm /proc/58085/comm /proc/58134/comm /proc/58173/comm /proc/58216/comm /proc/58305/comm /proc/58342/comm /proc/6/comm /proc/60/comm /proc/61/comm /proc/613/comm /proc/616/comm /proc/61742/comm /proc/61838/comm /proc/61849/comm /proc/619/comm /proc/62/comm /proc/62007/comm /proc/62064/comm /proc/62191/comm /proc/62215/comm /proc/62231/comm /proc/62261/comm /proc/62277/comm /proc/62301/comm /proc/62370/comm /proc/62371/comm /proc/62372/comm /proc/62373/comm /proc/625/comm /proc/626/comm /proc/62721/comm /proc/62769/comm /proc/62811/comm /proc/63/comm /proc/63015/comm /proc/63016/comm /proc/63017/comm /proc/63018/comm /proc/63057/comm /proc/63545/comm /proc/63914/comm /proc/63936/comm /proc/64/comm /proc/64046/comm /proc/64071/comm /proc/64089/comm /proc/64136/comm /proc/64178/comm /proc/64201/comm /proc/643/comm /proc/64303/comm /proc/64326/comm /proc/64449/comm /proc/64476/comm /proc/64776/comm /proc/648/comm /proc/64800/comm /proc/64849/comm /proc/65035/comm /proc/65058/comm /proc/65192/comm /proc/65530/comm /proc/65556/comm /proc/65582/comm /proc/65661/comm /proc/65687/comm /proc/65688/comm /proc/65689/comm /proc/65690/comm /proc/65691/comm /proc/65961/comm /proc/66/comm /proc/66338/comm /proc/66361/comm /proc/66422/comm /proc/66464/comm /proc/66506/comm /proc/66536/comm /proc/66592/comm /proc/66771/comm /proc/66867/comm /proc/66975/comm /proc/67/comm /proc/67008/comm /proc/67175/comm /proc/67250/comm /proc/67479/comm /proc/67523/comm /proc/67543/comm /proc/67597/comm /proc/67814/comm /proc/67838/comm /proc/67862/comm /proc/67884/comm /proc/68/comm /proc/68363/comm /proc/68379/comm /proc/68385/comm /proc/68451/comm /proc/68452/comm /proc/68462/comm /proc/68558/comm /proc/69/comm /proc/70/comm /proc/70064/comm /proc/70087/comm /proc/72/comm /proc/725/comm /proc/72780/comm /proc/729/comm /proc/73/comm /proc/732/comm /proc/733/comm /proc/73385/comm /proc/73436/comm /proc/73437/comm /proc/73438/comm /proc/73439/comm /proc/73442/comm /proc/73444/comm /proc/73445/comm /proc/73446/comm /proc/73447/comm /proc/73449/comm /proc/73450/comm /proc/73451/comm /proc/73453/comm /proc/73454/comm /proc/74/comm /proc/747/comm /proc/75/comm /proc/76/comm /proc/78/comm /proc/79/comm /proc/79203/comm /proc/79226/comm /proc/79368/comm /proc/79385/comm /proc/79391/comm /proc/79536/comm /proc/79537/comm /proc/79547/comm /proc/79638/comm /proc/8/comm /proc/80/comm /proc/80714/comm /proc/80738/comm /proc/81/comm /proc/82/comm /proc/84/comm /proc/84954/comm /proc/85/comm /proc/86/comm /proc/86014/comm /proc/86033/comm /proc/86847/comm /proc/86870/comm /proc/87/comm /proc/87717/comm /proc/88/comm /proc/893/comm /proc/90/comm /proc/91/comm /proc/92/comm /proc/9263/comm /proc/9280/comm /proc/92889/comm /proc/9296/comm /proc/93/comm /proc/93127/comm /proc/93151/comm /proc/93273/comm /proc/93294/comm /proc/93312/comm /proc/93336/comm /proc/93452/comm /proc/93453/comm /proc/93463/comm /proc/93713/comm /proc/9379/comm /proc/94/comm /proc/96/comm /proc/96949/comm /proc/96973/comm /proc/96988/comm /proc/97/comm /proc/97011/comm /proc/97250/comm /proc/97501/comm /proc/98/comm /proc/98217/comm /proc/99/comm /proc/99433/comm /proc/9996/comm /proc/self/comm /proc/thread-self/comm
+ '[' -n '' ']'
+ rm -f /var/run/libvirtd.pid
+ [[ -c /dev/kvm ]]
+ chmod 660 /dev/kvm
+ chown root:kvm /dev/kvm
+ CGROUPS=
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/blkio ']'
+ grep -w blkio /sys/fs/cgroup/cgroup.controllers
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/cpu ']'
+ grep -w cpu /sys/fs/cgroup/cgroup.controllers
+ CGROUPS+=cpu,
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/devices ']'
+ grep -w devices /sys/fs/cgroup/cgroup.controllers
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/freezer ']'
+ grep -w freezer /sys/fs/cgroup/cgroup.controllers
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/hugetlb ']'
+ grep -w hugetlb /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=hugetlb,
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/memory ']'
+ grep -w memory /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=memory,
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/net_cls ']'
+ grep -w net_cls /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/perf_event ']'
+ grep -w perf_event /sys/fs/cgroup/cgroup.controllers
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/rdma ']'
+ grep -w rdma /sys/fs/cgroup/cgroup.controllers
+ CGROUPS+=rdma,
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/misc ']'
+ grep -w misc /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=misc,
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/pids ']'
+ grep -w pids /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=pids,
+ cgcreate -g cpu,hugetlb,memory,rdma,misc,pids:/osh-libvirt
++ cat /proc/meminfo
++ grep HugePages_Total
++ tr -cd '[:digit:]'
+ hp_count=0
+ '[' 00 -gt 0 ']'
+ '[' -n 457eb676-33da-42ec-9a8c-9293d545c337 ']'
+ cgexec -g cpu,hugetlb,memory,rdma,misc,pids:/osh-libvirt systemd-run --scope --slice=system libvirtd --listen
++ mktemp --suffix .xml
+ tmpsecret=/tmp/tmp.pXBTscmdKm.xml
+ '[' -n '' ']'
+ trap cleanup EXIT
+ TIMEOUT=60
+ [[ ! -f /var/run/libvirtd.pid ]]
+ [[ 60 -gt 0 ]]
+ let TIMEOUT-=1
+ sleep 1
Running as unit: run-r8582889cdab2402e809db03f391cd4d9.scope; invocation ID: 64e8a90a015047e489582edc74150e63
+ [[ ! -f /var/run/libvirtd.pid ]]
+ TIMEOUT=10
+ [[ ! -e /var/run/libvirt/libvirt-sock ]]
+ '[' -z '' ']'
+ '[' -n cinder ']'
++ awk '/key/{print $3}' /etc/ceph/ceph.client.cinder.keyring
+ CEPH_CINDER_KEYRING=AQCcdV5q28yMJxAAEIn2fckcssROwVop8Nq3Mg==
+ '[' -n cinder ']'
+ create_virsh_libvirt_secret cinder 457eb676-33da-42ec-9a8c-9293d545c337 AQCcdV5q28yMJxAAEIn2fckcssROwVop8Nq3Mg==
+ sec_user=cinder
+ sec_uuid=457eb676-33da-42ec-9a8c-9293d545c337
+ sec_ceph_keyring=AQCcdV5q28yMJxAAEIn2fckcssROwVop8Nq3Mg==
+ cat
+ virsh secret-define --file /tmp/tmp.pXBTscmdKm.xml
Secret 457eb676-33da-42ec-9a8c-9293d545c337 created

+ virsh secret-set-value --secret 457eb676-33da-42ec-9a8c-9293d545c337 --base64 AQCcdV5q28yMJxAAEIn2fckcssROwVop8Nq3Mg==
error: Passing secret value as command-line argument is insecure!
+ '[' -n '' ']'
+ '[' -n '' ']'
+ cleanup
+ rm -f /tmp/tmp.pXBTscmdKm.xml
Secret value set

+ '[' -n '' ']'
++ cat /var/run/libvirtd.pid
+ LIBVIRTD_PID=194289
+ kill 194289
+ tail --pid=194289 -f /dev/null
+ cgexec -g cpu,hugetlb,memory,rdma,misc,pids:/osh-libvirt systemd-run --scope --slice=system libvirtd --listen
Running as unit: run-re28e05b641644c60a2c1a088faee0d35.scope; invocation ID: d12705ef9222456bb6577bd9b51c0c57