+ wait_for_file /etc/pki/CA/cacert.pem
+ local file=/etc/pki/CA/cacert.pem
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ sleep 1
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ sleep 1
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ sleep 1
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ sleep 1
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ sleep 1
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ wait_for_file /etc/pki/qemu/ca-cert.pem
+ local file=/etc/pki/qemu/ca-cert.pem
+ '[' '!' -f /etc/pki/qemu/ca-cert.pem ']'
+ wait_for_file /etc/pki/libvirt/servercert.pem
+ local file=/etc/pki/libvirt/servercert.pem
+ '[' '!' -f /etc/pki/libvirt/servercert.pem ']'
+ wait_for_file /etc/pki/libvirt/clientcert.pem
+ local file=/etc/pki/libvirt/clientcert.pem
+ '[' '!' -f /etc/pki/libvirt/clientcert.pem ']'
+ wait_for_file /etc/pki/qemu/server-cert.pem
+ local file=/etc/pki/qemu/server-cert.pem
+ '[' '!' -f /etc/pki/qemu/server-cert.pem ']'
+ wait_for_file /etc/pki/qemu/client-cert.pem
+ local file=/etc/pki/qemu/client-cert.pem
+ '[' '!' -f /etc/pki/qemu/client-cert.pem ']'
+ wait_for_file /etc/pki/libvirt/private/serverkey.pem
+ local file=/etc/pki/libvirt/private/serverkey.pem
+ '[' '!' -f /etc/pki/libvirt/private/serverkey.pem ']'
+ wait_for_file /etc/pki/libvirt/private/clientkey.pem
+ local file=/etc/pki/libvirt/private/clientkey.pem
+ '[' '!' -f /etc/pki/libvirt/private/clientkey.pem ']'
+ wait_for_file /etc/pki/qemu/server-key.pem
+ local file=/etc/pki/qemu/server-key.pem
+ '[' '!' -f /etc/pki/qemu/server-key.pem ']'
+ wait_for_file /etc/pki/qemu/client-key.pem
+ local file=/etc/pki/qemu/client-key.pem
+ '[' '!' -f /etc/pki/qemu/client-key.pem ']'
+ wait_for_file /etc/pki/libvirt-vnc/ca-cert.pem
+ local file=/etc/pki/libvirt-vnc/ca-cert.pem
+ '[' '!' -f /etc/pki/libvirt-vnc/ca-cert.pem ']'
+ wait_for_file /etc/pki/libvirt-vnc/server-cert.pem
+ local file=/etc/pki/libvirt-vnc/server-cert.pem
+ '[' '!' -f /etc/pki/libvirt-vnc/server-cert.pem ']'
+ wait_for_file /etc/pki/libvirt-vnc/server-key.pem
+ local file=/etc/pki/libvirt-vnc/server-key.pem
+ '[' '!' -f /etc/pki/libvirt-vnc/server-key.pem ']'
++ grep -w libvirtd
++ cat /proc/1/comm /proc/10/comm /proc/100/comm /proc/100099/comm /proc/101511/comm /proc/102/comm /proc/103/comm /proc/10347/comm /proc/104/comm /proc/104395/comm /proc/105/comm /proc/105894/comm /proc/106/comm /proc/10621/comm /proc/106526/comm /proc/106815/comm /proc/108/comm /proc/109/comm /proc/11/comm /proc/110/comm /proc/1109/comm /proc/111/comm /proc/11105/comm /proc/11106/comm /proc/112/comm /proc/112646/comm /proc/112670/comm /proc/112829/comm /proc/112830/comm /proc/112991/comm /proc/113/comm /proc/113037/comm /proc/113038/comm /proc/114/comm /proc/114347/comm /proc/114371/comm /proc/114406/comm /proc/114436/comm /proc/114737/comm /proc/114845/comm /proc/114864/comm /proc/114866/comm /proc/115/comm /proc/115455/comm /proc/115945/comm /proc/116/comm /proc/116180/comm /proc/116204/comm /proc/116512/comm /proc/116531/comm /proc/116538/comm /proc/116607/comm /proc/116608/comm /proc/116618/comm /proc/116863/comm /proc/117/comm /proc/117892/comm /proc/118044/comm /proc/118068/comm /proc/118096/comm /proc/118146/comm /proc/118871/comm /proc/12/comm /proc/120302/comm /proc/120303/comm /proc/120504/comm /proc/122344/comm /proc/12493/comm /proc/12524/comm /proc/12574/comm /proc/12605/comm /proc/12617/comm /proc/126189/comm /proc/126190/comm /proc/128291/comm /proc/12859/comm /proc/128807/comm /proc/128821/comm /proc/128822/comm /proc/12890/comm /proc/12947/comm /proc/12972/comm /proc/12991/comm /proc/13/comm /proc/130427/comm /proc/131490/comm /proc/131515/comm /proc/131537/comm /proc/131560/comm /proc/131876/comm /proc/132232/comm /proc/132615/comm /proc/132646/comm /proc/132779/comm /proc/134348/comm /proc/134371/comm /proc/135749/comm /proc/14/comm /proc/142181/comm /proc/1440/comm /proc/149893/comm /proc/149908/comm /proc/15/comm /proc/151053/comm /proc/151054/comm /proc/151612/comm /proc/151641/comm /proc/151642/comm /proc/153000/comm /proc/153001/comm /proc/1558/comm /proc/1559/comm /proc/1560/comm /proc/1561/comm /proc/1565/comm /proc/16/comm /proc/160317/comm /proc/160318/comm /proc/160320/comm /proc/160321/comm /proc/160461/comm /proc/160469/comm /proc/161154/comm /proc/161183/comm /proc/161593/comm /proc/161637/comm /proc/161651/comm /proc/161684/comm /proc/161685/comm /proc/161686/comm /proc/161687/comm /proc/162162/comm /proc/162186/comm /proc/163015/comm /proc/163072/comm /proc/163074/comm /proc/163253/comm /proc/163283/comm /proc/163375/comm /proc/1634/comm /proc/163407/comm /proc/163474/comm /proc/163505/comm /proc/163518/comm /proc/163668/comm /proc/163704/comm /proc/163755/comm /proc/163771/comm /proc/1638/comm /proc/163909/comm /proc/164122/comm /proc/164206/comm /proc/164232/comm /proc/164386/comm /proc/164394/comm /proc/1647/comm /proc/165/comm /proc/165130/comm /proc/165226/comm /proc/165299/comm /proc/165573/comm /proc/165592/comm /proc/165598/comm /proc/165673/comm /proc/165674/comm /proc/165684/comm /proc/165829/comm /proc/166/comm /proc/167/comm /proc/167381/comm /proc/167486/comm /proc/167590/comm /proc/167657/comm /proc/167685/comm /proc/167715/comm /proc/167757/comm /proc/167772/comm /proc/167815/comm /proc/167818/comm /proc/167859/comm /proc/167972/comm /proc/168/comm /proc/168087/comm /proc/168112/comm /proc/168500/comm /proc/168523/comm /proc/168599/comm /proc/169/comm /proc/169052/comm /proc/169063/comm /proc/170/comm /proc/171/comm /proc/171156/comm /proc/172/comm /proc/173/comm /proc/173869/comm /proc/174/comm /proc/174455/comm /proc/174591/comm /proc/175/comm /proc/175851/comm /proc/175911/comm /proc/176002/comm /proc/176029/comm /proc/177/comm /proc/177306/comm /proc/177311/comm /proc/178/comm /proc/179075/comm /proc/179124/comm /proc/179145/comm /proc/179146/comm /proc/179745/comm /proc/179765/comm /proc/179785/comm /proc/179786/comm /proc/179787/comm /proc/179788/comm /proc/18/comm /proc/180785/comm /proc/180805/comm /proc/180855/comm /proc/180856/comm /proc/181/comm /proc/181267/comm /proc/181268/comm /proc/181391/comm /proc/181394/comm /proc/181606/comm /proc/181629/comm /proc/181858/comm /proc/181875/comm /proc/181886/comm /proc/181935/comm /proc/181936/comm /proc/181946/comm /proc/182141/comm /proc/183/comm /proc/183496/comm /proc/183570/comm /proc/183620/comm /proc/183672/comm /proc/183692/comm /proc/183696/comm /proc/183737/comm /proc/183827/comm /proc/183906/comm /proc/184/comm /proc/184005/comm /proc/184036/comm /proc/184038/comm /proc/184066/comm /proc/184752/comm /proc/184783/comm /proc/185/comm /proc/186/comm /proc/187/comm /proc/188/comm /proc/188234/comm /proc/188252/comm /proc/188624/comm /proc/188649/comm /proc/189356/comm /proc/189522/comm /proc/189566/comm /proc/189643/comm /proc/189744/comm /proc/189808/comm /proc/189816/comm /proc/19/comm /proc/190/comm /proc/19058/comm /proc/19079/comm /proc/19102/comm /proc/19129/comm /proc/19144/comm /proc/192186/comm /proc/193210/comm /proc/193788/comm /proc/194281/comm /proc/194401/comm /proc/194413/comm /proc/194462/comm /proc/194476/comm /proc/194489/comm /proc/194707/comm /proc/194764/comm /proc/194800/comm /proc/194801/comm /proc/194802/comm /proc/194803/comm /proc/194804/comm /proc/194979/comm /proc/195021/comm /proc/195022/comm /proc/195023/comm /proc/195024/comm /proc/195025/comm /proc/195026/comm /proc/195027/comm /proc/195030/comm /proc/195046/comm /proc/195047/comm /proc/195048/comm /proc/195051/comm /proc/195052/comm /proc/2/comm /proc/20/comm /proc/202/comm /proc/203/comm /proc/204/comm /proc/207/comm /proc/21/comm /proc/215/comm /proc/219/comm /proc/22/comm /proc/220/comm /proc/22023/comm /proc/22084/comm /proc/22085/comm /proc/22099/comm /proc/225/comm /proc/24/comm /proc/247/comm /proc/25/comm /proc/25382/comm /proc/25647/comm /proc/25663/comm /proc/25688/comm /proc/25701/comm /proc/26/comm /proc/268/comm /proc/27/comm /proc/28/comm /proc/287/comm /proc/292/comm /proc/293/comm /proc/294/comm /proc/3/comm /proc/30/comm /proc/30161/comm /proc/30424/comm /proc/30441/comm /proc/30465/comm /proc/30478/comm /proc/31/comm /proc/314/comm /proc/315/comm /proc/319/comm /proc/32/comm /proc/320/comm /proc/321/comm /proc/322/comm /proc/323/comm /proc/324/comm /proc/325/comm /proc/326/comm /proc/33/comm /proc/34/comm /proc/34670/comm /proc/34948/comm /proc/34967/comm /proc/34992/comm /proc/35004/comm /proc/36/comm /proc/366/comm /proc/37/comm /proc/38/comm /proc/39/comm /proc/39415/comm /proc/39427/comm /proc/39565/comm /proc/39608/comm /proc/39633/comm /proc/39660/comm /proc/39677/comm /proc/397/comm /proc/4/comm /proc/40/comm /proc/403/comm /proc/42/comm /proc/42127/comm /proc/42171/comm /proc/42183/comm /proc/42187/comm /proc/42189/comm /proc/42192/comm /proc/42290/comm /proc/42292/comm /proc/42295/comm /proc/42296/comm /proc/42377/comm /proc/42398/comm /proc/42429/comm /proc/42454/comm /proc/42542/comm /proc/42607/comm /proc/42763/comm /proc/42790/comm /proc/42816/comm /proc/43/comm /proc/43489/comm /proc/43493/comm /proc/43536/comm /proc/43539/comm /proc/43791/comm /proc/44/comm /proc/44002/comm /proc/44430/comm /proc/44848/comm /proc/44871/comm /proc/44896/comm /proc/45/comm /proc/45256/comm /proc/45279/comm /proc/45296/comm /proc/45319/comm /proc/45352/comm /proc/45385/comm /proc/45776/comm /proc/45802/comm /proc/459/comm /proc/45963/comm /proc/46/comm /proc/46280/comm /proc/46312/comm /proc/46316/comm /proc/46346/comm /proc/46361/comm /proc/46384/comm /proc/46504/comm /proc/46549/comm /proc/46596/comm /proc/48/comm /proc/48316/comm /proc/48391/comm /proc/48435/comm /proc/48466/comm /proc/48491/comm /proc/48713/comm /proc/48726/comm /proc/48811/comm /proc/48875/comm /proc/49/comm /proc/49221/comm /proc/49244/comm /proc/49318/comm /proc/49342/comm /proc/49393/comm /proc/49516/comm /proc/49684/comm /proc/49705/comm /proc/5/comm /proc/50/comm /proc/50040/comm /proc/50181/comm /proc/50209/comm /proc/50583/comm /proc/50608/comm /proc/50633/comm /proc/50715/comm /proc/50794/comm /proc/508/comm /proc/50915/comm /proc/50940/comm /proc/51/comm /proc/51026/comm /proc/51864/comm /proc/52/comm /proc/525/comm /proc/52618/comm /proc/52642/comm /proc/52805/comm /proc/52830/comm /proc/52924/comm /proc/53017/comm /proc/53235/comm /proc/53301/comm /proc/54/comm /proc/55/comm /proc/56/comm /proc/57/comm /proc/57625/comm /proc/57648/comm /proc/58/comm /proc/58312/comm /proc/58340/comm /proc/58375/comm /proc/58401/comm /proc/58420/comm /proc/58449/comm /proc/58574/comm /proc/58598/comm /proc/58637/comm /proc/58672/comm /proc/58710/comm /proc/58767/comm /proc/6/comm /proc/60/comm /proc/61/comm /proc/617/comm /proc/62/comm /proc/621/comm /proc/623/comm /proc/63/comm /proc/631/comm /proc/63151/comm /proc/632/comm /proc/63201/comm /proc/63298/comm /proc/63322/comm /proc/63341/comm /proc/63366/comm /proc/63399/comm /proc/63422/comm /proc/63514/comm /proc/63652/comm /proc/63666/comm /proc/64/comm /proc/64205/comm /proc/64232/comm /proc/64329/comm /proc/64460/comm /proc/64503/comm /proc/64516/comm /proc/64653/comm /proc/64680/comm /proc/64758/comm /proc/64759/comm /proc/64768/comm /proc/64769/comm /proc/64785/comm /proc/64833/comm /proc/64857/comm /proc/649/comm /proc/650/comm /proc/65133/comm /proc/65160/comm /proc/65184/comm /proc/65210/comm /proc/65223/comm /proc/65249/comm /proc/65615/comm /proc/65715/comm /proc/65740/comm /proc/65772/comm /proc/66/comm /proc/66161/comm /proc/66189/comm /proc/66425/comm /proc/66440/comm /proc/66441/comm /proc/66442/comm /proc/66443/comm /proc/66444/comm /proc/66477/comm /proc/66507/comm /proc/67/comm /proc/67052/comm /proc/67106/comm /proc/67213/comm /proc/67236/comm /proc/67608/comm /proc/67643/comm /proc/67800/comm /proc/67868/comm /proc/68/comm /proc/68007/comm /proc/68030/comm /proc/68191/comm /proc/68233/comm /proc/68290/comm /proc/68377/comm /proc/68420/comm /proc/68482/comm /proc/68734/comm /proc/68797/comm /proc/68844/comm /proc/69/comm /proc/69009/comm /proc/69049/comm /proc/69160/comm /proc/69180/comm /proc/69284/comm /proc/69384/comm /proc/69407/comm /proc/69775/comm /proc/69792/comm /proc/69798/comm /proc/69865/comm /proc/69866/comm /proc/69876/comm /proc/69953/comm /proc/70/comm /proc/708/comm /proc/71/comm /proc/711/comm /proc/712/comm /proc/71208/comm /proc/71231/comm /proc/71369/comm /proc/72/comm /proc/725/comm /proc/73/comm /proc/74/comm /proc/74132/comm /proc/74574/comm /proc/74590/comm /proc/74591/comm /proc/74592/comm /proc/74593/comm /proc/74596/comm /proc/74597/comm /proc/74599/comm /proc/74602/comm /proc/74603/comm /proc/74604/comm /proc/74605/comm /proc/74606/comm /proc/74609/comm /proc/74610/comm /proc/75/comm /proc/76/comm /proc/78/comm /proc/79/comm /proc/8/comm /proc/80/comm /proc/80248/comm /proc/80474/comm /proc/80498/comm /proc/80710/comm /proc/80727/comm /proc/80733/comm /proc/80795/comm /proc/80796/comm /proc/80806/comm /proc/80922/comm /proc/81/comm /proc/82/comm /proc/82048/comm /proc/82075/comm /proc/83491/comm /proc/84/comm /proc/85/comm /proc/86/comm /proc/86087/comm /proc/87/comm /proc/870/comm /proc/87634/comm /proc/87648/comm /proc/88/comm /proc/88428/comm /proc/88453/comm /proc/89241/comm /proc/9/comm /proc/90/comm /proc/91/comm /proc/92/comm /proc/9245/comm /proc/9262/comm /proc/9278/comm /proc/93/comm /proc/9360/comm /proc/94/comm /proc/95415/comm /proc/95439/comm /proc/95684/comm /proc/95701/comm /proc/95707/comm /proc/95803/comm /proc/95805/comm /proc/95820/comm /proc/96/comm /proc/96123/comm /proc/97/comm /proc/98/comm /proc/98468/comm /proc/98489/comm /proc/98516/comm /proc/98543/comm /proc/98878/comm /proc/98982/comm /proc/99/comm /proc/99720/comm /proc/9977/comm /proc/self/comm /proc/thread-self/comm
+ '[' -n '' ']'
+ rm -f /var/run/libvirtd.pid
+ [[ -c /dev/kvm ]]
+ chmod 660 /dev/kvm
+ chown root:kvm /dev/kvm
+ CGROUPS=
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/blkio ']'
+ grep -w blkio /sys/fs/cgroup/cgroup.controllers
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/cpu ']'
+ grep -w cpu /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=cpu,
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/devices ']'
+ grep -w devices /sys/fs/cgroup/cgroup.controllers
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/freezer ']'
+ grep -w freezer /sys/fs/cgroup/cgroup.controllers
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/hugetlb ']'
+ grep -w hugetlb /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=hugetlb,
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/memory ']'
+ grep -w memory /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=memory,
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/net_cls ']'
+ grep -w net_cls /sys/fs/cgroup/cgroup.controllers
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/perf_event ']'
+ grep -w perf_event /sys/fs/cgroup/cgroup.controllers
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/rdma ']'
+ grep -w rdma /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=rdma,
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/misc ']'
+ grep -w misc /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=misc,
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/pids ']'
+ grep -w pids /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=pids,
+ cgcreate -g cpu,hugetlb,memory,rdma,misc,pids:/osh-libvirt
++ cat /proc/meminfo
++ grep HugePages_Total
++ tr -cd '[:digit:]'
+ hp_count=0
+ '[' 00 -gt 0 ']'
+ '[' -n 457eb676-33da-42ec-9a8c-9293d545c337 ']'
+ cgexec -g cpu,hugetlb,memory,rdma,misc,pids:/osh-libvirt systemd-run --scope --slice=system libvirtd --listen
++ mktemp --suffix .xml
+ tmpsecret=/tmp/tmp.paSORkuN8r.xml
+ '[' -n '' ']'
+ trap cleanup EXIT
+ TIMEOUT=60
+ [[ ! -f /var/run/libvirtd.pid ]]
+ [[ 60 -gt 0 ]]
+ let TIMEOUT-=1
+ sleep 1
Running as unit: run-r75fbbbf73f774062aad26d3cbf32f39a.scope; invocation ID: 772b4996dccd46009e03e03f8fc4148c
+ [[ ! -f /var/run/libvirtd.pid ]]
+ TIMEOUT=10
+ [[ ! -e /var/run/libvirt/libvirt-sock ]]
+ '[' -z '' ']'
+ '[' -n cinder ']'
++ awk '/key/{print $3}' /etc/ceph/ceph.client.cinder.keyring
+ CEPH_CINDER_KEYRING=AQA37cFqlRYwFhAAyxk0qI6TY6ZNQV+pAJBOSw==
+ '[' -n cinder ']'
+ create_virsh_libvirt_secret cinder 457eb676-33da-42ec-9a8c-9293d545c337 AQA37cFqlRYwFhAAyxk0qI6TY6ZNQV+pAJBOSw==
+ sec_user=cinder
+ sec_uuid=457eb676-33da-42ec-9a8c-9293d545c337
+ sec_ceph_keyring=AQA37cFqlRYwFhAAyxk0qI6TY6ZNQV+pAJBOSw==
+ cat
+ virsh secret-define --file /tmp/tmp.paSORkuN8r.xml
Secret 457eb676-33da-42ec-9a8c-9293d545c337 created

+ virsh secret-set-value --secret 457eb676-33da-42ec-9a8c-9293d545c337 --base64 AQA37cFqlRYwFhAAyxk0qI6TY6ZNQV+pAJBOSw==
error: Passing secret value as command-line argument is insecure!
Secret value set

+ '[' -n '' ']'
+ '[' -n '' ']'
+ cleanup
+ rm -f /tmp/tmp.paSORkuN8r.xml
+ '[' -n '' ']'
++ cat /var/run/libvirtd.pid
+ LIBVIRTD_PID=195099
+ kill 195099
+ tail --pid=195099 -f /dev/null
+ cgexec -g cpu,hugetlb,memory,rdma,misc,pids:/osh-libvirt systemd-run --scope --slice=system libvirtd --listen
Running as unit: run-rcf16ee767b8a4b7da4c1dda9d3a0402f.scope; invocation ID: d835c05f4a3c41ee989fdb5861065488