+ wait_for_file /etc/pki/CA/cacert.pem + local file=/etc/pki/CA/cacert.pem + '[' '!' -f /etc/pki/CA/cacert.pem ']' + sleep 1 + '[' '!' -f /etc/pki/CA/cacert.pem ']' + sleep 1 + '[' '!' -f /etc/pki/CA/cacert.pem ']' + sleep 1 + '[' '!' -f /etc/pki/CA/cacert.pem ']' + sleep 1 + '[' '!' -f /etc/pki/CA/cacert.pem ']' + sleep 1 + '[' '!' -f /etc/pki/CA/cacert.pem ']' + wait_for_file /etc/pki/qemu/ca-cert.pem + local file=/etc/pki/qemu/ca-cert.pem + '[' '!' -f /etc/pki/qemu/ca-cert.pem ']' + wait_for_file /etc/pki/libvirt/servercert.pem + local file=/etc/pki/libvirt/servercert.pem + '[' '!' -f /etc/pki/libvirt/servercert.pem ']' + wait_for_file /etc/pki/libvirt/clientcert.pem + local file=/etc/pki/libvirt/clientcert.pem + '[' '!' -f /etc/pki/libvirt/clientcert.pem ']' + wait_for_file /etc/pki/qemu/server-cert.pem + local file=/etc/pki/qemu/server-cert.pem + '[' '!' -f /etc/pki/qemu/server-cert.pem ']' + wait_for_file /etc/pki/qemu/client-cert.pem + local file=/etc/pki/qemu/client-cert.pem + '[' '!' -f /etc/pki/qemu/client-cert.pem ']' + wait_for_file /etc/pki/libvirt/private/serverkey.pem + local file=/etc/pki/libvirt/private/serverkey.pem + '[' '!' -f /etc/pki/libvirt/private/serverkey.pem ']' + wait_for_file /etc/pki/libvirt/private/clientkey.pem + local file=/etc/pki/libvirt/private/clientkey.pem + '[' '!' -f /etc/pki/libvirt/private/clientkey.pem ']' + wait_for_file /etc/pki/qemu/server-key.pem + local file=/etc/pki/qemu/server-key.pem + '[' '!' -f /etc/pki/qemu/server-key.pem ']' + wait_for_file /etc/pki/qemu/client-key.pem + local file=/etc/pki/qemu/client-key.pem + '[' '!' -f /etc/pki/qemu/client-key.pem ']' + wait_for_file /etc/pki/libvirt-vnc/ca-cert.pem + local file=/etc/pki/libvirt-vnc/ca-cert.pem + '[' '!' -f /etc/pki/libvirt-vnc/ca-cert.pem ']' + wait_for_file /etc/pki/libvirt-vnc/server-cert.pem + local file=/etc/pki/libvirt-vnc/server-cert.pem + '[' '!' -f /etc/pki/libvirt-vnc/server-cert.pem ']' + wait_for_file /etc/pki/libvirt-vnc/server-key.pem + local file=/etc/pki/libvirt-vnc/server-key.pem + '[' '!' -f /etc/pki/libvirt-vnc/server-key.pem ']' ++ grep -w libvirtd ++ cat /proc/1/comm /proc/10/comm /proc/100/comm /proc/10176/comm /proc/102/comm /proc/103/comm /proc/103044/comm /proc/104/comm /proc/105/comm /proc/106/comm /proc/10682/comm /proc/10683/comm /proc/108/comm /proc/108187/comm /proc/108210/comm /proc/108466/comm /proc/108542/comm /proc/108555/comm /proc/108556/comm /proc/109/comm /proc/109672/comm /proc/109702/comm /proc/109727/comm /proc/109752/comm /proc/11/comm /proc/110/comm /proc/110170/comm /proc/110301/comm /proc/110315/comm /proc/110325/comm /proc/110328/comm /proc/110635/comm /proc/110987/comm /proc/110994/comm /proc/111/comm /proc/111390/comm /proc/111714/comm /proc/111738/comm /proc/111913/comm /proc/111930/comm /proc/111936/comm /proc/111989/comm /proc/111990/comm /proc/112/comm /proc/112000/comm /proc/112091/comm /proc/113/comm /proc/113561/comm /proc/113585/comm /proc/113685/comm /proc/113708/comm /proc/114/comm /proc/115/comm /proc/115984/comm /proc/116/comm /proc/117/comm /proc/117230/comm /proc/117240/comm /proc/118132/comm /proc/1194/comm /proc/119663/comm /proc/119760/comm /proc/12/comm /proc/120863/comm /proc/12118/comm /proc/12148/comm /proc/12185/comm /proc/12226/comm /proc/12240/comm /proc/122731/comm /proc/123201/comm /proc/123214/comm /proc/123215/comm /proc/12478/comm /proc/124806/comm /proc/12507/comm /proc/12572/comm /proc/12597/comm /proc/12609/comm /proc/126590/comm /proc/126614/comm /proc/126628/comm /proc/126657/comm /proc/127197/comm /proc/127666/comm /proc/127939/comm /proc/129197/comm /proc/129230/comm /proc/129400/comm /proc/1299/comm /proc/13/comm /proc/1300/comm /proc/1301/comm /proc/1302/comm /proc/133428/comm /proc/134127/comm /proc/134773/comm /proc/134798/comm /proc/134799/comm /proc/136003/comm /proc/136004/comm /proc/1386/comm /proc/1390/comm /proc/14/comm /proc/143040/comm /proc/143041/comm /proc/143043/comm /proc/143044/comm /proc/143207/comm /proc/143215/comm /proc/144117/comm /proc/144146/comm /proc/144302/comm /proc/144425/comm /proc/1455/comm /proc/1459/comm /proc/1468/comm /proc/148267/comm /proc/148660/comm /proc/148913/comm /proc/149124/comm /proc/149125/comm /proc/149126/comm /proc/149127/comm /proc/15/comm /proc/156881/comm /proc/156905/comm /proc/157338/comm /proc/157362/comm /proc/157544/comm /proc/157721/comm /proc/157967/comm /proc/158013/comm /proc/158015/comm /proc/158164/comm /proc/158187/comm /proc/158305/comm /proc/158322/comm /proc/158328/comm /proc/158431/comm /proc/158432/comm /proc/158442/comm /proc/158652/comm /proc/16/comm /proc/160440/comm /proc/160469/comm /proc/160507/comm /proc/160557/comm /proc/160638/comm /proc/160664/comm /proc/160704/comm /proc/160781/comm /proc/160813/comm /proc/160852/comm /proc/160892/comm /proc/160933/comm /proc/161080/comm /proc/161103/comm /proc/161330/comm /proc/161354/comm /proc/161765/comm /proc/165846/comm /proc/166481/comm /proc/166636/comm /proc/166637/comm /proc/166981/comm /proc/167/comm /proc/167872/comm /proc/167894/comm /proc/168/comm /proc/168910/comm /proc/169/comm /proc/169048/comm /proc/169128/comm /proc/169416/comm /proc/170/comm /proc/170708/comm /proc/170709/comm /proc/171/comm /proc/171003/comm /proc/171203/comm /proc/171222/comm /proc/171241/comm /proc/171242/comm /proc/171243/comm /proc/171244/comm /proc/172/comm /proc/172150/comm /proc/172224/comm /proc/172758/comm /proc/172759/comm /proc/172782/comm /proc/172784/comm /proc/172952/comm /proc/172957/comm /proc/172960/comm /proc/172966/comm /proc/172973/comm /proc/173/comm /proc/173077/comm /proc/173101/comm /proc/173295/comm /proc/173313/comm /proc/173321/comm /proc/173371/comm /proc/173372/comm /proc/173382/comm /proc/173493/comm /proc/174/comm /proc/174856/comm /proc/174864/comm /proc/174913/comm /proc/174921/comm /proc/174943/comm /proc/174983/comm /proc/174989/comm /proc/175/comm /proc/175034/comm /proc/175322/comm /proc/175345/comm /proc/175467/comm /proc/175496/comm /proc/175545/comm /proc/175570/comm /proc/175937/comm /proc/175950/comm /proc/176110/comm /proc/176121/comm /proc/178/comm /proc/178877/comm /proc/178939/comm /proc/179495/comm /proc/179596/comm /proc/18/comm /proc/180/comm /proc/181/comm /proc/182019/comm /proc/182027/comm /proc/183503/comm /proc/183560/comm /proc/183978/comm /proc/183979/comm /proc/183980/comm /proc/184/comm /proc/184064/comm /proc/184169/comm /proc/184177/comm /proc/184209/comm /proc/184210/comm /proc/184228/comm /proc/184242/comm /proc/184243/comm /proc/184509/comm /proc/184512/comm /proc/184515/comm /proc/185/comm /proc/185132/comm /proc/185569/comm /proc/185832/comm /proc/186/comm /proc/186117/comm /proc/186152/comm /proc/186650/comm /proc/186652/comm /proc/186703/comm /proc/186811/comm /proc/187/comm /proc/187010/comm /proc/187015/comm /proc/187151/comm /proc/187164/comm /proc/187347/comm /proc/187620/comm /proc/187777/comm /proc/187792/comm /proc/187794/comm /proc/187795/comm /proc/187796/comm /proc/187797/comm /proc/187798/comm /proc/187857/comm /proc/187859/comm /proc/187863/comm /proc/187864/comm /proc/187865/comm /proc/187866/comm /proc/187867/comm /proc/187868/comm /proc/187869/comm /proc/187870/comm /proc/187871/comm /proc/187872/comm /proc/187873/comm /proc/187874/comm /proc/187875/comm /proc/187876/comm /proc/187877/comm /proc/187878/comm /proc/187879/comm /proc/187880/comm /proc/187881/comm /proc/187882/comm /proc/187883/comm /proc/187884/comm /proc/187885/comm /proc/187886/comm /proc/187887/comm /proc/187888/comm /proc/187889/comm /proc/187890/comm /proc/187891/comm /proc/187892/comm /proc/187893/comm /proc/187912/comm /proc/187979/comm /proc/188/comm /proc/188031/comm /proc/188087/comm /proc/188093/comm /proc/188107/comm /proc/188359/comm /proc/188360/comm /proc/188393/comm /proc/188395/comm /proc/188417/comm /proc/188420/comm /proc/188442/comm /proc/188443/comm /proc/188444/comm /proc/189/comm /proc/19/comm /proc/190/comm /proc/191/comm /proc/192/comm /proc/193/comm /proc/194/comm /proc/19495/comm /proc/195/comm /proc/19515/comm /proc/19538/comm /proc/19565/comm /proc/19581/comm /proc/196/comm /proc/2/comm /proc/20/comm /proc/21/comm /proc/211/comm /proc/21433/comm /proc/21444/comm /proc/21445/comm /proc/21465/comm /proc/218/comm /proc/219/comm /proc/22/comm /proc/224/comm /proc/24/comm /proc/24431/comm /proc/246/comm /proc/24697/comm /proc/24714/comm /proc/24739/comm /proc/24751/comm /proc/25/comm /proc/26/comm /proc/266/comm /proc/27/comm /proc/28/comm /proc/28861/comm /proc/290/comm /proc/29139/comm /proc/29156/comm /proc/29180/comm /proc/29192/comm /proc/296/comm /proc/29688/comm /proc/297/comm /proc/298/comm /proc/299/comm /proc/3/comm /proc/30/comm /proc/31/comm /proc/318/comm /proc/319/comm /proc/32/comm /proc/323/comm /proc/33/comm /proc/33631/comm /proc/33906/comm /proc/33925/comm /proc/33949/comm /proc/33961/comm /proc/34/comm /proc/34943/comm /proc/350/comm /proc/35543/comm /proc/35545/comm /proc/36/comm /proc/364/comm /proc/37/comm /proc/372/comm /proc/377/comm /proc/38/comm /proc/385/comm /proc/39/comm /proc/39298/comm /proc/39316/comm /proc/39351/comm /proc/39354/comm /proc/39369/comm /proc/394/comm /proc/39412/comm /proc/39452/comm /proc/39453/comm /proc/39456/comm /proc/39477/comm /proc/39553/comm /proc/39555/comm /proc/39585/comm /proc/39598/comm /proc/39711/comm /proc/39764/comm /proc/399/comm /proc/39917/comm /proc/39941/comm /proc/39966/comm /proc/4/comm /proc/40/comm /proc/404/comm /proc/406/comm /proc/40637/comm /proc/40655/comm /proc/40691/comm /proc/40703/comm /proc/40939/comm /proc/41151/comm /proc/41572/comm /proc/42/comm /proc/42011/comm /proc/42035/comm /proc/42077/comm /proc/42410/comm /proc/42434/comm /proc/42455/comm /proc/42480/comm /proc/42497/comm /proc/42549/comm /proc/42929/comm /proc/42953/comm /proc/43/comm /proc/43119/comm /proc/43409/comm /proc/43434/comm /proc/43465/comm /proc/43488/comm /proc/43502/comm /proc/43528/comm /proc/43643/comm /proc/43689/comm /proc/43735/comm /proc/44/comm /proc/45/comm /proc/45795/comm /proc/45828/comm /proc/45859/comm /proc/45883/comm /proc/46/comm /proc/460/comm /proc/46101/comm /proc/46114/comm /proc/46176/comm /proc/462/comm /proc/46263/comm /proc/46598/comm /proc/46623/comm /proc/46695/comm /proc/46720/comm /proc/46764/comm /proc/46839/comm /proc/47076/comm /proc/47100/comm /proc/47172/comm /proc/47221/comm /proc/47633/comm /proc/47657/comm /proc/47989/comm /proc/48/comm /proc/48013/comm /proc/48122/comm /proc/48176/comm /proc/48273/comm /proc/48302/comm /proc/48322/comm /proc/48417/comm /proc/49/comm /proc/5/comm /proc/50/comm /proc/50032/comm /proc/50162/comm /proc/50187/comm /proc/50402/comm /proc/50425/comm /proc/50456/comm /proc/50566/comm /proc/50757/comm /proc/50826/comm /proc/50913/comm /proc/51/comm /proc/52/comm /proc/528/comm /proc/54/comm /proc/54805/comm /proc/54829/comm /proc/55/comm /proc/55425/comm /proc/55452/comm /proc/55487/comm /proc/55517/comm /proc/55545/comm /proc/55570/comm /proc/55691/comm /proc/55715/comm /proc/55753/comm /proc/55788/comm /proc/55828/comm /proc/55921/comm /proc/56/comm /proc/57/comm /proc/58/comm /proc/6/comm /proc/60/comm /proc/60011/comm /proc/60040/comm /proc/60064/comm /proc/60086/comm /proc/60102/comm /proc/60129/comm /proc/60144/comm /proc/60173/comm /proc/60447/comm /proc/60461/comm /proc/60684/comm /proc/60839/comm /proc/60956/comm /proc/60981/comm /proc/61/comm /proc/61287/comm /proc/61320/comm /proc/61321/comm /proc/61331/comm /proc/61332/comm /proc/61407/comm /proc/61438/comm /proc/61571/comm /proc/61574/comm /proc/61575/comm /proc/61588/comm /proc/61611/comm /proc/61910/comm /proc/61940/comm /proc/61975/comm /proc/62/comm /proc/620/comm /proc/62007/comm /proc/62031/comm /proc/62067/comm /proc/62110/comm /proc/623/comm /proc/62415/comm /proc/62473/comm /proc/62500/comm /proc/626/comm /proc/62811/comm /proc/62836/comm /proc/629/comm /proc/63/comm /proc/630/comm /proc/63033/comm /proc/63056/comm /proc/63138/comm /proc/63157/comm /proc/63158/comm /proc/63159/comm /proc/63160/comm /proc/63161/comm /proc/63324/comm /proc/63348/comm /proc/63605/comm /proc/63696/comm /proc/64/comm /proc/64028/comm /proc/64108/comm /proc/64119/comm /proc/64143/comm /proc/64248/comm /proc/64282/comm /proc/64314/comm /proc/64459/comm /proc/64504/comm /proc/64662/comm /proc/64703/comm /proc/64751/comm /proc/650/comm /proc/65020/comm /proc/651/comm /proc/65184/comm /proc/65234/comm /proc/65264/comm /proc/65295/comm /proc/65389/comm /proc/65403/comm /proc/65421/comm /proc/65769/comm /proc/65792/comm /proc/66/comm /proc/66345/comm /proc/66362/comm /proc/66368/comm /proc/66498/comm /proc/66499/comm /proc/66509/comm /proc/66607/comm /proc/67/comm /proc/67812/comm /proc/67834/comm /proc/68/comm /proc/69/comm /proc/70/comm /proc/706/comm /proc/709/comm /proc/710/comm /proc/71125/comm /proc/71143/comm /proc/71144/comm /proc/71145/comm /proc/71146/comm /proc/71149/comm /proc/71151/comm /proc/71155/comm /proc/71156/comm /proc/71157/comm /proc/71158/comm /proc/71159/comm /proc/71160/comm /proc/71161/comm /proc/71162/comm /proc/71673/comm /proc/72/comm /proc/723/comm /proc/73/comm /proc/74/comm /proc/75/comm /proc/76/comm /proc/77250/comm /proc/77274/comm /proc/77387/comm /proc/77405/comm /proc/77411/comm /proc/77458/comm /proc/77459/comm /proc/77469/comm /proc/77622/comm /proc/78/comm /proc/78788/comm /proc/78813/comm /proc/79/comm /proc/79283/comm /proc/8/comm /proc/80/comm /proc/80121/comm /proc/80122/comm /proc/81/comm /proc/81695/comm /proc/82/comm /proc/83693/comm /proc/84/comm /proc/84061/comm /proc/84074/comm /proc/84770/comm /proc/84793/comm /proc/85/comm /proc/85499/comm /proc/86/comm /proc/87/comm /proc/870/comm /proc/88/comm /proc/88174/comm /proc/88175/comm /proc/88534/comm /proc/90/comm /proc/9068/comm /proc/90842/comm /proc/9085/comm /proc/90865/comm /proc/91/comm /proc/9101/comm /proc/91067/comm /proc/91084/comm /proc/91090/comm /proc/91190/comm /proc/91191/comm /proc/91202/comm /proc/91410/comm /proc/9184/comm /proc/92/comm /proc/93/comm /proc/94/comm /proc/94821/comm /proc/94848/comm /proc/94873/comm /proc/94898/comm /proc/95169/comm /proc/95242/comm /proc/96/comm /proc/96050/comm /proc/97/comm /proc/97129/comm /proc/98/comm /proc/9802/comm /proc/99/comm /proc/self/comm /proc/thread-self/comm + '[' -n '' ']' + rm -f /var/run/libvirtd.pid + [[ -c /dev/kvm ]] + chmod 660 /dev/kvm + chown root:kvm /dev/kvm + CGROUPS= + for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids + '[' -d /sys/fs/cgroup/blkio ']' + grep -w blkio /sys/fs/cgroup/cgroup.controllers + for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids + '[' -d /sys/fs/cgroup/cpu ']' + grep -w cpu /sys/fs/cgroup/cgroup.controllers cpuset cpu io memory hugetlb pids rdma misc + CGROUPS+=cpu, + for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids + '[' -d /sys/fs/cgroup/devices ']' + grep -w devices /sys/fs/cgroup/cgroup.controllers + for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids + '[' -d /sys/fs/cgroup/freezer ']' + grep -w freezer /sys/fs/cgroup/cgroup.controllers + for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids + '[' -d /sys/fs/cgroup/hugetlb ']' + grep -w hugetlb /sys/fs/cgroup/cgroup.controllers cpuset cpu io memory hugetlb pids rdma misc + CGROUPS+=hugetlb, + for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids + '[' -d /sys/fs/cgroup/memory ']' + grep -w memory /sys/fs/cgroup/cgroup.controllers cpuset cpu io memory hugetlb pids rdma misc + CGROUPS+=memory, + for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids + '[' -d /sys/fs/cgroup/net_cls ']' + grep -w net_cls /sys/fs/cgroup/cgroup.controllers + for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids + '[' -d /sys/fs/cgroup/perf_event ']' + grep -w perf_event /sys/fs/cgroup/cgroup.controllers + for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids + '[' -d /sys/fs/cgroup/rdma ']' + grep -w rdma /sys/fs/cgroup/cgroup.controllers cpuset cpu io memory hugetlb pids rdma misc + CGROUPS+=rdma, + for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids + '[' -d /sys/fs/cgroup/misc ']' + grep -w misc /sys/fs/cgroup/cgroup.controllers cpuset cpu io memory hugetlb pids rdma misc + CGROUPS+=misc, + for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids + '[' -d /sys/fs/cgroup/pids ']' + grep -w pids /sys/fs/cgroup/cgroup.controllers cpuset cpu io memory hugetlb pids rdma misc + CGROUPS+=pids, + cgcreate -g cpu,hugetlb,memory,rdma,misc,pids:/osh-libvirt ++ cat /proc/meminfo ++ grep HugePages_Total ++ tr -cd '[:digit:]' + hp_count=0 + '[' 00 -gt 0 ']' + '[' -n 457eb676-33da-42ec-9a8c-9293d545c337 ']' + cgexec -g cpu,hugetlb,memory,rdma,misc,pids:/osh-libvirt systemd-run --scope --slice=system libvirtd --listen ++ mktemp --suffix .xml + tmpsecret=/tmp/tmp.W2S9xNOvqN.xml + '[' -n '' ']' + trap cleanup EXIT + TIMEOUT=60 + [[ ! -f /var/run/libvirtd.pid ]] + [[ 60 -gt 0 ]] + let TIMEOUT-=1 + sleep 1 Running as unit: run-rbd23fa30af9f4da4877367045d58d99a.scope; invocation ID: 8300d6f37a28448bbe958eedadf56014 + [[ ! -f /var/run/libvirtd.pid ]] + TIMEOUT=10 + [[ ! -e /var/run/libvirt/libvirt-sock ]] + '[' -z '' ']' + '[' -n cinder ']' ++ awk '/key/{print $3}' /etc/ceph/ceph.client.cinder.keyring + CEPH_CINDER_KEYRING=AQCecfppqv/LLxAAA8ygur++B8o1GOuDaOurAw== + '[' -n cinder ']' + create_virsh_libvirt_secret cinder 457eb676-33da-42ec-9a8c-9293d545c337 AQCecfppqv/LLxAAA8ygur++B8o1GOuDaOurAw== + sec_user=cinder + sec_uuid=457eb676-33da-42ec-9a8c-9293d545c337 + sec_ceph_keyring=AQCecfppqv/LLxAAA8ygur++B8o1GOuDaOurAw== + cat + virsh secret-define --file /tmp/tmp.W2S9xNOvqN.xml Secret 457eb676-33da-42ec-9a8c-9293d545c337 created + virsh secret-set-value --secret 457eb676-33da-42ec-9a8c-9293d545c337 --base64 AQCecfppqv/LLxAAA8ygur++B8o1GOuDaOurAw== error: Passing secret value as command-line argument is insecure! + '[' -n '' ']' + '[' -n '' ']' + cleanup + rm -f /tmp/tmp.W2S9xNOvqN.xml + '[' -n '' ']' ++ cat /var/run/libvirtd.pid + LIBVIRTD_PID=188464 + kill 188464 + tail --pid=188464 -f /dev/null Secret value set + cgexec -g cpu,hugetlb,memory,rdma,misc,pids:/osh-libvirt systemd-run --scope --slice=system libvirtd --listen Running as unit: run-r9791a1e8cecb4e3bb196732759e7353b.scope; invocation ID: 8220016a15344a9bb7b256af40381873