+ wait_for_file /etc/pki/CA/cacert.pem
+ local file=/etc/pki/CA/cacert.pem
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ sleep 1
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ sleep 1
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ sleep 1
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ sleep 1
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ sleep 1
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ wait_for_file /etc/pki/qemu/ca-cert.pem
+ local file=/etc/pki/qemu/ca-cert.pem
+ '[' '!' -f /etc/pki/qemu/ca-cert.pem ']'
+ wait_for_file /etc/pki/libvirt/servercert.pem
+ local file=/etc/pki/libvirt/servercert.pem
+ '[' '!' -f /etc/pki/libvirt/servercert.pem ']'
+ wait_for_file /etc/pki/libvirt/clientcert.pem
+ local file=/etc/pki/libvirt/clientcert.pem
+ '[' '!' -f /etc/pki/libvirt/clientcert.pem ']'
+ wait_for_file /etc/pki/qemu/server-cert.pem
+ local file=/etc/pki/qemu/server-cert.pem
+ '[' '!' -f /etc/pki/qemu/server-cert.pem ']'
+ wait_for_file /etc/pki/qemu/client-cert.pem
+ local file=/etc/pki/qemu/client-cert.pem
+ '[' '!' -f /etc/pki/qemu/client-cert.pem ']'
+ wait_for_file /etc/pki/libvirt/private/serverkey.pem
+ local file=/etc/pki/libvirt/private/serverkey.pem
+ '[' '!' -f /etc/pki/libvirt/private/serverkey.pem ']'
+ wait_for_file /etc/pki/libvirt/private/clientkey.pem
+ local file=/etc/pki/libvirt/private/clientkey.pem
+ '[' '!' -f /etc/pki/libvirt/private/clientkey.pem ']'
+ wait_for_file /etc/pki/qemu/server-key.pem
+ local file=/etc/pki/qemu/server-key.pem
+ '[' '!' -f /etc/pki/qemu/server-key.pem ']'
+ wait_for_file /etc/pki/qemu/client-key.pem
+ local file=/etc/pki/qemu/client-key.pem
+ '[' '!' -f /etc/pki/qemu/client-key.pem ']'
+ wait_for_file /etc/pki/libvirt-vnc/ca-cert.pem
+ local file=/etc/pki/libvirt-vnc/ca-cert.pem
+ '[' '!' -f /etc/pki/libvirt-vnc/ca-cert.pem ']'
+ wait_for_file /etc/pki/libvirt-vnc/server-cert.pem
+ local file=/etc/pki/libvirt-vnc/server-cert.pem
+ '[' '!' -f /etc/pki/libvirt-vnc/server-cert.pem ']'
+ wait_for_file /etc/pki/libvirt-vnc/server-key.pem
+ local file=/etc/pki/libvirt-vnc/server-key.pem
+ '[' '!' -f /etc/pki/libvirt-vnc/server-key.pem ']'
++ grep -w libvirtd
++ cat /proc/1/comm /proc/10/comm /proc/100/comm /proc/100005/comm /proc/100098/comm /proc/100955/comm /proc/100969/comm /proc/102/comm /proc/103/comm /proc/10351/comm /proc/104/comm /proc/105/comm /proc/105739/comm /proc/106/comm /proc/107764/comm /proc/108/comm /proc/108889/comm /proc/10894/comm /proc/10895/comm /proc/109/comm /proc/11/comm /proc/110/comm /proc/111/comm /proc/1116/comm /proc/112/comm /proc/113/comm /proc/113767/comm /proc/113791/comm /proc/114/comm /proc/114160/comm /proc/114183/comm /proc/114184/comm /proc/115/comm /proc/115291/comm /proc/115317/comm /proc/115332/comm /proc/115356/comm /proc/115629/comm /proc/115821/comm /proc/115823/comm /proc/115904/comm /proc/116/comm /proc/116593/comm /proc/116920/comm /proc/117/comm /proc/117082/comm /proc/117333/comm /proc/117356/comm /proc/117462/comm /proc/117480/comm /proc/117486/comm /proc/117561/comm /proc/117562/comm /proc/117573/comm /proc/117806/comm /proc/119201/comm /proc/119225/comm /proc/119263/comm /proc/119293/comm /proc/119502/comm /proc/119503/comm /proc/119759/comm /proc/12/comm /proc/120114/comm /proc/120115/comm /proc/121056/comm /proc/12279/comm /proc/12310/comm /proc/12365/comm /proc/12391/comm /proc/12410/comm /proc/124176/comm /proc/12643/comm /proc/12674/comm /proc/126829/comm /proc/12729/comm /proc/12757/comm /proc/127619/comm /proc/127655/comm /proc/12776/comm /proc/129278/comm /proc/129291/comm /proc/129292/comm /proc/13/comm /proc/130822/comm /proc/132350/comm /proc/132373/comm /proc/132390/comm /proc/132419/comm /proc/133052/comm /proc/133428/comm /proc/133655/comm /proc/137179/comm /proc/137283/comm /proc/14/comm /proc/143/comm /proc/1447/comm /proc/144747/comm /proc/144748/comm /proc/148082/comm /proc/148091/comm /proc/149085/comm /proc/149096/comm /proc/15/comm /proc/150711/comm /proc/151896/comm /proc/151959/comm /proc/152353/comm /proc/152383/comm /proc/152384/comm /proc/153910/comm /proc/153911/comm /proc/1565/comm /proc/1566/comm /proc/1567/comm /proc/1568/comm /proc/1572/comm /proc/16/comm /proc/161043/comm /proc/161044/comm /proc/161046/comm /proc/161048/comm /proc/161209/comm /proc/161876/comm /proc/161900/comm /proc/162114/comm /proc/162311/comm /proc/162357/comm /proc/162370/comm /proc/162401/comm /proc/162402/comm /proc/162403/comm /proc/162404/comm /proc/163409/comm /proc/163445/comm /proc/163865/comm /proc/163898/comm /proc/1639/comm /proc/164007/comm /proc/1643/comm /proc/164375/comm /proc/164615/comm /proc/164831/comm /proc/164857/comm /proc/165086/comm /proc/165103/comm /proc/165109/comm /proc/165174/comm /proc/165175/comm /proc/165185/comm /proc/1652/comm /proc/165284/comm /proc/166/comm /proc/167/comm /proc/167050/comm /proc/167074/comm /proc/167154/comm /proc/167203/comm /proc/167227/comm /proc/167310/comm /proc/167349/comm /proc/167355/comm /proc/167395/comm /proc/167478/comm /proc/167644/comm /proc/167668/comm /proc/167727/comm /proc/167750/comm /proc/167914/comm /proc/167936/comm /proc/168/comm /proc/168371/comm /proc/169/comm /proc/170/comm /proc/171/comm /proc/171409/comm /proc/172/comm /proc/172861/comm /proc/173/comm /proc/173497/comm /proc/173543/comm /proc/174/comm /proc/174776/comm /proc/175106/comm /proc/175735/comm /proc/175895/comm /proc/177/comm /proc/177662/comm /proc/177953/comm /proc/177984/comm /proc/177985/comm /proc/178077/comm /proc/178089/comm /proc/178090/comm /proc/178659/comm /proc/178688/comm /proc/178750/comm /proc/178753/comm /proc/178944/comm /proc/178992/comm /proc/179/comm /proc/179021/comm /proc/179078/comm /proc/179079/comm /proc/179189/comm /proc/179191/comm /proc/179713/comm /proc/179860/comm /proc/179886/comm /proc/18/comm /proc/180/comm /proc/180050/comm /proc/180066/comm /proc/180072/comm /proc/180222/comm /proc/180223/comm /proc/180233/comm /proc/180467/comm /proc/181799/comm /proc/181845/comm /proc/181856/comm /proc/181901/comm /proc/181913/comm /proc/181946/comm /proc/181966/comm /proc/182029/comm /proc/182056/comm /proc/182126/comm /proc/182366/comm /proc/182391/comm /proc/182406/comm /proc/182436/comm /proc/183/comm /proc/183191/comm /proc/183215/comm /proc/183272/comm /proc/183496/comm /proc/183512/comm /proc/184710/comm /proc/184731/comm /proc/185/comm /proc/187/comm /proc/187009/comm /proc/18719/comm /proc/18738/comm /proc/18762/comm /proc/187794/comm /proc/18789/comm /proc/188/comm /proc/18803/comm /proc/188958/comm /proc/188991/comm /proc/188998/comm /proc/189/comm /proc/189004/comm /proc/189632/comm /proc/19/comm /proc/190/comm /proc/190019/comm /proc/191/comm /proc/191952/comm /proc/191953/comm /proc/191954/comm /proc/192/comm /proc/192202/comm /proc/192214/comm /proc/192243/comm /proc/192244/comm /proc/192257/comm /proc/192270/comm /proc/192271/comm /proc/192601/comm /proc/192604/comm /proc/192607/comm /proc/193257/comm /proc/193562/comm /proc/193802/comm /proc/194190/comm /proc/194700/comm /proc/195/comm /proc/195108/comm /proc/195129/comm /proc/195142/comm /proc/195223/comm /proc/195393/comm /proc/195405/comm /proc/195822/comm /proc/196077/comm /proc/196094/comm /proc/196095/comm /proc/196096/comm /proc/196098/comm /proc/196101/comm /proc/196102/comm /proc/196253/comm /proc/196254/comm /proc/196415/comm /proc/196665/comm /proc/196671/comm /proc/196746/comm /proc/196768/comm /proc/196867/comm /proc/196894/comm /proc/196962/comm /proc/196985/comm /proc/197042/comm /proc/197290/comm /proc/197307/comm /proc/197321/comm /proc/197393/comm /proc/197396/comm /proc/197415/comm /proc/197416/comm /proc/197420/comm /proc/197432/comm /proc/197437/comm /proc/197511/comm /proc/197514/comm /proc/197515/comm /proc/197516/comm /proc/197517/comm /proc/2/comm /proc/20/comm /proc/202/comm /proc/203/comm /proc/204/comm /proc/208/comm /proc/21/comm /proc/217/comm /proc/21716/comm /proc/21781/comm /proc/21782/comm /proc/21795/comm /proc/22/comm /proc/220/comm /proc/221/comm /proc/226/comm /proc/24/comm /proc/248/comm /proc/25/comm /proc/25055/comm /proc/25319/comm /proc/25336/comm /proc/25363/comm /proc/25376/comm /proc/26/comm /proc/27/comm /proc/279/comm /proc/28/comm /proc/280/comm /proc/29738/comm /proc/3/comm /proc/30/comm /proc/30001/comm /proc/30017/comm /proc/30042/comm /proc/30055/comm /proc/307/comm /proc/308/comm /proc/31/comm /proc/312/comm /proc/313/comm /proc/314/comm /proc/315/comm /proc/316/comm /proc/317/comm /proc/318/comm /proc/319/comm /proc/32/comm /proc/320/comm /proc/321/comm /proc/322/comm /proc/33/comm /proc/34/comm /proc/34350/comm /proc/34612/comm /proc/34630/comm /proc/34655/comm /proc/34667/comm /proc/36/comm /proc/362/comm /proc/37/comm /proc/38/comm /proc/39/comm /proc/39207/comm /proc/39210/comm /proc/39325/comm /proc/39345/comm /proc/39373/comm /proc/394/comm /proc/39400/comm /proc/39435/comm /proc/398/comm /proc/4/comm /proc/40/comm /proc/41913/comm /proc/41957/comm /proc/41960/comm /proc/41963/comm /proc/41984/comm /proc/42/comm /proc/42006/comm /proc/42061/comm /proc/42067/comm /proc/42081/comm /proc/42092/comm /proc/42156/comm /proc/42178/comm /proc/42200/comm /proc/42214/comm /proc/42324/comm /proc/42429/comm /proc/42572/comm /proc/42596/comm /proc/42622/comm /proc/43/comm /proc/43297/comm /proc/43321/comm /proc/43352/comm /proc/43378/comm /proc/43620/comm /proc/43816/comm /proc/43832/comm /proc/44/comm /proc/44212/comm /proc/44654/comm /proc/44677/comm /proc/44709/comm /proc/45/comm /proc/45077/comm /proc/45106/comm /proc/45126/comm /proc/45165/comm /proc/45167/comm /proc/45218/comm /proc/455/comm /proc/45586/comm /proc/45610/comm /proc/45758/comm /proc/46/comm /proc/46095/comm /proc/46119/comm /proc/46135/comm /proc/46166/comm /proc/46185/comm /proc/46209/comm /proc/46316/comm /proc/46362/comm /proc/46406/comm /proc/48/comm /proc/48343/comm /proc/48370/comm /proc/48380/comm /proc/48404/comm /proc/48538/comm /proc/48709/comm /proc/48723/comm /proc/48794/comm /proc/49/comm /proc/49341/comm /proc/49377/comm /proc/49411/comm /proc/49435/comm /proc/49481/comm /proc/49602/comm /proc/49777/comm /proc/49802/comm /proc/49922/comm /proc/5/comm /proc/50/comm /proc/50071/comm /proc/50102/comm /proc/50452/comm /proc/50476/comm /proc/50629/comm /proc/50722/comm /proc/50808/comm /proc/50839/comm /proc/50891/comm /proc/50922/comm /proc/51/comm /proc/51870/comm /proc/52/comm /proc/520/comm /proc/52726/comm /proc/52750/comm /proc/52909/comm /proc/52932/comm /proc/52985/comm /proc/53117/comm /proc/53307/comm /proc/53404/comm /proc/54/comm /proc/55/comm /proc/56/comm /proc/57/comm /proc/57987/comm /proc/58/comm /proc/58012/comm /proc/58668/comm /proc/58704/comm /proc/58722/comm /proc/58747/comm /proc/58780/comm /proc/58803/comm /proc/58972/comm /proc/58997/comm /proc/59047/comm /proc/59084/comm /proc/59119/comm /proc/59252/comm /proc/6/comm /proc/60/comm /proc/61/comm /proc/613/comm /proc/617/comm /proc/619/comm /proc/62/comm /proc/626/comm /proc/627/comm /proc/63/comm /proc/64/comm /proc/64024/comm /proc/64025/comm /proc/64026/comm /proc/64276/comm /proc/643/comm /proc/64310/comm /proc/64389/comm /proc/64413/comm /proc/64431/comm /proc/64452/comm /proc/64468/comm /proc/64502/comm /proc/64821/comm /proc/650/comm /proc/65286/comm /proc/65480/comm /proc/65588/comm /proc/65626/comm /proc/65757/comm /proc/65784/comm /proc/65846/comm /proc/65868/comm /proc/65942/comm /proc/65943/comm /proc/65957/comm /proc/66/comm /proc/66005/comm /proc/66006/comm /proc/66054/comm /proc/66055/comm /proc/66056/comm /proc/66058/comm /proc/66393/comm /proc/66416/comm /proc/66431/comm /proc/66458/comm /proc/66545/comm /proc/66569/comm /proc/66761/comm /proc/66785/comm /proc/67/comm /proc/67057/comm /proc/67086/comm /proc/67156/comm /proc/67337/comm /proc/67369/comm /proc/67772/comm /proc/68/comm /proc/68052/comm /proc/68078/comm /proc/68298/comm /proc/68313/comm /proc/68314/comm /proc/68315/comm /proc/68316/comm /proc/68317/comm /proc/68334/comm /proc/68857/comm /proc/68991/comm /proc/69/comm /proc/69007/comm /proc/69031/comm /proc/69138/comm /proc/69176/comm /proc/69248/comm /proc/69280/comm /proc/69485/comm /proc/69526/comm /proc/69940/comm /proc/69983/comm /proc/70/comm /proc/70027/comm /proc/70059/comm /proc/70159/comm /proc/70217/comm /proc/70223/comm /proc/70250/comm /proc/70286/comm /proc/70308/comm /proc/704/comm /proc/70458/comm /proc/70489/comm /proc/707/comm /proc/708/comm /proc/70800/comm /proc/70818/comm /proc/70824/comm /proc/70873/comm /proc/70874/comm /proc/70884/comm /proc/71089/comm /proc/72/comm /proc/721/comm /proc/72296/comm /proc/72320/comm /proc/73/comm /proc/74/comm /proc/75/comm /proc/75894/comm /proc/75909/comm /proc/75910/comm /proc/75911/comm /proc/75912/comm /proc/75913/comm /proc/75915/comm /proc/75916/comm /proc/75917/comm /proc/75918/comm /proc/75920/comm /proc/75924/comm /proc/75925/comm /proc/75926/comm /proc/75928/comm /proc/76/comm /proc/76429/comm /proc/78/comm /proc/79/comm /proc/8/comm /proc/80/comm /proc/81/comm /proc/81732/comm /proc/81757/comm /proc/81963/comm /proc/81983/comm /proc/81989/comm /proc/82/comm /proc/82039/comm /proc/82040/comm /proc/82050/comm /proc/82140/comm /proc/83325/comm /proc/83349/comm /proc/84/comm /proc/85/comm /proc/86/comm /proc/866/comm /proc/87/comm /proc/87240/comm /proc/88/comm /proc/88695/comm /proc/88707/comm /proc/89511/comm /proc/89536/comm /proc/90/comm /proc/90387/comm /proc/91/comm /proc/92/comm /proc/92241/comm /proc/9250/comm /proc/9267/comm /proc/9283/comm /proc/93/comm /proc/9365/comm /proc/94/comm /proc/96/comm /proc/96182/comm /proc/96458/comm /proc/96481/comm /proc/96652/comm /proc/96670/comm /proc/96676/comm /proc/96886/comm /proc/96887/comm /proc/96903/comm /proc/97/comm /proc/97155/comm /proc/98/comm /proc/99/comm /proc/99622/comm /proc/99654/comm /proc/99688/comm /proc/99716/comm /proc/9983/comm /proc/self/comm /proc/thread-self/comm
+ '[' -n '' ']'
+ rm -f /var/run/libvirtd.pid
+ [[ -c /dev/kvm ]]
+ chmod 660 /dev/kvm
+ chown root:kvm /dev/kvm
+ CGROUPS=
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/blkio ']'
+ grep -w blkio /sys/fs/cgroup/cgroup.controllers
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/cpu ']'
+ grep -w cpu /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=cpu,
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/devices ']'
+ grep -w devices /sys/fs/cgroup/cgroup.controllers
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/freezer ']'
+ grep -w freezer /sys/fs/cgroup/cgroup.controllers
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/hugetlb ']'
+ grep -w hugetlb /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=hugetlb,
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/memory ']'
+ grep -w memory /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=memory,
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/net_cls ']'
+ grep -w net_cls /sys/fs/cgroup/cgroup.controllers
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/perf_event ']'
+ grep -w perf_event /sys/fs/cgroup/cgroup.controllers
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/rdma ']'
+ grep -w rdma /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=rdma,
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/misc ']'
+ grep -w misc /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=misc,
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/pids ']'
+ grep -w pids /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=pids,
+ cgcreate -g cpu,hugetlb,memory,rdma,misc,pids:/osh-libvirt
++ cat /proc/meminfo
++ grep HugePages_Total
++ tr -cd '[:digit:]'
+ hp_count=0
+ '[' 00 -gt 0 ']'
+ '[' -n 457eb676-33da-42ec-9a8c-9293d545c337 ']'
+ cgexec -g cpu,hugetlb,memory,rdma,misc,pids:/osh-libvirt systemd-run --scope --slice=system libvirtd --listen
++ mktemp --suffix .xml
+ tmpsecret=/tmp/tmp.tUM9hd5hcY.xml
+ '[' -n '' ']'
+ trap cleanup EXIT
+ TIMEOUT=60
+ [[ ! -f /var/run/libvirtd.pid ]]
+ [[ 60 -gt 0 ]]
+ let TIMEOUT-=1
+ sleep 1
Running as unit: run-r25178e852c194506bafb18045bf0d5fa.scope; invocation ID: e1fb4e6847314700bcb0cecec1abc8b9
+ [[ ! -f /var/run/libvirtd.pid ]]
+ TIMEOUT=10
+ [[ ! -e /var/run/libvirt/libvirt-sock ]]
+ '[' -z '' ']'
+ '[' -n cinder ']'
++ awk '/key/{print $3}' /etc/ceph/ceph.client.cinder.keyring
+ CEPH_CINDER_KEYRING=AQAk2JZqFDDYKRAAjNUpTk7sAa4WWV5F8AwUVQ==
+ '[' -n cinder ']'
+ create_virsh_libvirt_secret cinder 457eb676-33da-42ec-9a8c-9293d545c337 AQAk2JZqFDDYKRAAjNUpTk7sAa4WWV5F8AwUVQ==
+ sec_user=cinder
+ sec_uuid=457eb676-33da-42ec-9a8c-9293d545c337
+ sec_ceph_keyring=AQAk2JZqFDDYKRAAjNUpTk7sAa4WWV5F8AwUVQ==
+ cat
+ virsh secret-define --file /tmp/tmp.tUM9hd5hcY.xml
Secret 457eb676-33da-42ec-9a8c-9293d545c337 created

+ virsh secret-set-value --secret 457eb676-33da-42ec-9a8c-9293d545c337 --base64 AQAk2JZqFDDYKRAAjNUpTk7sAa4WWV5F8AwUVQ==
error: Passing secret value as command-line argument is insecure!
Secret value set

+ '[' -n '' ']'
+ '[' -n '' ']'
+ cleanup
+ rm -f /tmp/tmp.tUM9hd5hcY.xml
+ '[' -n '' ']'
++ cat /var/run/libvirtd.pid
+ LIBVIRTD_PID=197537
+ kill 197537
+ tail --pid=197537 -f /dev/null
+ cgexec -g cpu,hugetlb,memory,rdma,misc,pids:/osh-libvirt systemd-run --scope --slice=system libvirtd --listen
Running as unit: run-r872ccc84ea2843baaadf6798d0aa4f08.scope; invocation ID: 5656464845564f4791bc318bc720044d