+ wait_for_file /etc/pki/CA/cacert.pem
+ local file=/etc/pki/CA/cacert.pem
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ sleep 1
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ sleep 1
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ sleep 1
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ sleep 1
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ sleep 1
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ wait_for_file /etc/pki/qemu/ca-cert.pem
+ local file=/etc/pki/qemu/ca-cert.pem
+ '[' '!' -f /etc/pki/qemu/ca-cert.pem ']'
+ wait_for_file /etc/pki/libvirt/servercert.pem
+ local file=/etc/pki/libvirt/servercert.pem
+ '[' '!' -f /etc/pki/libvirt/servercert.pem ']'
+ wait_for_file /etc/pki/libvirt/clientcert.pem
+ local file=/etc/pki/libvirt/clientcert.pem
+ '[' '!' -f /etc/pki/libvirt/clientcert.pem ']'
+ wait_for_file /etc/pki/qemu/server-cert.pem
+ local file=/etc/pki/qemu/server-cert.pem
+ '[' '!' -f /etc/pki/qemu/server-cert.pem ']'
+ wait_for_file /etc/pki/qemu/client-cert.pem
+ local file=/etc/pki/qemu/client-cert.pem
+ '[' '!' -f /etc/pki/qemu/client-cert.pem ']'
+ wait_for_file /etc/pki/libvirt/private/serverkey.pem
+ local file=/etc/pki/libvirt/private/serverkey.pem
+ '[' '!' -f /etc/pki/libvirt/private/serverkey.pem ']'
+ wait_for_file /etc/pki/libvirt/private/clientkey.pem
+ local file=/etc/pki/libvirt/private/clientkey.pem
+ '[' '!' -f /etc/pki/libvirt/private/clientkey.pem ']'
+ wait_for_file /etc/pki/qemu/server-key.pem
+ local file=/etc/pki/qemu/server-key.pem
+ '[' '!' -f /etc/pki/qemu/server-key.pem ']'
+ wait_for_file /etc/pki/qemu/client-key.pem
+ local file=/etc/pki/qemu/client-key.pem
+ '[' '!' -f /etc/pki/qemu/client-key.pem ']'
+ wait_for_file /etc/pki/libvirt-vnc/ca-cert.pem
+ local file=/etc/pki/libvirt-vnc/ca-cert.pem
+ '[' '!' -f /etc/pki/libvirt-vnc/ca-cert.pem ']'
+ wait_for_file /etc/pki/libvirt-vnc/server-cert.pem
+ local file=/etc/pki/libvirt-vnc/server-cert.pem
+ '[' '!' -f /etc/pki/libvirt-vnc/server-cert.pem ']'
+ wait_for_file /etc/pki/libvirt-vnc/server-key.pem
+ local file=/etc/pki/libvirt-vnc/server-key.pem
+ '[' '!' -f /etc/pki/libvirt-vnc/server-key.pem ']'
++ grep -w libvirtd
++ cat /proc/1/comm /proc/10/comm /proc/100/comm /proc/100491/comm /proc/10175/comm /proc/102/comm /proc/102078/comm /proc/102100/comm /proc/102593/comm /proc/102608/comm /proc/102609/comm /proc/103/comm /proc/103681/comm /proc/103705/comm /proc/103714/comm /proc/103735/comm /proc/103758/comm /proc/104/comm /proc/104045/comm /proc/104272/comm /proc/104275/comm /proc/105/comm /proc/105179/comm /proc/105694/comm /proc/105717/comm /proc/105820/comm /proc/105846/comm /proc/105852/comm /proc/105901/comm /proc/105903/comm /proc/105904/comm /proc/105938/comm /proc/105939/comm /proc/105949/comm /proc/106/comm /proc/106162/comm /proc/10681/comm /proc/10682/comm /proc/107509/comm /proc/107533/comm /proc/107548/comm /proc/107579/comm /proc/108/comm /proc/109/comm /proc/11/comm /proc/110/comm /proc/111/comm /proc/111387/comm /proc/111466/comm /proc/111816/comm /proc/112/comm /proc/113/comm /proc/114/comm /proc/114008/comm /proc/115/comm /proc/116/comm /proc/117/comm /proc/117658/comm /proc/117696/comm /proc/117697/comm /proc/119174/comm /proc/1192/comm /proc/119266/comm /proc/12/comm /proc/120668/comm /proc/120690/comm /proc/120714/comm /proc/120762/comm /proc/12118/comm /proc/121428/comm /proc/12148/comm /proc/121831/comm /proc/12191/comm /proc/121986/comm /proc/12227/comm /proc/12241/comm /proc/122653/comm /proc/122660/comm /proc/123353/comm /proc/123375/comm /proc/123428/comm /proc/123889/comm /proc/12481/comm /proc/124840/comm /proc/12514/comm /proc/12567/comm /proc/12593/comm /proc/12614/comm /proc/127262/comm /proc/128141/comm /proc/128191/comm /proc/128201/comm /proc/128658/comm /proc/128682/comm /proc/128683/comm /proc/1297/comm /proc/1298/comm /proc/1299/comm /proc/13/comm /proc/1300/comm /proc/130143/comm /proc/130144/comm /proc/137371/comm /proc/137372/comm /proc/137374/comm /proc/137375/comm /proc/137516/comm /proc/138043/comm /proc/138066/comm /proc/138390/comm /proc/138441/comm /proc/138509/comm /proc/138522/comm /proc/138554/comm /proc/138555/comm /proc/138556/comm /proc/138557/comm /proc/1392/comm /proc/139575/comm /proc/1396/comm /proc/139603/comm /proc/14/comm /proc/140006/comm /proc/140030/comm /proc/140199/comm /proc/140236/comm /proc/140533/comm /proc/140534/comm /proc/140535/comm /proc/140670/comm /proc/140846/comm /proc/140869/comm /proc/140962/comm /proc/140979/comm /proc/140985/comm /proc/141032/comm /proc/141034/comm /proc/141035/comm /proc/141115/comm /proc/141116/comm /proc/141126/comm /proc/141282/comm /proc/141928/comm /proc/142731/comm /proc/143064/comm /proc/143088/comm /proc/143116/comm /proc/143162/comm /proc/143188/comm /proc/143229/comm /proc/143266/comm /proc/143279/comm /proc/143315/comm /proc/143417/comm /proc/143450/comm /proc/143687/comm /proc/143709/comm /proc/143738/comm /proc/144363/comm /proc/144391/comm /proc/144453/comm /proc/1461/comm /proc/1465/comm /proc/1474/comm /proc/15/comm /proc/16/comm /proc/161657/comm /proc/162377/comm /proc/162424/comm /proc/163484/comm /proc/163974/comm /proc/164837/comm /proc/166454/comm /proc/166457/comm /proc/166881/comm /proc/166893/comm /proc/166894/comm /proc/166969/comm /proc/167/comm /proc/167101/comm /proc/167259/comm /proc/167271/comm /proc/167272/comm /proc/167664/comm /proc/167706/comm /proc/167923/comm /proc/167943/comm /proc/168/comm /proc/168028/comm /proc/168029/comm /proc/168037/comm /proc/168038/comm /proc/168705/comm /proc/168729/comm /proc/168730/comm /proc/168732/comm /proc/168858/comm /proc/168882/comm /proc/168998/comm /proc/169/comm /proc/169015/comm /proc/169021/comm /proc/169131/comm /proc/169133/comm /proc/169134/comm /proc/169177/comm /proc/169178/comm /proc/169195/comm /proc/169378/comm /proc/169688/comm /proc/170/comm /proc/170463/comm /proc/170486/comm /proc/170547/comm /proc/170564/comm /proc/17057/comm /proc/170591/comm /proc/170617/comm /proc/170639/comm /proc/170716/comm /proc/170962/comm /proc/170992/comm /proc/171/comm /proc/171039/comm /proc/171074/comm /proc/171118/comm /proc/171160/comm /proc/171553/comm /proc/171769/comm /proc/171782/comm /proc/171796/comm /proc/172/comm /proc/173/comm /proc/173495/comm /proc/174/comm /proc/174691/comm /proc/175/comm /proc/176/comm /proc/176518/comm /proc/176521/comm /proc/177657/comm /proc/178/comm /proc/179139/comm /proc/179307/comm /proc/179308/comm /proc/179309/comm /proc/179620/comm /proc/179630/comm /proc/179664/comm /proc/179665/comm /proc/179682/comm /proc/179733/comm /proc/179734/comm /proc/18/comm /proc/180/comm /proc/180119/comm /proc/180120/comm /proc/180121/comm /proc/180646/comm /proc/181/comm /proc/181019/comm /proc/181243/comm /proc/181449/comm /proc/181756/comm /proc/182196/comm /proc/182215/comm /proc/182235/comm /proc/182276/comm /proc/182862/comm /proc/182979/comm /proc/182999/comm /proc/183/comm /proc/183000/comm /proc/183001/comm /proc/183002/comm /proc/183003/comm /proc/183004/comm /proc/183385/comm /proc/183532/comm /proc/183679/comm /proc/183726/comm /proc/183751/comm /proc/183820/comm /proc/183843/comm /proc/183891/comm /proc/183985/comm /proc/184/comm /proc/184022/comm /proc/184028/comm /proc/184086/comm /proc/184088/comm /proc/184089/comm /proc/184138/comm /proc/184141/comm /proc/184190/comm /proc/184197/comm /proc/184236/comm /proc/184237/comm /proc/184247/comm /proc/184311/comm /proc/184320/comm /proc/184326/comm /proc/184327/comm /proc/184328/comm /proc/184331/comm /proc/184332/comm /proc/184333/comm /proc/184334/comm /proc/184335/comm /proc/184336/comm /proc/185/comm /proc/186/comm /proc/187/comm /proc/188/comm /proc/189/comm /proc/19/comm /proc/190/comm /proc/191/comm /proc/192/comm /proc/193/comm /proc/19404/comm /proc/19425/comm /proc/19446/comm /proc/19472/comm /proc/19491/comm /proc/196/comm /proc/2/comm /proc/20/comm /proc/21/comm /proc/21308/comm /proc/21311/comm /proc/21312/comm /proc/21325/comm /proc/215/comm /proc/218/comm /proc/219/comm /proc/22/comm /proc/22030/comm /proc/224/comm /proc/24/comm /proc/24336/comm /proc/246/comm /proc/24600/comm /proc/24618/comm /proc/24642/comm /proc/24655/comm /proc/25/comm /proc/26/comm /proc/267/comm /proc/27/comm /proc/28/comm /proc/283/comm /proc/28764/comm /proc/29039/comm /proc/29058/comm /proc/29081/comm /proc/29094/comm /proc/296/comm /proc/297/comm /proc/298/comm /proc/299/comm /proc/3/comm /proc/30/comm /proc/300/comm /proc/31/comm /proc/319/comm /proc/32/comm /proc/320/comm /proc/324/comm /proc/33/comm /proc/333/comm /proc/33372/comm /proc/33650/comm /proc/33668/comm /proc/33692/comm /proc/33705/comm /proc/34/comm /proc/35273/comm /proc/35275/comm /proc/359/comm /proc/36/comm /proc/366/comm /proc/37/comm /proc/38/comm /proc/385/comm /proc/39/comm /proc/39351/comm /proc/39365/comm /proc/39383/comm /proc/39388/comm /proc/39411/comm /proc/39464/comm /proc/39470/comm /proc/39497/comm /proc/39503/comm /proc/39520/comm /proc/39593/comm /proc/39597/comm /proc/39632/comm /proc/39635/comm /proc/39757/comm /proc/398/comm /proc/39813/comm /proc/39954/comm /proc/39978/comm /proc/4/comm /proc/40/comm /proc/40004/comm /proc/403/comm /proc/405/comm /proc/40681/comm /proc/407/comm /proc/40709/comm /proc/40728/comm /proc/40757/comm /proc/41432/comm /proc/41648/comm /proc/42/comm /proc/42026/comm /proc/42377/comm /proc/42411/comm /proc/42439/comm /proc/42482/comm /proc/42506/comm /proc/42531/comm /proc/42554/comm /proc/42572/comm /proc/42607/comm /proc/42623/comm /proc/42646/comm /proc/42691/comm /proc/42790/comm /proc/42814/comm /proc/42842/comm /proc/42898/comm /proc/42943/comm /proc/43/comm /proc/43031/comm /proc/437/comm /proc/44/comm /proc/45/comm /proc/45146/comm /proc/45169/comm /proc/45254/comm /proc/45278/comm /proc/45457/comm /proc/45514/comm /proc/45526/comm /proc/45561/comm /proc/45646/comm /proc/46/comm /proc/46029/comm /proc/46053/comm /proc/46067/comm /proc/46090/comm /proc/461/comm /proc/46164/comm /proc/46295/comm /proc/46477/comm /proc/46501/comm /proc/46620/comm /proc/46789/comm /proc/46816/comm /proc/47195/comm /proc/47219/comm /proc/47332/comm /proc/47561/comm /proc/47658/comm /proc/47687/comm /proc/47754/comm /proc/47802/comm /proc/48/comm /proc/481/comm /proc/48682/comm /proc/487/comm /proc/49/comm /proc/49472/comm /proc/49494/comm /proc/49673/comm /proc/49696/comm /proc/49726/comm /proc/49819/comm /proc/5/comm /proc/50/comm /proc/50018/comm /proc/50076/comm /proc/51/comm /proc/52/comm /proc/530/comm /proc/53982/comm /proc/54/comm /proc/54006/comm /proc/54618/comm /proc/54644/comm /proc/54672/comm /proc/54697/comm /proc/54730/comm /proc/54753/comm /proc/54871/comm /proc/54894/comm /proc/54931/comm /proc/54966/comm /proc/55/comm /proc/55018/comm /proc/55141/comm /proc/55143/comm /proc/56/comm /proc/57/comm /proc/58/comm /proc/58791/comm /proc/58794/comm /proc/58795/comm /proc/58976/comm /proc/59056/comm /proc/59080/comm /proc/59176/comm /proc/59200/comm /proc/59237/comm /proc/59257/comm /proc/59282/comm /proc/59299/comm /proc/59505/comm /proc/59520/comm /proc/59837/comm /proc/6/comm /proc/60/comm /proc/60166/comm /proc/60208/comm /proc/60364/comm /proc/60510/comm /proc/60511/comm /proc/60543/comm /proc/60565/comm /proc/60566/comm /proc/60674/comm /proc/60703/comm /proc/60775/comm /proc/60814/comm /proc/60854/comm /proc/61/comm /proc/61014/comm /proc/61041/comm /proc/61057/comm /proc/61088/comm /proc/61103/comm /proc/61130/comm /proc/61535/comm /proc/61575/comm /proc/61681/comm /proc/61820/comm /proc/61848/comm /proc/62/comm /proc/621/comm /proc/62186/comm /proc/62201/comm /proc/62202/comm /proc/62203/comm /proc/62204/comm /proc/62205/comm /proc/62381/comm /proc/624/comm /proc/62405/comm /proc/62540/comm /proc/62567/comm /proc/627/comm /proc/62787/comm /proc/62827/comm /proc/63/comm /proc/63120/comm /proc/63144/comm /proc/633/comm /proc/63323/comm /proc/63358/comm /proc/63387/comm /proc/634/comm /proc/63426/comm /proc/63526/comm /proc/63768/comm /proc/63817/comm /proc/63872/comm /proc/63939/comm /proc/63979/comm /proc/64/comm /proc/64029/comm /proc/64393/comm /proc/64434/comm /proc/64451/comm /proc/64480/comm /proc/64543/comm /proc/64572/comm /proc/64595/comm /proc/64649/comm /proc/64683/comm /proc/64951/comm /proc/64968/comm /proc/64974/comm /proc/650/comm /proc/65076/comm /proc/65084/comm /proc/65085/comm /proc/65117/comm /proc/65118/comm /proc/65128/comm /proc/65225/comm /proc/655/comm /proc/66/comm /proc/66825/comm /proc/66849/comm /proc/67/comm /proc/68/comm /proc/68262/comm /proc/69/comm /proc/70/comm /proc/70198/comm /proc/70231/comm /proc/70232/comm /proc/70233/comm /proc/70234/comm /proc/70235/comm /proc/70236/comm /proc/70242/comm /proc/70243/comm /proc/70245/comm /proc/70246/comm /proc/70247/comm /proc/70248/comm /proc/70249/comm /proc/70250/comm /proc/706/comm /proc/709/comm /proc/710/comm /proc/72/comm /proc/723/comm /proc/73/comm /proc/73507/comm /proc/74/comm /proc/75/comm /proc/75792/comm /proc/75923/comm /proc/75946/comm /proc/76/comm /proc/76025/comm /proc/76042/comm /proc/76048/comm /proc/76096/comm /proc/76098/comm /proc/76099/comm /proc/76100/comm /proc/76101/comm /proc/76111/comm /proc/76314/comm /proc/77384/comm /proc/77408/comm /proc/78/comm /proc/79/comm /proc/8/comm /proc/80/comm /proc/80164/comm /proc/81/comm /proc/82/comm /proc/82328/comm /proc/82362/comm /proc/82762/comm /proc/82775/comm /proc/83462/comm /proc/83489/comm /proc/84/comm /proc/84278/comm /proc/85/comm /proc/86/comm /proc/868/comm /proc/87/comm /proc/88/comm /proc/88714/comm /proc/89502/comm /proc/89527/comm /proc/89662/comm /proc/89678/comm /proc/89684/comm /proc/89732/comm /proc/89734/comm /proc/89735/comm /proc/89758/comm /proc/89759/comm /proc/89769/comm /proc/9/comm /proc/90/comm /proc/90105/comm /proc/9068/comm /proc/9085/comm /proc/91/comm /proc/9101/comm /proc/9184/comm /proc/92/comm /proc/93/comm /proc/93704/comm /proc/93727/comm /proc/93744/comm /proc/93774/comm /proc/94/comm /proc/94166/comm /proc/94305/comm /proc/95008/comm /proc/95662/comm /proc/95838/comm /proc/96/comm /proc/97/comm /proc/97514/comm /proc/98/comm /proc/9801/comm /proc/98530/comm /proc/99/comm /proc/self/comm /proc/thread-self/comm
+ '[' -n '' ']'
+ rm -f /var/run/libvirtd.pid
+ [[ -c /dev/kvm ]]
+ chmod 660 /dev/kvm
+ chown root:kvm /dev/kvm
+ CGROUPS=
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/blkio ']'
+ grep -w blkio /sys/fs/cgroup/cgroup.controllers
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/cpu ']'
+ grep -w cpu /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=cpu,
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/devices ']'
+ grep -w devices /sys/fs/cgroup/cgroup.controllers
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/freezer ']'
+ grep -w freezer /sys/fs/cgroup/cgroup.controllers
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/hugetlb ']'
+ grep -w hugetlb /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=hugetlb,
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/memory ']'
+ grep -w memory /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=memory,
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/net_cls ']'
+ grep -w net_cls /sys/fs/cgroup/cgroup.controllers
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/perf_event ']'
+ grep -w perf_event /sys/fs/cgroup/cgroup.controllers
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/rdma ']'
+ grep -w rdma /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=rdma,
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/misc ']'
+ grep -w misc /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=misc,
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/pids ']'
+ grep -w pids /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=pids,
+ cgcreate -g cpu,hugetlb,memory,rdma,misc,pids:/osh-libvirt
++ cat /proc/meminfo
++ grep HugePages_Total
++ tr -cd '[:digit:]'
+ hp_count=0
+ '[' 00 -gt 0 ']'
+ '[' -n 457eb676-33da-42ec-9a8c-9293d545c337 ']'
+ cgexec -g cpu,hugetlb,memory,rdma,misc,pids:/osh-libvirt systemd-run --scope --slice=system libvirtd --listen
++ mktemp --suffix .xml
+ tmpsecret=/tmp/tmp.oDOlLbWcBI.xml
+ '[' -n '' ']'
+ trap cleanup EXIT
+ TIMEOUT=60
+ [[ ! -f /var/run/libvirtd.pid ]]
+ [[ 60 -gt 0 ]]
+ let TIMEOUT-=1
+ sleep 1
Running as unit: run-r8236b828894540ac80221361e4923c34.scope; invocation ID: f0c40a2a42d54abf9504c5a349b4e2b9
+ [[ ! -f /var/run/libvirtd.pid ]]
+ TIMEOUT=10
+ [[ ! -e /var/run/libvirt/libvirt-sock ]]
+ '[' -z '' ']'
+ '[' -n cinder ']'
++ awk '/key/{print $3}' /etc/ceph/ceph.client.cinder.keyring
+ CEPH_CINDER_KEYRING=AQBtY7pp7zRZNhAAdGS5TwpsgKhwjPwsRubHMA==
+ '[' -n cinder ']'
+ create_virsh_libvirt_secret cinder 457eb676-33da-42ec-9a8c-9293d545c337 AQBtY7pp7zRZNhAAdGS5TwpsgKhwjPwsRubHMA==
+ sec_user=cinder
+ sec_uuid=457eb676-33da-42ec-9a8c-9293d545c337
+ sec_ceph_keyring=AQBtY7pp7zRZNhAAdGS5TwpsgKhwjPwsRubHMA==
+ cat
+ virsh secret-define --file /tmp/tmp.oDOlLbWcBI.xml
Secret 457eb676-33da-42ec-9a8c-9293d545c337 created

+ virsh secret-set-value --secret 457eb676-33da-42ec-9a8c-9293d545c337 --base64 AQBtY7pp7zRZNhAAdGS5TwpsgKhwjPwsRubHMA==
error: Passing secret value as command-line argument is insecure!
Secret value set

+ '[' -n '' ']'
+ cleanup
+ rm -f /tmp/tmp.oDOlLbWcBI.xml
+ '[' -n '' ']'
++ cat /var/run/libvirtd.pid
+ LIBVIRTD_PID=184356
+ kill 184356
+ tail --pid=184356 -f /dev/null
+ cgexec -g cpu,hugetlb,memory,rdma,misc,pids:/osh-libvirt systemd-run --scope --slice=system libvirtd --listen
Running as unit: run-rae681cbc0b07418a99313ee405e89d42.scope; invocation ID: 9883e34fd85245efbde15b648a6e202e