+ wait_for_file /etc/pki/CA/cacert.pem
+ local file=/etc/pki/CA/cacert.pem
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ sleep 1
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ sleep 1
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ sleep 1
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ sleep 1
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ sleep 1
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ wait_for_file /etc/pki/qemu/ca-cert.pem
+ local file=/etc/pki/qemu/ca-cert.pem
+ '[' '!' -f /etc/pki/qemu/ca-cert.pem ']'
+ wait_for_file /etc/pki/libvirt/servercert.pem
+ local file=/etc/pki/libvirt/servercert.pem
+ '[' '!' -f /etc/pki/libvirt/servercert.pem ']'
+ wait_for_file /etc/pki/libvirt/clientcert.pem
+ local file=/etc/pki/libvirt/clientcert.pem
+ '[' '!' -f /etc/pki/libvirt/clientcert.pem ']'
+ wait_for_file /etc/pki/qemu/server-cert.pem
+ local file=/etc/pki/qemu/server-cert.pem
+ '[' '!' -f /etc/pki/qemu/server-cert.pem ']'
+ wait_for_file /etc/pki/qemu/client-cert.pem
+ local file=/etc/pki/qemu/client-cert.pem
+ '[' '!' -f /etc/pki/qemu/client-cert.pem ']'
+ wait_for_file /etc/pki/libvirt/private/serverkey.pem
+ local file=/etc/pki/libvirt/private/serverkey.pem
+ '[' '!' -f /etc/pki/libvirt/private/serverkey.pem ']'
+ wait_for_file /etc/pki/libvirt/private/clientkey.pem
+ local file=/etc/pki/libvirt/private/clientkey.pem
+ '[' '!' -f /etc/pki/libvirt/private/clientkey.pem ']'
+ wait_for_file /etc/pki/qemu/server-key.pem
+ local file=/etc/pki/qemu/server-key.pem
+ '[' '!' -f /etc/pki/qemu/server-key.pem ']'
+ wait_for_file /etc/pki/qemu/client-key.pem
+ local file=/etc/pki/qemu/client-key.pem
+ '[' '!' -f /etc/pki/qemu/client-key.pem ']'
+ wait_for_file /etc/pki/libvirt-vnc/ca-cert.pem
+ local file=/etc/pki/libvirt-vnc/ca-cert.pem
+ '[' '!' -f /etc/pki/libvirt-vnc/ca-cert.pem ']'
+ wait_for_file /etc/pki/libvirt-vnc/server-cert.pem
+ local file=/etc/pki/libvirt-vnc/server-cert.pem
+ '[' '!' -f /etc/pki/libvirt-vnc/server-cert.pem ']'
+ wait_for_file /etc/pki/libvirt-vnc/server-key.pem
+ local file=/etc/pki/libvirt-vnc/server-key.pem
+ '[' '!' -f /etc/pki/libvirt-vnc/server-key.pem ']'
++ grep -w libvirtd
++ cat /proc/1/comm /proc/10/comm /proc/100/comm /proc/101384/comm /proc/101406/comm /proc/10171/comm /proc/101766/comm /proc/101778/comm /proc/101779/comm /proc/102/comm /proc/102576/comm /proc/102605/comm /proc/102609/comm /proc/102637/comm /proc/102895/comm /proc/103/comm /proc/103114/comm /proc/103116/comm /proc/103128/comm /proc/103652/comm /proc/103654/comm /proc/103889/comm /proc/104/comm /proc/104623/comm /proc/104648/comm /proc/105/comm /proc/106/comm /proc/10676/comm /proc/10677/comm /proc/107832/comm /proc/108/comm /proc/108049/comm /proc/108147/comm /proc/109/comm /proc/11/comm /proc/110/comm /proc/111/comm /proc/112/comm /proc/112579/comm /proc/113/comm /proc/113366/comm /proc/113371/comm /proc/114/comm /proc/114623/comm /proc/115/comm /proc/115358/comm /proc/115382/comm /proc/115393/comm /proc/115419/comm /proc/115907/comm /proc/116/comm /proc/117/comm /proc/117449/comm /proc/118491/comm /proc/118579/comm /proc/1191/comm /proc/119337/comm /proc/12/comm /proc/120346/comm /proc/121113/comm /proc/121114/comm /proc/12123/comm /proc/12154/comm /proc/12193/comm /proc/12237/comm /proc/12249/comm /proc/123276/comm /proc/123289/comm /proc/123290/comm /proc/123700/comm /proc/12488/comm /proc/12518/comm /proc/125681/comm /proc/125704/comm /proc/125726/comm /proc/12573/comm /proc/125750/comm /proc/12597/comm /proc/12617/comm /proc/126330/comm /proc/126548/comm /proc/126720/comm /proc/127313/comm /proc/127863/comm /proc/127888/comm /proc/128121/comm /proc/128947/comm /proc/129229/comm /proc/1296/comm /proc/1297/comm /proc/129761/comm /proc/1298/comm /proc/1299/comm /proc/13/comm /proc/132190/comm /proc/132203/comm /proc/132204/comm /proc/133217/comm /proc/133218/comm /proc/1388/comm /proc/1392/comm /proc/14/comm /proc/140324/comm /proc/140325/comm /proc/140327/comm /proc/140328/comm /proc/140455/comm /proc/140464/comm /proc/140973/comm /proc/140998/comm /proc/141081/comm /proc/141387/comm /proc/141549/comm /proc/141593/comm /proc/141607/comm /proc/141640/comm /proc/141641/comm /proc/141642/comm /proc/141643/comm /proc/141646/comm /proc/142541/comm /proc/142564/comm /proc/142942/comm /proc/142966/comm /proc/143219/comm /proc/143721/comm /proc/143832/comm /proc/143855/comm /proc/144009/comm /proc/144032/comm /proc/144056/comm /proc/144172/comm /proc/144225/comm /proc/144226/comm /proc/144332/comm /proc/144775/comm /proc/145379/comm /proc/145461/comm /proc/145579/comm /proc/145650/comm /proc/145676/comm /proc/1457/comm /proc/145746/comm /proc/145780/comm /proc/145795/comm /proc/145830/comm /proc/145971/comm /proc/146017/comm /proc/146085/comm /proc/1461/comm /proc/146130/comm /proc/146174/comm /proc/146417/comm /proc/146441/comm /proc/146788/comm /proc/1470/comm /proc/15/comm /proc/150504/comm /proc/151186/comm /proc/151885/comm /proc/152172/comm /proc/153120/comm /proc/153121/comm /proc/153122/comm /proc/153264/comm /proc/154580/comm /proc/154680/comm /proc/154683/comm /proc/155104/comm /proc/155132/comm /proc/155133/comm /proc/155208/comm /proc/155221/comm /proc/155222/comm /proc/155904/comm /proc/155912/comm /proc/155967/comm /proc/156128/comm /proc/156156/comm /proc/156162/comm /proc/156213/comm /proc/156214/comm /proc/156219/comm /proc/156220/comm /proc/156623/comm /proc/156641/comm /proc/156738/comm /proc/156761/comm /proc/156858/comm /proc/156893/comm /proc/156899/comm /proc/157109/comm /proc/157160/comm /proc/157161/comm /proc/157472/comm /proc/158224/comm /proc/158287/comm /proc/158292/comm /proc/158347/comm /proc/158393/comm /proc/158396/comm /proc/158435/comm /proc/158455/comm /proc/158565/comm /proc/158589/comm /proc/158852/comm /proc/158901/comm /proc/158978/comm /proc/159000/comm /proc/159533/comm /proc/159562/comm /proc/159617/comm /proc/16/comm /proc/16233/comm /proc/163146/comm /proc/163985/comm /proc/164504/comm /proc/164507/comm /proc/164515/comm /proc/165389/comm /proc/165438/comm /proc/165441/comm /proc/165447/comm /proc/165450/comm /proc/166/comm /proc/166505/comm /proc/167/comm /proc/167235/comm /proc/167258/comm /proc/167331/comm /proc/168/comm /proc/168051/comm /proc/168061/comm /proc/168359/comm /proc/168360/comm /proc/168361/comm /proc/168472/comm /proc/168562/comm /proc/168616/comm /proc/168634/comm /proc/168661/comm /proc/168662/comm /proc/168675/comm /proc/168687/comm /proc/168688/comm /proc/168835/comm /proc/168836/comm /proc/168837/comm /proc/169/comm /proc/169536/comm /proc/169868/comm /proc/169970/comm /proc/170/comm /proc/170135/comm /proc/170763/comm /proc/170813/comm /proc/170831/comm /proc/171/comm /proc/171093/comm /proc/171094/comm /proc/171427/comm /proc/171549/comm /proc/171759/comm /proc/171777/comm /proc/171778/comm /proc/171779/comm /proc/171780/comm /proc/171781/comm /proc/171782/comm /proc/171890/comm /proc/172/comm /proc/172108/comm /proc/172127/comm /proc/172173/comm /proc/172199/comm /proc/172308/comm /proc/172309/comm /proc/172314/comm /proc/172391/comm /proc/172395/comm /proc/172421/comm /proc/172430/comm /proc/172431/comm /proc/172432/comm /proc/172433/comm /proc/172434/comm /proc/172435/comm /proc/172436/comm /proc/172437/comm /proc/172438/comm /proc/172439/comm /proc/172440/comm /proc/172441/comm /proc/172442/comm /proc/172443/comm /proc/172444/comm /proc/172445/comm /proc/172446/comm /proc/172447/comm /proc/172448/comm /proc/172449/comm /proc/172450/comm /proc/172451/comm /proc/172452/comm /proc/172453/comm /proc/172454/comm /proc/172455/comm /proc/172456/comm /proc/172457/comm /proc/172458/comm /proc/172459/comm /proc/172460/comm /proc/172461/comm /proc/172462/comm /proc/172463/comm /proc/172464/comm /proc/172465/comm /proc/172466/comm /proc/172467/comm /proc/172482/comm /proc/172508/comm /proc/172523/comm /proc/172524/comm /proc/172525/comm /proc/173/comm /proc/174/comm /proc/178/comm /proc/18/comm /proc/180/comm /proc/181/comm /proc/183/comm /proc/184/comm /proc/185/comm /proc/186/comm /proc/187/comm /proc/188/comm /proc/189/comm /proc/19/comm /proc/191/comm /proc/192/comm /proc/193/comm /proc/199/comm /proc/2/comm /proc/20/comm /proc/20510/comm /proc/20529/comm /proc/20576/comm /proc/20603/comm /proc/20618/comm /proc/21/comm /proc/210/comm /proc/218/comm /proc/219/comm /proc/22/comm /proc/224/comm /proc/22853/comm /proc/22856/comm /proc/22857/comm /proc/22870/comm /proc/24/comm /proc/246/comm /proc/25/comm /proc/25704/comm /proc/25970/comm /proc/25988/comm /proc/26/comm /proc/26012/comm /proc/26024/comm /proc/267/comm /proc/27/comm /proc/28/comm /proc/289/comm /proc/290/comm /proc/293/comm /proc/294/comm /proc/3/comm /proc/30/comm /proc/30150/comm /proc/30427/comm /proc/30443/comm /proc/30468/comm /proc/30480/comm /proc/31/comm /proc/313/comm /proc/314/comm /proc/318/comm /proc/32/comm /proc/327/comm /proc/33/comm /proc/34/comm /proc/34644/comm /proc/34909/comm /proc/34925/comm /proc/34950/comm /proc/34964/comm /proc/353/comm /proc/36/comm /proc/360/comm /proc/37/comm /proc/371/comm /proc/372/comm /proc/379/comm /proc/38/comm /proc/38147/comm /proc/38149/comm /proc/39/comm /proc/395/comm /proc/4/comm /proc/40/comm /proc/400/comm /proc/403/comm /proc/406/comm /proc/40629/comm /proc/40661/comm /proc/40677/comm /proc/40679/comm /proc/40718/comm /proc/40748/comm /proc/40756/comm /proc/40761/comm /proc/40791/comm /proc/40808/comm /proc/40897/comm /proc/40937/comm /proc/41110/comm /proc/41219/comm /proc/41241/comm /proc/41270/comm /proc/42/comm /proc/42028/comm /proc/42053/comm /proc/42078/comm /proc/42102/comm /proc/42542/comm /proc/42927/comm /proc/43/comm /proc/43474/comm /proc/43500/comm /proc/43958/comm /proc/43982/comm /proc/44/comm /proc/44024/comm /proc/44047/comm /proc/44127/comm /proc/44164/comm /proc/44304/comm /proc/44330/comm /proc/44472/comm /proc/44612/comm /proc/44839/comm /proc/44863/comm /proc/44880/comm /proc/44904/comm /proc/44929/comm /proc/44949/comm /proc/45/comm /proc/45065/comm /proc/45159/comm /proc/45207/comm /proc/456/comm /proc/46/comm /proc/461/comm /proc/47051/comm /proc/47088/comm /proc/47177/comm /proc/47202/comm /proc/47519/comm /proc/47532/comm /proc/47566/comm /proc/47651/comm /proc/48/comm /proc/48049/comm /proc/48072/comm /proc/48152/comm /proc/48175/comm /proc/48522/comm /proc/48546/comm /proc/48858/comm /proc/48882/comm /proc/49/comm /proc/49184/comm /proc/49207/comm /proc/49415/comm /proc/49468/comm /proc/49561/comm /proc/49648/comm /proc/49680/comm /proc/49768/comm /proc/5/comm /proc/50/comm /proc/50339/comm /proc/50467/comm /proc/50479/comm /proc/50528/comm /proc/50860/comm /proc/51/comm /proc/51814/comm /proc/52/comm /proc/52433/comm /proc/52456/comm /proc/52586/comm /proc/527/comm /proc/54/comm /proc/55/comm /proc/56/comm /proc/56552/comm /proc/56575/comm /proc/57/comm /proc/57315/comm /proc/57338/comm /proc/57354/comm /proc/57375/comm /proc/57399/comm /proc/57429/comm /proc/57544/comm /proc/57566/comm /proc/57615/comm /proc/57654/comm /proc/57719/comm /proc/57831/comm /proc/58/comm /proc/6/comm /proc/60/comm /proc/60339/comm /proc/60535/comm /proc/60602/comm /proc/60760/comm /proc/60783/comm /proc/60797/comm /proc/60830/comm /proc/60854/comm /proc/60878/comm /proc/61/comm /proc/61017/comm /proc/61158/comm /proc/61356/comm /proc/61433/comm /proc/61725/comm /proc/61755/comm /proc/619/comm /proc/62/comm /proc/62000/comm /proc/62001/comm /proc/62026/comm /proc/62027/comm /proc/62048/comm /proc/62112/comm /proc/62147/comm /proc/62193/comm /proc/62216/comm /proc/623/comm /proc/62438/comm /proc/62468/comm /proc/62494/comm /proc/625/comm /proc/62516/comm /proc/62532/comm /proc/62558/comm /proc/62928/comm /proc/62952/comm /proc/63/comm /proc/63206/comm /proc/63212/comm /proc/63317/comm /proc/63340/comm /proc/634/comm /proc/63428/comm /proc/635/comm /proc/63553/comm /proc/63581/comm /proc/63897/comm /proc/63913/comm /proc/63914/comm /proc/63915/comm /proc/63916/comm /proc/63917/comm /proc/63929/comm /proc/63953/comm /proc/64/comm /proc/64293/comm /proc/64349/comm /proc/64549/comm /proc/64573/comm /proc/64669/comm /proc/64705/comm /proc/64880/comm /proc/649/comm /proc/64935/comm /proc/65244/comm /proc/65326/comm /proc/65366/comm /proc/65483/comm /proc/655/comm /proc/65670/comm /proc/65693/comm /proc/65734/comm /proc/65772/comm /proc/65817/comm /proc/65853/comm /proc/65948/comm /proc/65978/comm /proc/66/comm /proc/66009/comm /proc/66288/comm /proc/66455/comm /proc/66567/comm /proc/66584/comm /proc/66590/comm /proc/66741/comm /proc/66793/comm /proc/66794/comm /proc/66864/comm /proc/67/comm /proc/67480/comm /proc/67504/comm /proc/68/comm /proc/69/comm /proc/70/comm /proc/70102/comm /proc/70119/comm /proc/70120/comm /proc/70121/comm /proc/70122/comm /proc/70123/comm /proc/70124/comm /proc/70125/comm /proc/70128/comm /proc/70129/comm /proc/70130/comm /proc/70132/comm /proc/70134/comm /proc/70135/comm /proc/70137/comm /proc/706/comm /proc/709/comm /proc/710/comm /proc/72/comm /proc/723/comm /proc/73/comm /proc/73903/comm /proc/73994/comm /proc/74/comm /proc/74110/comm /proc/74134/comm /proc/74213/comm /proc/74229/comm /proc/74235/comm /proc/74366/comm /proc/74441/comm /proc/74442/comm /proc/74467/comm /proc/75/comm /proc/75111/comm /proc/75134/comm /proc/76/comm /proc/78/comm /proc/78565/comm /proc/78843/comm /proc/78871/comm /proc/79/comm /proc/79448/comm /proc/79472/comm /proc/8/comm /proc/80/comm /proc/80201/comm /proc/81/comm /proc/81593/comm /proc/82/comm /proc/82960/comm /proc/82979/comm /proc/82998/comm /proc/84/comm /proc/84450/comm /proc/84682/comm /proc/84706/comm /proc/84983/comm /proc/84999/comm /proc/85/comm /proc/85005/comm /proc/85098/comm /proc/85183/comm /proc/85184/comm /proc/85465/comm /proc/86/comm /proc/87/comm /proc/870/comm /proc/87048/comm /proc/88/comm /proc/90/comm /proc/9069/comm /proc/9086/comm /proc/90930/comm /proc/90953/comm /proc/90975/comm /proc/90998/comm /proc/91/comm /proc/9102/comm /proc/91210/comm /proc/91389/comm /proc/91481/comm /proc/9184/comm /proc/92/comm /proc/93/comm /proc/93023/comm /proc/93713/comm /proc/93881/comm /proc/94/comm /proc/96/comm /proc/97/comm /proc/98/comm /proc/9800/comm /proc/98181/comm /proc/99/comm /proc/self/comm /proc/thread-self/comm
+ '[' -n '' ']'
+ rm -f /var/run/libvirtd.pid
+ [[ -c /dev/kvm ]]
+ chmod 660 /dev/kvm
+ chown root:kvm /dev/kvm
+ CGROUPS=
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/blkio ']'
+ grep -w blkio /sys/fs/cgroup/cgroup.controllers
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/cpu ']'
+ grep -w cpu /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=cpu,
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/devices ']'
+ grep -w devices /sys/fs/cgroup/cgroup.controllers
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/freezer ']'
+ grep -w freezer /sys/fs/cgroup/cgroup.controllers
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/hugetlb ']'
+ grep -w hugetlb /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=hugetlb,
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/memory ']'
+ grep -w memory /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=memory,
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/net_cls ']'
+ grep -w net_cls /sys/fs/cgroup/cgroup.controllers
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/perf_event ']'
+ grep -w perf_event /sys/fs/cgroup/cgroup.controllers
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/rdma ']'
+ grep -w rdma /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=rdma,
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/misc ']'
+ grep -w misc /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=misc,
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/pids ']'
+ grep -w pids /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=pids,
+ cgcreate -g cpu,hugetlb,memory,rdma,misc,pids:/osh-libvirt
++ cat /proc/meminfo
++ grep HugePages_Total
++ tr -cd '[:digit:]'
+ hp_count=0
+ '[' 00 -gt 0 ']'
+ '[' -n 457eb676-33da-42ec-9a8c-9293d545c337 ']'
+ cgexec -g cpu,hugetlb,memory,rdma,misc,pids:/osh-libvirt systemd-run --scope --slice=system libvirtd --listen
++ mktemp --suffix .xml
+ tmpsecret=/tmp/tmp.8BNHUV6lJE.xml
+ '[' -n '' ']'
+ trap cleanup EXIT
+ TIMEOUT=60
+ [[ ! -f /var/run/libvirtd.pid ]]
+ [[ 60 -gt 0 ]]
+ let TIMEOUT-=1
+ sleep 1
Running scope as unit: run-rd500690aeca04d469b61032f1ad20907.scope
+ [[ ! -f /var/run/libvirtd.pid ]]
+ TIMEOUT=10
+ [[ ! -e /var/run/libvirt/libvirt-sock ]]
+ '[' -z '' ']'
+ '[' -n cinder ']'
++ awk '/key/{print $3}' /etc/ceph/ceph.client.cinder.keyring
+ CEPH_CINDER_KEYRING=AQASuOdpNtCxEBAAgvdjCWYF5l/XyKmJI62c6Q==
+ '[' -n cinder ']'
+ create_virsh_libvirt_secret cinder 457eb676-33da-42ec-9a8c-9293d545c337 AQASuOdpNtCxEBAAgvdjCWYF5l/XyKmJI62c6Q==
+ sec_user=cinder
+ sec_uuid=457eb676-33da-42ec-9a8c-9293d545c337
+ sec_ceph_keyring=AQASuOdpNtCxEBAAgvdjCWYF5l/XyKmJI62c6Q==
+ cat
+ virsh secret-define --file /tmp/tmp.8BNHUV6lJE.xml
Secret 457eb676-33da-42ec-9a8c-9293d545c337 created

+ virsh secret-set-value --secret 457eb676-33da-42ec-9a8c-9293d545c337 --base64 AQASuOdpNtCxEBAAgvdjCWYF5l/XyKmJI62c6Q==
error: Passing secret value as command-line argument is insecure!
Secret value set

+ '[' -n '' ']'
+ cleanup
+ rm -f /tmp/tmp.8BNHUV6lJE.xml
+ '[' -n '' ']'
++ cat /var/run/libvirtd.pid
+ LIBVIRTD_PID=172564
+ kill 172564
+ tail --pid=172564 -f /dev/null
+ cgexec -g cpu,hugetlb,memory,rdma,misc,pids:/osh-libvirt systemd-run --scope --slice=system libvirtd --listen
Running scope as unit: run-rcdd365a34ee74ddda223b9cf95cf8d69.scope