+ wait_for_file /etc/pki/CA/cacert.pem
+ local file=/etc/pki/CA/cacert.pem
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ sleep 1
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ sleep 1
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ sleep 1
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ sleep 1
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ sleep 1
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ wait_for_file /etc/pki/qemu/ca-cert.pem
+ local file=/etc/pki/qemu/ca-cert.pem
+ '[' '!' -f /etc/pki/qemu/ca-cert.pem ']'
+ wait_for_file /etc/pki/libvirt/servercert.pem
+ local file=/etc/pki/libvirt/servercert.pem
+ '[' '!' -f /etc/pki/libvirt/servercert.pem ']'
+ wait_for_file /etc/pki/libvirt/clientcert.pem
+ local file=/etc/pki/libvirt/clientcert.pem
+ '[' '!' -f /etc/pki/libvirt/clientcert.pem ']'
+ wait_for_file /etc/pki/qemu/server-cert.pem
+ local file=/etc/pki/qemu/server-cert.pem
+ '[' '!' -f /etc/pki/qemu/server-cert.pem ']'
+ wait_for_file /etc/pki/qemu/client-cert.pem
+ local file=/etc/pki/qemu/client-cert.pem
+ '[' '!' -f /etc/pki/qemu/client-cert.pem ']'
+ wait_for_file /etc/pki/libvirt/private/serverkey.pem
+ local file=/etc/pki/libvirt/private/serverkey.pem
+ '[' '!' -f /etc/pki/libvirt/private/serverkey.pem ']'
+ wait_for_file /etc/pki/libvirt/private/clientkey.pem
+ local file=/etc/pki/libvirt/private/clientkey.pem
+ '[' '!' -f /etc/pki/libvirt/private/clientkey.pem ']'
+ wait_for_file /etc/pki/qemu/server-key.pem
+ local file=/etc/pki/qemu/server-key.pem
+ '[' '!' -f /etc/pki/qemu/server-key.pem ']'
+ wait_for_file /etc/pki/qemu/client-key.pem
+ local file=/etc/pki/qemu/client-key.pem
+ '[' '!' -f /etc/pki/qemu/client-key.pem ']'
+ wait_for_file /etc/pki/libvirt-vnc/ca-cert.pem
+ local file=/etc/pki/libvirt-vnc/ca-cert.pem
+ '[' '!' -f /etc/pki/libvirt-vnc/ca-cert.pem ']'
+ wait_for_file /etc/pki/libvirt-vnc/server-cert.pem
+ local file=/etc/pki/libvirt-vnc/server-cert.pem
+ '[' '!' -f /etc/pki/libvirt-vnc/server-cert.pem ']'
+ wait_for_file /etc/pki/libvirt-vnc/server-key.pem
+ local file=/etc/pki/libvirt-vnc/server-key.pem
+ '[' '!' -f /etc/pki/libvirt-vnc/server-key.pem ']'
++ grep -w libvirtd
++ cat /proc/1/comm /proc/10/comm /proc/100/comm /proc/100087/comm /proc/100178/comm /proc/100902/comm /proc/102/comm /proc/103/comm /proc/10342/comm /proc/104/comm /proc/105/comm /proc/106/comm /proc/106760/comm /proc/108/comm /proc/10858/comm /proc/10859/comm /proc/109/comm /proc/109083/comm /proc/11/comm /proc/110/comm /proc/1104/comm /proc/111/comm /proc/112/comm /proc/113/comm /proc/113100/comm /proc/113123/comm /proc/113444/comm /proc/113445/comm /proc/113665/comm /proc/113700/comm /proc/113701/comm /proc/114/comm /proc/114870/comm /proc/114894/comm /proc/114909/comm /proc/114932/comm /proc/115/comm /proc/115141/comm /proc/115336/comm /proc/115540/comm /proc/115542/comm /proc/115828/comm /proc/115944/comm /proc/116/comm /proc/116418/comm /proc/116697/comm /proc/116916/comm /proc/116939/comm /proc/117/comm /proc/117055/comm /proc/117072/comm /proc/117078/comm /proc/117231/comm /proc/117232/comm /proc/117259/comm /proc/117397/comm /proc/118776/comm /proc/118801/comm /proc/118826/comm /proc/118851/comm /proc/119018/comm /proc/119139/comm /proc/119140/comm /proc/12/comm /proc/12255/comm /proc/122603/comm /proc/12286/comm /proc/12335/comm /proc/12367/comm /proc/12379/comm /proc/125249/comm /proc/12617/comm /proc/126218/comm /proc/12647/comm /proc/126608/comm /proc/12694/comm /proc/12728/comm /proc/12747/comm /proc/128840/comm /proc/128859/comm /proc/128860/comm /proc/13/comm /proc/130324/comm /proc/14/comm /proc/142183/comm /proc/142210/comm /proc/142253/comm /proc/142288/comm /proc/142853/comm /proc/143245/comm /proc/143297/comm /proc/143492/comm /proc/1435/comm /proc/145065/comm /proc/145089/comm /proc/145237/comm /proc/145597/comm /proc/145667/comm /proc/147662/comm /proc/149257/comm /proc/15/comm /proc/150159/comm /proc/150187/comm /proc/150252/comm /proc/150962/comm /proc/150989/comm /proc/150990/comm /proc/152338/comm /proc/152339/comm /proc/1553/comm /proc/1554/comm /proc/1555/comm /proc/1556/comm /proc/1560/comm /proc/159376/comm /proc/159377/comm /proc/159379/comm /proc/159380/comm /proc/159600/comm /proc/16/comm /proc/160179/comm /proc/160202/comm /proc/160345/comm /proc/160648/comm /proc/160683/comm /proc/160696/comm /proc/160727/comm /proc/160728/comm /proc/160729/comm /proc/160730/comm /proc/161241/comm /proc/161264/comm /proc/161923/comm /proc/162005/comm /proc/162069/comm /proc/162258/comm /proc/162284/comm /proc/162316/comm /proc/162349/comm /proc/162596/comm /proc/162609/comm /proc/162643/comm /proc/162665/comm /proc/1627/comm /proc/162710/comm /proc/162736/comm /proc/162824/comm /proc/162847/comm /proc/1631/comm /proc/163129/comm /proc/163153/comm /proc/163233/comm /proc/163397/comm /proc/163402/comm /proc/163993/comm /proc/1640/comm /proc/164172/comm /proc/164195/comm /proc/164417/comm /proc/164433/comm /proc/164439/comm /proc/164522/comm /proc/164523/comm /proc/164533/comm /proc/164774/comm /proc/165/comm /proc/166/comm /proc/166240/comm /proc/166321/comm /proc/166404/comm /proc/166531/comm /proc/166555/comm /proc/166577/comm /proc/166585/comm /proc/166606/comm /proc/166636/comm /proc/166696/comm /proc/166724/comm /proc/166825/comm /proc/166858/comm /proc/166938/comm /proc/166966/comm /proc/167/comm /proc/167963/comm /proc/167990/comm /proc/168/comm /proc/168023/comm /proc/169/comm /proc/170/comm /proc/170455/comm /proc/171/comm /proc/172/comm /proc/172488/comm /proc/173/comm /proc/173089/comm /proc/173324/comm /proc/173395/comm /proc/173449/comm /proc/174760/comm /proc/174780/comm /proc/175/comm /proc/175466/comm /proc/175824/comm /proc/176/comm /proc/176061/comm /proc/176072/comm /proc/176084/comm /proc/178/comm /proc/178288/comm /proc/178339/comm /proc/178340/comm /proc/178391/comm /proc/178404/comm /proc/178405/comm /proc/179/comm /proc/179264/comm /proc/179296/comm /proc/179503/comm /proc/179559/comm /proc/179584/comm /proc/179634/comm /proc/179635/comm /proc/179696/comm /proc/179698/comm /proc/18/comm /proc/180463/comm /proc/180469/comm /proc/180620/comm /proc/180644/comm /proc/180797/comm /proc/180814/comm /proc/180820/comm /proc/180869/comm /proc/180870/comm /proc/180880/comm /proc/181/comm /proc/181067/comm /proc/182405/comm /proc/182445/comm /proc/182480/comm /proc/182494/comm /proc/182556/comm /proc/182579/comm /proc/182625/comm /proc/182689/comm /proc/182826/comm /proc/182852/comm /proc/182867/comm /proc/182893/comm /proc/183/comm /proc/183663/comm /proc/183676/comm /proc/185/comm /proc/18526/comm /proc/18546/comm /proc/18567/comm /proc/18595/comm /proc/186/comm /proc/18612/comm /proc/186910/comm /proc/186968/comm /proc/187/comm /proc/187702/comm /proc/187726/comm /proc/188/comm /proc/188235/comm /proc/188553/comm /proc/188602/comm /proc/188670/comm /proc/188697/comm /proc/188775/comm /proc/188786/comm /proc/189/comm /proc/19/comm /proc/190/comm /proc/190815/comm /proc/192584/comm /proc/192587/comm /proc/192598/comm /proc/192676/comm /proc/192724/comm /proc/192903/comm /proc/192980/comm /proc/193259/comm /proc/193311/comm /proc/193340/comm /proc/193366/comm /proc/193390/comm /proc/193391/comm /proc/193392/comm /proc/193503/comm /proc/193629/comm /proc/193642/comm /proc/193656/comm /proc/193726/comm /proc/193745/comm /proc/193753/comm /proc/193774/comm /proc/193775/comm /proc/193797/comm /proc/193811/comm /proc/193812/comm /proc/193816/comm /proc/193848/comm /proc/193869/comm /proc/193902/comm /proc/193903/comm /proc/193904/comm /proc/193907/comm /proc/193908/comm /proc/193909/comm /proc/193910/comm /proc/195/comm /proc/2/comm /proc/20/comm /proc/202/comm /proc/203/comm /proc/204/comm /proc/21/comm /proc/212/comm /proc/21493/comm /proc/21560/comm /proc/21562/comm /proc/21575/comm /proc/216/comm /proc/22/comm /proc/220/comm /proc/221/comm /proc/226/comm /proc/24/comm /proc/248/comm /proc/24829/comm /proc/25/comm /proc/25102/comm /proc/25119/comm /proc/25144/comm /proc/25155/comm /proc/26/comm /proc/269/comm /proc/27/comm /proc/28/comm /proc/291/comm /proc/293/comm /proc/29343/comm /proc/29606/comm /proc/29623/comm /proc/29647/comm /proc/29659/comm /proc/3/comm /proc/30/comm /proc/31/comm /proc/313/comm /proc/314/comm /proc/318/comm /proc/319/comm /proc/32/comm /proc/320/comm /proc/321/comm /proc/322/comm /proc/323/comm /proc/324/comm /proc/325/comm /proc/326/comm /proc/327/comm /proc/33/comm /proc/33969/comm /proc/34/comm /proc/34235/comm /proc/34251/comm /proc/34275/comm /proc/34289/comm /proc/36/comm /proc/367/comm /proc/37/comm /proc/38/comm /proc/38820/comm /proc/38822/comm /proc/38928/comm /proc/38946/comm /proc/38994/comm /proc/39/comm /proc/39022/comm /proc/39037/comm /proc/4/comm /proc/40/comm /proc/400/comm /proc/404/comm /proc/41523/comm /proc/41546/comm /proc/41560/comm /proc/41584/comm /proc/41594/comm /proc/41603/comm /proc/41648/comm /proc/41676/comm /proc/41688/comm /proc/41701/comm /proc/41758/comm /proc/41777/comm /proc/41798/comm /proc/41822/comm /proc/41930/comm /proc/41985/comm /proc/42/comm /proc/42131/comm /proc/42154/comm /proc/42179/comm /proc/42878/comm /proc/42903/comm /proc/42935/comm /proc/42960/comm /proc/43/comm /proc/43179/comm /proc/43393/comm /proc/43772/comm /proc/44/comm /proc/44119/comm /proc/44237/comm /proc/44260/comm /proc/44297/comm /proc/44656/comm /proc/44684/comm /proc/44704/comm /proc/44735/comm /proc/44749/comm /proc/44796/comm /proc/45/comm /proc/45147/comm /proc/45170/comm /proc/45320/comm /proc/45684/comm /proc/45707/comm /proc/45722/comm /proc/45746/comm /proc/45761/comm /proc/45784/comm /proc/45904/comm /proc/45949/comm /proc/45991/comm /proc/46/comm /proc/460/comm /proc/47809/comm /proc/47833/comm /proc/47935/comm /proc/47967/comm /proc/48/comm /proc/48181/comm /proc/48208/comm /proc/48249/comm /proc/48319/comm /proc/48832/comm /proc/48856/comm /proc/48940/comm /proc/48964/comm /proc/49/comm /proc/49009/comm /proc/49133/comm /proc/49311/comm /proc/49335/comm /proc/49455/comm /proc/49601/comm /proc/49624/comm /proc/5/comm /proc/50/comm /proc/50008/comm /proc/50031/comm /proc/50150/comm /proc/50207/comm /proc/50303/comm /proc/50332/comm /proc/50399/comm /proc/50448/comm /proc/51/comm /proc/51446/comm /proc/52/comm /proc/52269/comm /proc/52293/comm /proc/52358/comm /proc/52422/comm /proc/525/comm /proc/52525/comm /proc/528/comm /proc/52861/comm /proc/52884/comm /proc/53038/comm /proc/54/comm /proc/55/comm /proc/56/comm /proc/57/comm /proc/58/comm /proc/58002/comm /proc/58026/comm /proc/58676/comm /proc/58705/comm /proc/58710/comm /proc/58740/comm /proc/58760/comm /proc/58777/comm /proc/58956/comm /proc/58978/comm /proc/59111/comm /proc/59151/comm /proc/59188/comm /proc/59196/comm /proc/59298/comm /proc/6/comm /proc/60/comm /proc/61/comm /proc/617/comm /proc/62/comm /proc/621/comm /proc/623/comm /proc/626/comm /proc/627/comm /proc/63/comm /proc/63811/comm /proc/63813/comm /proc/63814/comm /proc/63815/comm /proc/63816/comm /proc/63817/comm /proc/64/comm /proc/64015/comm /proc/64062/comm /proc/64224/comm /proc/64248/comm /proc/64264/comm /proc/64295/comm /proc/64310/comm /proc/64334/comm /proc/64655/comm /proc/647/comm /proc/64768/comm /proc/65188/comm /proc/653/comm /proc/65313/comm /proc/65530/comm /proc/65531/comm /proc/65567/comm /proc/65568/comm /proc/65585/comm /proc/65725/comm /proc/65759/comm /proc/65983/comm /proc/66/comm /proc/66009/comm /proc/66127/comm /proc/66158/comm /proc/66179/comm /proc/66219/comm /proc/66237/comm /proc/66254/comm /proc/66474/comm /proc/66579/comm /proc/66602/comm /proc/66746/comm /proc/66969/comm /proc/66997/comm /proc/67/comm /proc/67031/comm /proc/67232/comm /proc/67255/comm /proc/67622/comm /proc/67639/comm /proc/67640/comm /proc/67641/comm /proc/67642/comm /proc/67643/comm /proc/67656/comm /proc/68/comm /proc/68007/comm /proc/68030/comm /proc/68100/comm /proc/68204/comm /proc/68560/comm /proc/68598/comm /proc/68743/comm /proc/68767/comm /proc/688/comm /proc/68900/comm /proc/68942/comm /proc/69/comm /proc/69036/comm /proc/69087/comm /proc/69244/comm /proc/69283/comm /proc/69333/comm /proc/69534/comm /proc/69625/comm /proc/69663/comm /proc/69753/comm /proc/69833/comm /proc/70/comm /proc/70077/comm /proc/70186/comm /proc/70297/comm /proc/70321/comm /proc/70683/comm /proc/70699/comm /proc/70705/comm /proc/70787/comm /proc/70788/comm /proc/70798/comm /proc/708/comm /proc/70952/comm /proc/711/comm /proc/712/comm /proc/72/comm /proc/72242/comm /proc/72266/comm /proc/725/comm /proc/73/comm /proc/74/comm /proc/75/comm /proc/75114/comm /proc/75552/comm /proc/75567/comm /proc/75568/comm /proc/75569/comm /proc/75570/comm /proc/75571/comm /proc/75573/comm /proc/75575/comm /proc/75576/comm /proc/75579/comm /proc/75581/comm /proc/75582/comm /proc/75583/comm /proc/75584/comm /proc/75585/comm /proc/76/comm /proc/78/comm /proc/78752/comm /proc/79/comm /proc/8/comm /proc/80/comm /proc/81/comm /proc/81539/comm /proc/81562/comm /proc/81699/comm /proc/81716/comm /proc/81726/comm /proc/81871/comm /proc/81872/comm /proc/81882/comm /proc/81961/comm /proc/82/comm /proc/83196/comm /proc/83219/comm /proc/84/comm /proc/84787/comm /proc/84976/comm /proc/85/comm /proc/86/comm /proc/87/comm /proc/870/comm /proc/88/comm /proc/88659/comm /proc/88672/comm /proc/89463/comm /proc/89489/comm /proc/90/comm /proc/90266/comm /proc/91/comm /proc/92/comm /proc/92004/comm /proc/9240/comm /proc/9257/comm /proc/9273/comm /proc/93/comm /proc/9355/comm /proc/94/comm /proc/96/comm /proc/96307/comm /proc/96330/comm /proc/96662/comm /proc/96679/comm /proc/96685/comm /proc/96812/comm /proc/96813/comm /proc/96823/comm /proc/97/comm /proc/97086/comm /proc/98/comm /proc/99/comm /proc/99681/comm /proc/99706/comm /proc/99721/comm /proc/99746/comm /proc/9975/comm /proc/self/comm /proc/thread-self/comm
+ '[' -n '' ']'
+ rm -f /var/run/libvirtd.pid
+ [[ -c /dev/kvm ]]
+ chmod 660 /dev/kvm
+ chown root:kvm /dev/kvm
+ CGROUPS=
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/blkio ']'
+ grep -w blkio /sys/fs/cgroup/cgroup.controllers
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/cpu ']'
+ grep -w cpu /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=cpu,
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/devices ']'
+ grep -w devices /sys/fs/cgroup/cgroup.controllers
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/freezer ']'
+ grep -w freezer /sys/fs/cgroup/cgroup.controllers
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/hugetlb ']'
+ grep -w hugetlb /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=hugetlb,
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/memory ']'
+ grep -w memory /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=memory,
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/net_cls ']'
+ grep -w net_cls /sys/fs/cgroup/cgroup.controllers
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/perf_event ']'
+ grep -w perf_event /sys/fs/cgroup/cgroup.controllers
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/rdma ']'
+ grep -w rdma /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=rdma,
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/misc ']'
+ grep -w misc /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=misc,
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/pids ']'
+ grep -w pids /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=pids,
+ cgcreate -g cpu,hugetlb,memory,rdma,misc,pids:/osh-libvirt
++ cat /proc/meminfo
++ grep HugePages_Total
++ tr -cd '[:digit:]'
+ hp_count=0
+ '[' 00 -gt 0 ']'
+ '[' -n 457eb676-33da-42ec-9a8c-9293d545c337 ']'
+ cgexec -g cpu,hugetlb,memory,rdma,misc,pids:/osh-libvirt systemd-run --scope --slice=system libvirtd --listen
++ mktemp --suffix .xml
+ tmpsecret=/tmp/tmp.RF5sjFoEGN.xml
+ '[' -n '' ']'
+ trap cleanup EXIT
+ TIMEOUT=60
+ [[ ! -f /var/run/libvirtd.pid ]]
+ [[ 60 -gt 0 ]]
+ let TIMEOUT-=1
+ sleep 1
Running as unit: run-r7577ed16d99f43f8b03c8e2bae155052.scope; invocation ID: 0c511e9687c648d9aaaf63f9d52d0494
+ [[ ! -f /var/run/libvirtd.pid ]]
+ TIMEOUT=10
+ [[ ! -e /var/run/libvirt/libvirt-sock ]]
+ '[' -z '' ']'
+ '[' -n cinder ']'
++ awk '/key/{print $3}' /etc/ceph/ceph.client.cinder.keyring
+ CEPH_CINDER_KEYRING=AQCv4rtqAgqqCBAAL/qcf+KokOfWGTHh6tt/jQ==
+ '[' -n cinder ']'
+ create_virsh_libvirt_secret cinder 457eb676-33da-42ec-9a8c-9293d545c337 AQCv4rtqAgqqCBAAL/qcf+KokOfWGTHh6tt/jQ==
+ sec_user=cinder
+ sec_uuid=457eb676-33da-42ec-9a8c-9293d545c337
+ sec_ceph_keyring=AQCv4rtqAgqqCBAAL/qcf+KokOfWGTHh6tt/jQ==
+ cat
+ virsh secret-define --file /tmp/tmp.RF5sjFoEGN.xml
Secret 457eb676-33da-42ec-9a8c-9293d545c337 created

+ virsh secret-set-value --secret 457eb676-33da-42ec-9a8c-9293d545c337 --base64 AQCv4rtqAgqqCBAAL/qcf+KokOfWGTHh6tt/jQ==
error: Passing secret value as command-line argument is insecure!
Secret value set

+ '[' -n '' ']'
+ '[' -n '' ']'
+ cleanup
+ rm -f /tmp/tmp.RF5sjFoEGN.xml
+ '[' -n '' ']'
++ cat /var/run/libvirtd.pid
+ LIBVIRTD_PID=193930
+ kill 193930
+ tail --pid=193930 -f /dev/null
+ cgexec -g cpu,hugetlb,memory,rdma,misc,pids:/osh-libvirt systemd-run --scope --slice=system libvirtd --listen
Running as unit: run-re57ef2b444c447a0ac4b41db0ff5c72f.scope; invocation ID: 5f86dbe7d4bc4641aeb6f995a036f9e6