+ wait_for_file /etc/pki/CA/cacert.pem
+ local file=/etc/pki/CA/cacert.pem
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ sleep 1
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ sleep 1
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ sleep 1
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ sleep 1
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ sleep 1
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ sleep 1
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ sleep 1
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ wait_for_file /etc/pki/qemu/ca-cert.pem
+ local file=/etc/pki/qemu/ca-cert.pem
+ '[' '!' -f /etc/pki/qemu/ca-cert.pem ']'
+ wait_for_file /etc/pki/libvirt/servercert.pem
+ local file=/etc/pki/libvirt/servercert.pem
+ '[' '!' -f /etc/pki/libvirt/servercert.pem ']'
+ wait_for_file /etc/pki/libvirt/clientcert.pem
+ local file=/etc/pki/libvirt/clientcert.pem
+ '[' '!' -f /etc/pki/libvirt/clientcert.pem ']'
+ wait_for_file /etc/pki/qemu/server-cert.pem
+ local file=/etc/pki/qemu/server-cert.pem
+ '[' '!' -f /etc/pki/qemu/server-cert.pem ']'
+ wait_for_file /etc/pki/qemu/client-cert.pem
+ local file=/etc/pki/qemu/client-cert.pem
+ '[' '!' -f /etc/pki/qemu/client-cert.pem ']'
+ wait_for_file /etc/pki/libvirt/private/serverkey.pem
+ local file=/etc/pki/libvirt/private/serverkey.pem
+ '[' '!' -f /etc/pki/libvirt/private/serverkey.pem ']'
+ wait_for_file /etc/pki/libvirt/private/clientkey.pem
+ local file=/etc/pki/libvirt/private/clientkey.pem
+ '[' '!' -f /etc/pki/libvirt/private/clientkey.pem ']'
+ wait_for_file /etc/pki/qemu/server-key.pem
+ local file=/etc/pki/qemu/server-key.pem
+ '[' '!' -f /etc/pki/qemu/server-key.pem ']'
+ wait_for_file /etc/pki/qemu/client-key.pem
+ local file=/etc/pki/qemu/client-key.pem
+ '[' '!' -f /etc/pki/qemu/client-key.pem ']'
+ wait_for_file /etc/pki/libvirt-vnc/ca-cert.pem
+ local file=/etc/pki/libvirt-vnc/ca-cert.pem
+ '[' '!' -f /etc/pki/libvirt-vnc/ca-cert.pem ']'
+ wait_for_file /etc/pki/libvirt-vnc/server-cert.pem
+ local file=/etc/pki/libvirt-vnc/server-cert.pem
+ '[' '!' -f /etc/pki/libvirt-vnc/server-cert.pem ']'
+ wait_for_file /etc/pki/libvirt-vnc/server-key.pem
+ local file=/etc/pki/libvirt-vnc/server-key.pem
+ '[' '!' -f /etc/pki/libvirt-vnc/server-key.pem ']'
++ grep -w libvirtd
++ cat /proc/1/comm /proc/10/comm /proc/100/comm /proc/100650/comm /proc/100652/comm /proc/101177/comm /proc/10176/comm /proc/102/comm /proc/103/comm /proc/103315/comm /proc/104/comm /proc/105/comm /proc/105007/comm /proc/106/comm /proc/106695/comm /proc/106719/comm /proc/10684/comm /proc/10685/comm /proc/107178/comm /proc/107193/comm /proc/107194/comm /proc/108/comm /proc/108283/comm /proc/108314/comm /proc/108355/comm /proc/108387/comm /proc/108599/comm /proc/108779/comm /proc/108793/comm /proc/108928/comm /proc/109/comm /proc/11/comm /proc/110/comm /proc/110156/comm /proc/110355/comm /proc/110458/comm /proc/110482/comm /proc/110561/comm /proc/110578/comm /proc/110584/comm /proc/110739/comm /proc/110740/comm /proc/110750/comm /proc/110938/comm /proc/111/comm /proc/112/comm /proc/112131/comm /proc/112159/comm /proc/112178/comm /proc/112211/comm /proc/113/comm /proc/114/comm /proc/114969/comm /proc/115/comm /proc/116/comm /proc/116321/comm /proc/116993/comm /proc/117/comm /proc/119550/comm /proc/119713/comm /proc/119718/comm /proc/12/comm /proc/1200/comm /proc/120359/comm /proc/12127/comm /proc/12156/comm /proc/122089/comm /proc/122101/comm /proc/122102/comm /proc/12212/comm /proc/12236/comm /proc/12255/comm /proc/122742/comm /proc/12487/comm /proc/12507/comm /proc/125296/comm /proc/125322/comm /proc/125335/comm /proc/12534/comm /proc/125366/comm /proc/125514/comm /proc/12584/comm /proc/126015/comm /proc/12615/comm /proc/126305/comm /proc/126440/comm /proc/127185/comm /proc/127864/comm /proc/127888/comm /proc/128332/comm /proc/128339/comm /proc/128366/comm /proc/129165/comm /proc/13/comm /proc/1305/comm /proc/1306/comm /proc/1307/comm /proc/1308/comm /proc/131405/comm /proc/132444/comm /proc/133238/comm /proc/133251/comm /proc/133252/comm /proc/1399/comm /proc/14/comm /proc/1403/comm /proc/14498/comm /proc/145223/comm /proc/145910/comm /proc/145911/comm /proc/1468/comm /proc/1472/comm /proc/1481/comm /proc/15/comm /proc/152908/comm /proc/152909/comm /proc/152911/comm /proc/152912/comm /proc/153030/comm /proc/153741/comm /proc/153765/comm /proc/153910/comm /proc/153953/comm /proc/153954/comm /proc/154442/comm /proc/154580/comm /proc/154615/comm /proc/154632/comm /proc/154665/comm /proc/154666/comm /proc/154667/comm /proc/154668/comm /proc/155898/comm /proc/155920/comm /proc/156136/comm /proc/156394/comm /proc/156469/comm /proc/156622/comm /proc/157067/comm /proc/157120/comm /proc/157122/comm /proc/157123/comm /proc/157319/comm /proc/157343/comm /proc/157431/comm /proc/157448/comm /proc/157454/comm /proc/157525/comm /proc/157526/comm /proc/157536/comm /proc/157842/comm /proc/158430/comm /proc/159175/comm /proc/159254/comm /proc/159303/comm /proc/159437/comm /proc/159465/comm /proc/159484/comm /proc/159538/comm /proc/159574/comm /proc/159575/comm /proc/159719/comm /proc/159760/comm /proc/159765/comm /proc/159799/comm /proc/159851/comm /proc/159911/comm /proc/159934/comm /proc/16/comm /proc/160134/comm /proc/160158/comm /proc/164673/comm /proc/164707/comm /proc/165493/comm /proc/166/comm /proc/166678/comm /proc/166830/comm /proc/167/comm /proc/167663/comm /proc/167860/comm /proc/167870/comm /proc/168/comm /proc/169/comm /proc/169197/comm /proc/169229/comm /proc/169723/comm /proc/169766/comm /proc/169767/comm /proc/169866/comm /proc/169881/comm /proc/169882/comm /proc/170/comm /proc/170597/comm /proc/170687/comm /proc/170717/comm /proc/170990/comm /proc/170999/comm /proc/171/comm /proc/171040/comm /proc/171041/comm /proc/171044/comm /proc/171045/comm /proc/171394/comm /proc/171539/comm /proc/171556/comm /proc/171711/comm /proc/171735/comm /proc/171859/comm /proc/171876/comm /proc/171882/comm /proc/171985/comm /proc/171986/comm /proc/171996/comm /proc/172/comm /proc/172252/comm /proc/173/comm /proc/173299/comm /proc/173325/comm /proc/173356/comm /proc/173383/comm /proc/173468/comm /proc/173522/comm /proc/173551/comm /proc/173577/comm /proc/173594/comm /proc/173672/comm /proc/173702/comm /proc/173869/comm /proc/173878/comm /proc/173941/comm /proc/173991/comm /proc/174/comm /proc/174245/comm /proc/174533/comm /proc/174546/comm /proc/174620/comm /proc/174632/comm /proc/174705/comm /proc/176/comm /proc/177/comm /proc/177241/comm /proc/177295/comm /proc/177884/comm /proc/179101/comm /proc/179102/comm /proc/18/comm /proc/180/comm /proc/181/comm /proc/181496/comm /proc/181806/comm /proc/181807/comm /proc/181808/comm /proc/182030/comm /proc/182048/comm /proc/182075/comm /proc/182076/comm /proc/182089/comm /proc/182102/comm /proc/182103/comm /proc/182329/comm /proc/182330/comm /proc/182331/comm /proc/183040/comm /proc/183388/comm /proc/183542/comm /proc/183721/comm /proc/184/comm /proc/184484/comm /proc/184497/comm /proc/184612/comm /proc/184776/comm /proc/184777/comm /proc/185047/comm /proc/185203/comm /proc/185525/comm /proc/185786/comm /proc/185808/comm /proc/185879/comm /proc/185905/comm /proc/185934/comm /proc/185949/comm /proc/185950/comm /proc/185951/comm /proc/185952/comm /proc/185953/comm /proc/185954/comm /proc/186/comm /proc/186119/comm /proc/186142/comm /proc/186306/comm /proc/186421/comm /proc/186426/comm /proc/186430/comm /proc/186501/comm /proc/186502/comm /proc/186504/comm /proc/186505/comm /proc/186506/comm /proc/186507/comm /proc/187/comm /proc/18743/comm /proc/18787/comm /proc/188/comm /proc/18845/comm /proc/18873/comm /proc/18893/comm /proc/189/comm /proc/19/comm /proc/190/comm /proc/191/comm /proc/192/comm /proc/193/comm /proc/194/comm /proc/195/comm /proc/196/comm /proc/197/comm /proc/199/comm /proc/2/comm /proc/20/comm /proc/20836/comm /proc/20912/comm /proc/20916/comm /proc/20932/comm /proc/21/comm /proc/216/comm /proc/219/comm /proc/22/comm /proc/220/comm /proc/225/comm /proc/23863/comm /proc/24/comm /proc/24124/comm /proc/24141/comm /proc/24164/comm /proc/24179/comm /proc/247/comm /proc/25/comm /proc/26/comm /proc/267/comm /proc/27/comm /proc/28/comm /proc/28402/comm /proc/28678/comm /proc/28695/comm /proc/28718/comm /proc/28731/comm /proc/289/comm /proc/295/comm /proc/296/comm /proc/3/comm /proc/30/comm /proc/31/comm /proc/315/comm /proc/316/comm /proc/32/comm /proc/320/comm /proc/32884/comm /proc/329/comm /proc/33/comm /proc/330/comm /proc/33168/comm /proc/33222/comm /proc/33246/comm /proc/33259/comm /proc/34/comm /proc/348/comm /proc/356/comm /proc/357/comm /proc/36/comm /proc/36201/comm /proc/36202/comm /proc/364/comm /proc/37/comm /proc/38/comm /proc/385/comm /proc/38572/comm /proc/38595/comm /proc/38616/comm /proc/38628/comm /proc/38647/comm /proc/38662/comm /proc/38696/comm /proc/38717/comm /proc/38740/comm /proc/38758/comm /proc/38810/comm /proc/38830/comm /proc/38879/comm /proc/38881/comm /proc/38984/comm /proc/39/comm /proc/39043/comm /proc/39165/comm /proc/39188/comm /proc/39214/comm /proc/393/comm /proc/395/comm /proc/39907/comm /proc/39932/comm /proc/39946/comm /proc/39975/comm /proc/4/comm /proc/40/comm /proc/40284/comm /proc/40427/comm /proc/40848/comm /proc/41273/comm /proc/41303/comm /proc/41335/comm /proc/41741/comm /proc/41771/comm /proc/41786/comm /proc/41814/comm /proc/41869/comm /proc/41886/comm /proc/42/comm /proc/42174/comm /proc/42199/comm /proc/42509/comm /proc/42652/comm /proc/42679/comm /proc/42700/comm /proc/42722/comm /proc/42770/comm /proc/42797/comm /proc/42888/comm /proc/42952/comm /proc/42996/comm /proc/43/comm /proc/44/comm /proc/44867/comm /proc/44896/comm /proc/449/comm /proc/44956/comm /proc/44979/comm /proc/45/comm /proc/45189/comm /proc/45207/comm /proc/45240/comm /proc/45294/comm /proc/453/comm /proc/45673/comm /proc/45697/comm /proc/45774/comm /proc/45797/comm /proc/45844/comm /proc/459/comm /proc/45969/comm /proc/46/comm /proc/46147/comm /proc/46171/comm /proc/46300/comm /proc/46515/comm /proc/46540/comm /proc/46853/comm /proc/46878/comm /proc/47043/comm /proc/47170/comm /proc/47267/comm /proc/47296/comm /proc/47438/comm /proc/47458/comm /proc/48/comm /proc/48700/comm /proc/489/comm /proc/49/comm /proc/490/comm /proc/49535/comm /proc/49557/comm /proc/496/comm /proc/49640/comm /proc/49664/comm /proc/49769/comm /proc/49861/comm /proc/5/comm /proc/50/comm /proc/50200/comm /proc/50291/comm /proc/51/comm /proc/52/comm /proc/528/comm /proc/54/comm /proc/54496/comm /proc/54523/comm /proc/55/comm /proc/55055/comm /proc/55079/comm /proc/55200/comm /proc/55224/comm /proc/55240/comm /proc/55269/comm /proc/55426/comm /proc/55450/comm /proc/55499/comm /proc/55535/comm /proc/55579/comm /proc/55679/comm /proc/56/comm /proc/57/comm /proc/58/comm /proc/6/comm /proc/60/comm /proc/60089/comm /proc/60113/comm /proc/60218/comm /proc/60241/comm /proc/60350/comm /proc/60375/comm /proc/60390/comm /proc/60411/comm /proc/60804/comm /proc/60896/comm /proc/60931/comm /proc/60965/comm /proc/61/comm /proc/61013/comm /proc/61090/comm /proc/61091/comm /proc/61093/comm /proc/61094/comm /proc/61139/comm /proc/61605/comm /proc/61744/comm /proc/62/comm /proc/62057/comm /proc/621/comm /proc/62258/comm /proc/62283/comm /proc/62302/comm /proc/62319/comm /proc/62388/comm /proc/624/comm /proc/62414/comm /proc/627/comm /proc/62718/comm /proc/62744/comm /proc/62788/comm /proc/62824/comm /proc/62888/comm /proc/62916/comm /proc/63/comm /proc/630/comm /proc/631/comm /proc/63198/comm /proc/63226/comm /proc/63373/comm /proc/63397/comm /proc/63502/comm /proc/63646/comm /proc/63671/comm /proc/63985/comm /proc/64/comm /proc/64002/comm /proc/64003/comm /proc/64004/comm /proc/64005/comm /proc/64006/comm /proc/64287/comm /proc/64312/comm /proc/64502/comm /proc/64536/comm /proc/64587/comm /proc/64622/comm /proc/64974/comm /proc/650/comm /proc/65028/comm /proc/65416/comm /proc/656/comm /proc/65615/comm /proc/65706/comm /proc/65767/comm /proc/65821/comm /proc/65854/comm /proc/65887/comm /proc/65925/comm /proc/66/comm /proc/66000/comm /proc/66043/comm /proc/66085/comm /proc/66222/comm /proc/66264/comm /proc/66910/comm /proc/66955/comm /proc/66967/comm /proc/67/comm /proc/67077/comm /proc/67096/comm /proc/67103/comm /proc/67104/comm /proc/67114/comm /proc/67319/comm /proc/68/comm /proc/68329/comm /proc/68352/comm /proc/69/comm /proc/70/comm /proc/71214/comm /proc/714/comm /proc/717/comm /proc/71770/comm /proc/71791/comm /proc/71792/comm /proc/71793/comm /proc/71794/comm /proc/71795/comm /proc/71797/comm /proc/718/comm /proc/71801/comm /proc/71802/comm /proc/71803/comm /proc/71804/comm /proc/71805/comm /proc/71806/comm /proc/71807/comm /proc/71810/comm /proc/72/comm /proc/73/comm /proc/731/comm /proc/74/comm /proc/75/comm /proc/75394/comm /proc/76/comm /proc/77260/comm /proc/77282/comm /proc/77361/comm /proc/77453/comm /proc/77465/comm /proc/77533/comm /proc/77534/comm /proc/77544/comm /proc/77767/comm /proc/78/comm /proc/78766/comm /proc/78789/comm /proc/79/comm /proc/8/comm /proc/80/comm /proc/81/comm /proc/82/comm /proc/82486/comm /proc/83823/comm /proc/83836/comm /proc/84/comm /proc/84454/comm /proc/84478/comm /proc/85/comm /proc/85549/comm /proc/86/comm /proc/87/comm /proc/876/comm /proc/88/comm /proc/9/comm /proc/90/comm /proc/90254/comm /proc/9077/comm /proc/90888/comm /proc/90910/comm /proc/9094/comm /proc/91/comm /proc/91023/comm /proc/91041/comm /proc/91047/comm /proc/9110/comm /proc/91164/comm /proc/91165/comm /proc/91175/comm /proc/91558/comm /proc/9192/comm /proc/92/comm /proc/93/comm /proc/94/comm /proc/95373/comm /proc/95837/comm /proc/96/comm /proc/97/comm /proc/97075/comm /proc/97239/comm /proc/97454/comm /proc/97478/comm /proc/97493/comm /proc/97525/comm /proc/97736/comm /proc/97737/comm /proc/98/comm /proc/9808/comm /proc/98225/comm /proc/98358/comm /proc/98958/comm /proc/99/comm /proc/99881/comm /proc/self/comm /proc/thread-self/comm
+ '[' -n '' ']'
+ rm -f /var/run/libvirtd.pid
+ [[ -c /dev/kvm ]]
+ chmod 660 /dev/kvm
+ chown root:kvm /dev/kvm
cpuset cpu io memory hugetlb pids rdma misc
cpuset cpu io memory hugetlb pids rdma misc
cpuset cpu io memory hugetlb pids rdma misc
cpuset cpu io memory hugetlb pids rdma misc
cpuset cpu io memory hugetlb pids rdma misc
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS=
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/blkio ']'
+ grep -w blkio /sys/fs/cgroup/cgroup.controllers
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/cpu ']'
+ grep -w cpu /sys/fs/cgroup/cgroup.controllers
+ CGROUPS+=cpu,
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/devices ']'
+ grep -w devices /sys/fs/cgroup/cgroup.controllers
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/freezer ']'
+ grep -w freezer /sys/fs/cgroup/cgroup.controllers
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/hugetlb ']'
+ grep -w hugetlb /sys/fs/cgroup/cgroup.controllers
+ CGROUPS+=hugetlb,
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/memory ']'
+ grep -w memory /sys/fs/cgroup/cgroup.controllers
+ CGROUPS+=memory,
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/net_cls ']'
+ grep -w net_cls /sys/fs/cgroup/cgroup.controllers
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/perf_event ']'
+ grep -w perf_event /sys/fs/cgroup/cgroup.controllers
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/rdma ']'
+ grep -w rdma /sys/fs/cgroup/cgroup.controllers
+ CGROUPS+=rdma,
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/misc ']'
+ grep -w misc /sys/fs/cgroup/cgroup.controllers
+ CGROUPS+=misc,
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/pids ']'
+ grep -w pids /sys/fs/cgroup/cgroup.controllers
+ CGROUPS+=pids,
+ cgcreate -g cpu,hugetlb,memory,rdma,misc,pids:/osh-libvirt
++ cat /proc/meminfo
++ grep HugePages_Total
++ tr -cd '[:digit:]'
+ hp_count=0
+ '[' 00 -gt 0 ']'
+ '[' -n 457eb676-33da-42ec-9a8c-9293d545c337 ']'
+ cgexec -g cpu,hugetlb,memory,rdma,misc,pids:/osh-libvirt systemd-run --scope --slice=system libvirtd --listen
++ mktemp --suffix .xml
Running scope as unit: run-r74e8a6619c574d19b852c1d38e20a53f.scope
+ tmpsecret=/tmp/tmp.FPXuzkdXcM.xml
+ '[' -n '' ']'
+ trap cleanup EXIT
+ TIMEOUT=60
+ [[ ! -f /var/run/libvirtd.pid ]]
+ [[ 60 -gt 0 ]]
+ let TIMEOUT-=1
+ sleep 1
+ [[ ! -f /var/run/libvirtd.pid ]]
+ TIMEOUT=10
+ [[ ! -e /var/run/libvirt/libvirt-sock ]]
+ '[' -z '' ']'
+ '[' -n cinder ']'
++ awk '/key/{print $3}' /etc/ceph/ceph.client.cinder.keyring
+ CEPH_CINDER_KEYRING=AQD92t1pSi0MAhAAcCnqlOUCovpcCnhtCXgpcA==
+ '[' -n cinder ']'
+ create_virsh_libvirt_secret cinder 457eb676-33da-42ec-9a8c-9293d545c337 AQD92t1pSi0MAhAAcCnqlOUCovpcCnhtCXgpcA==
+ sec_user=cinder
+ sec_uuid=457eb676-33da-42ec-9a8c-9293d545c337
+ sec_ceph_keyring=AQD92t1pSi0MAhAAcCnqlOUCovpcCnhtCXgpcA==
+ cat
+ virsh secret-define --file /tmp/tmp.FPXuzkdXcM.xml
Secret 457eb676-33da-42ec-9a8c-9293d545c337 created

+ virsh secret-set-value --secret 457eb676-33da-42ec-9a8c-9293d545c337 --base64 AQD92t1pSi0MAhAAcCnqlOUCovpcCnhtCXgpcA==
error: Passing secret value as command-line argument is insecure!
Secret value set

+ '[' -n '' ']'
+ cleanup
+ rm -f /tmp/tmp.FPXuzkdXcM.xml
+ '[' -n '' ']'
++ cat /var/run/libvirtd.pid
+ LIBVIRTD_PID=186528
+ kill 186528
+ tail --pid=186528 -f /dev/null
+ cgexec -g cpu,hugetlb,memory,rdma,misc,pids:/osh-libvirt systemd-run --scope --slice=system libvirtd --listen
Running scope as unit: run-raaea7a8c0369451abfd75c17af746f97.scope