+ wait_for_file /etc/pki/CA/cacert.pem
+ local file=/etc/pki/CA/cacert.pem
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ sleep 1
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ sleep 1
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ sleep 1
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ sleep 1
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ sleep 1
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ wait_for_file /etc/pki/qemu/ca-cert.pem
+ local file=/etc/pki/qemu/ca-cert.pem
+ '[' '!' -f /etc/pki/qemu/ca-cert.pem ']'
+ wait_for_file /etc/pki/libvirt/servercert.pem
+ local file=/etc/pki/libvirt/servercert.pem
+ '[' '!' -f /etc/pki/libvirt/servercert.pem ']'
+ wait_for_file /etc/pki/libvirt/clientcert.pem
+ local file=/etc/pki/libvirt/clientcert.pem
+ '[' '!' -f /etc/pki/libvirt/clientcert.pem ']'
+ wait_for_file /etc/pki/qemu/server-cert.pem
+ local file=/etc/pki/qemu/server-cert.pem
+ '[' '!' -f /etc/pki/qemu/server-cert.pem ']'
+ wait_for_file /etc/pki/qemu/client-cert.pem
+ local file=/etc/pki/qemu/client-cert.pem
+ '[' '!' -f /etc/pki/qemu/client-cert.pem ']'
+ wait_for_file /etc/pki/libvirt/private/serverkey.pem
+ local file=/etc/pki/libvirt/private/serverkey.pem
+ '[' '!' -f /etc/pki/libvirt/private/serverkey.pem ']'
+ wait_for_file /etc/pki/libvirt/private/clientkey.pem
+ local file=/etc/pki/libvirt/private/clientkey.pem
+ '[' '!' -f /etc/pki/libvirt/private/clientkey.pem ']'
+ wait_for_file /etc/pki/qemu/server-key.pem
+ local file=/etc/pki/qemu/server-key.pem
+ '[' '!' -f /etc/pki/qemu/server-key.pem ']'
+ wait_for_file /etc/pki/qemu/client-key.pem
+ local file=/etc/pki/qemu/client-key.pem
+ '[' '!' -f /etc/pki/qemu/client-key.pem ']'
+ wait_for_file /etc/pki/libvirt-vnc/ca-cert.pem
+ local file=/etc/pki/libvirt-vnc/ca-cert.pem
+ '[' '!' -f /etc/pki/libvirt-vnc/ca-cert.pem ']'
+ wait_for_file /etc/pki/libvirt-vnc/server-cert.pem
+ local file=/etc/pki/libvirt-vnc/server-cert.pem
+ '[' '!' -f /etc/pki/libvirt-vnc/server-cert.pem ']'
+ wait_for_file /etc/pki/libvirt-vnc/server-key.pem
+ local file=/etc/pki/libvirt-vnc/server-key.pem
+ '[' '!' -f /etc/pki/libvirt-vnc/server-key.pem ']'
++ grep -w libvirtd
++ cat /proc/1/comm /proc/10/comm /proc/100/comm /proc/101222/comm /proc/102/comm /proc/102121/comm /proc/102157/comm /proc/103/comm /proc/10336/comm /proc/103519/comm /proc/103525/comm /proc/104/comm /proc/105/comm /proc/105247/comm /proc/105933/comm /proc/105956/comm /proc/106/comm /proc/106467/comm /proc/106480/comm /proc/106481/comm /proc/107513/comm /proc/107538/comm /proc/107559/comm /proc/107592/comm /proc/107911/comm /proc/108/comm /proc/108116/comm /proc/108118/comm /proc/10842/comm /proc/10843/comm /proc/109/comm /proc/109240/comm /proc/109523/comm /proc/109546/comm /proc/109640/comm /proc/109656/comm /proc/109662/comm /proc/109793/comm /proc/109794/comm /proc/109804/comm /proc/109970/comm /proc/11/comm /proc/110/comm /proc/1100/comm /proc/111/comm /proc/111532/comm /proc/111559/comm /proc/111604/comm /proc/111635/comm /proc/112/comm /proc/112444/comm /proc/11270/comm /proc/113/comm /proc/113716/comm /proc/114/comm /proc/115/comm /proc/115412/comm /proc/115469/comm /proc/116/comm /proc/116514/comm /proc/117/comm /proc/118904/comm /proc/12/comm /proc/121614/comm /proc/121627/comm /proc/121628/comm /proc/12239/comm /proc/12269/comm /proc/12304/comm /proc/123204/comm /proc/12349/comm /proc/12361/comm /proc/124692/comm /proc/124716/comm /proc/124740/comm /proc/124770/comm /proc/125407/comm /proc/125861/comm /proc/125995/comm /proc/12600/comm /proc/12631/comm /proc/126662/comm /proc/126668/comm /proc/12690/comm /proc/127092/comm /proc/12714/comm /proc/127264/comm /proc/12735/comm /proc/127447/comm /proc/127470/comm /proc/127708/comm /proc/127947/comm /proc/128693/comm /proc/129794/comm /proc/13/comm /proc/133024/comm /proc/133049/comm /proc/133050/comm /proc/134172/comm /proc/134173/comm /proc/14/comm /proc/141356/comm /proc/141357/comm /proc/141359/comm /proc/141360/comm /proc/141477/comm /proc/141486/comm /proc/142136/comm /proc/142160/comm /proc/142227/comm /proc/142452/comm /proc/142475/comm /proc/142491/comm /proc/142525/comm /proc/142537/comm /proc/142569/comm /proc/142570/comm /proc/142571/comm /proc/142573/comm /proc/143083/comm /proc/143109/comm /proc/1433/comm /proc/14420/comm /proc/144283/comm /proc/144309/comm /proc/144332/comm /proc/144353/comm /proc/144432/comm /proc/144522/comm /proc/144541/comm /proc/144569/comm /proc/144591/comm /proc/144662/comm /proc/144681/comm /proc/144830/comm /proc/144852/comm /proc/144900/comm /proc/144927/comm /proc/145189/comm /proc/145371/comm /proc/145376/comm /proc/145903/comm /proc/146022/comm /proc/146047/comm /proc/146282/comm /proc/146299/comm /proc/146305/comm /proc/146376/comm /proc/146377/comm /proc/146387/comm /proc/146509/comm /proc/15/comm /proc/1551/comm /proc/1552/comm /proc/1553/comm /proc/1554/comm /proc/1558/comm /proc/16/comm /proc/160684/comm /proc/160748/comm /proc/160800/comm /proc/160916/comm /proc/160953/comm /proc/160983/comm /proc/161013/comm /proc/161274/comm /proc/161317/comm /proc/161388/comm /proc/161440/comm /proc/161465/comm /proc/161535/comm /proc/161559/comm /proc/161795/comm /proc/161826/comm /proc/161952/comm /proc/162119/comm /proc/1625/comm /proc/1629/comm /proc/1638/comm /proc/165/comm /proc/166/comm /proc/167/comm /proc/167203/comm /proc/167376/comm /proc/168/comm /proc/169/comm /proc/170/comm /proc/170040/comm /proc/171/comm /proc/171646/comm /proc/172/comm /proc/172124/comm /proc/172201/comm /proc/172226/comm /proc/172234/comm /proc/172235/comm /proc/172257/comm /proc/172259/comm /proc/172816/comm /proc/172982/comm /proc/172991/comm /proc/173/comm /proc/173092/comm /proc/173152/comm /proc/173191/comm /proc/173192/comm /proc/173350/comm /proc/173356/comm /proc/173916/comm /proc/173918/comm /proc/173920/comm /proc/174/comm /proc/174045/comm /proc/174068/comm /proc/174207/comm /proc/174276/comm /proc/174292/comm /proc/174298/comm /proc/174449/comm /proc/174450/comm /proc/174460/comm /proc/174698/comm /proc/174993/comm /proc/175/comm /proc/175944/comm /proc/175954/comm /proc/175996/comm /proc/176020/comm /proc/176038/comm /proc/176079/comm /proc/176313/comm /proc/176335/comm /proc/176404/comm /proc/176438/comm /proc/177/comm /proc/177153/comm /proc/177187/comm /proc/177199/comm /proc/178/comm /proc/18/comm /proc/180/comm /proc/180162/comm /proc/180235/comm /proc/180260/comm /proc/180639/comm /proc/180783/comm /proc/180853/comm /proc/180863/comm /proc/180867/comm /proc/180868/comm /proc/182/comm /proc/182202/comm /proc/183/comm /proc/183450/comm /proc/183473/comm /proc/183554/comm /proc/183705/comm /proc/184/comm /proc/184113/comm /proc/184160/comm /proc/184239/comm /proc/184266/comm /proc/184367/comm /proc/184378/comm /proc/185/comm /proc/18511/comm /proc/18531/comm /proc/18553/comm /proc/185552/comm /proc/18580/comm /proc/185828/comm /proc/185829/comm /proc/185830/comm /proc/18597/comm /proc/186/comm /proc/186144/comm /proc/186145/comm /proc/186178/comm /proc/186179/comm /proc/186193/comm /proc/186205/comm /proc/186206/comm /proc/186783/comm /proc/186786/comm /proc/186788/comm /proc/187/comm /proc/187618/comm /proc/187619/comm /proc/187620/comm /proc/187621/comm /proc/187660/comm /proc/187697/comm /proc/187781/comm /proc/187944/comm /proc/187968/comm /proc/188/comm /proc/188250/comm /proc/188302/comm /proc/188356/comm /proc/188627/comm /proc/188645/comm /proc/188696/comm /proc/188697/comm /proc/188707/comm /proc/188972/comm /proc/189/comm /proc/189141/comm /proc/189149/comm /proc/189151/comm /proc/189198/comm /proc/189408/comm /proc/189421/comm /proc/189742/comm /proc/189915/comm /proc/189977/comm /proc/19/comm /proc/190/comm /proc/190003/comm /proc/190219/comm /proc/190268/comm /proc/190271/comm /proc/190272/comm /proc/190273/comm /proc/190274/comm /proc/191/comm /proc/192/comm /proc/193/comm /proc/195/comm /proc/2/comm /proc/20/comm /proc/208/comm /proc/21/comm /proc/21546/comm /proc/21595/comm /proc/21599/comm /proc/21614/comm /proc/219/comm /proc/22/comm /proc/220/comm /proc/225/comm /proc/24/comm /proc/247/comm /proc/24860/comm /proc/25/comm /proc/25122/comm /proc/25139/comm /proc/25164/comm /proc/25177/comm /proc/25941/comm /proc/26/comm /proc/261/comm /proc/27/comm /proc/28/comm /proc/283/comm /proc/288/comm /proc/290/comm /proc/291/comm /proc/29358/comm /proc/29631/comm /proc/29649/comm /proc/29673/comm /proc/29685/comm /proc/3/comm /proc/30/comm /proc/31/comm /proc/310/comm /proc/311/comm /proc/315/comm /proc/316/comm /proc/317/comm /proc/318/comm /proc/319/comm /proc/32/comm /proc/320/comm /proc/321/comm /proc/322/comm /proc/323/comm /proc/33/comm /proc/34/comm /proc/34184/comm /proc/34459/comm /proc/34478/comm /proc/34502/comm /proc/34515/comm /proc/36/comm /proc/363/comm /proc/37/comm /proc/38/comm /proc/382/comm /proc/38744/comm /proc/38746/comm /proc/38904/comm /proc/38923/comm /proc/38971/comm /proc/38998/comm /proc/39/comm /proc/39013/comm /proc/395/comm /proc/398/comm /proc/4/comm /proc/40/comm /proc/41511/comm /proc/41535/comm /proc/41561/comm /proc/41574/comm /proc/41576/comm /proc/41603/comm /proc/41664/comm /proc/41668/comm /proc/41669/comm /proc/41691/comm /proc/41749/comm /proc/41767/comm /proc/41798/comm /proc/41799/comm /proc/41913/comm /proc/41974/comm /proc/42/comm /proc/42126/comm /proc/42149/comm /proc/42174/comm /proc/42910/comm /proc/42937/comm /proc/42956/comm /proc/42976/comm /proc/43/comm /proc/43207/comm /proc/43461/comm /proc/43839/comm /proc/44/comm /proc/44371/comm /proc/44396/comm /proc/44432/comm /proc/44767/comm /proc/44795/comm /proc/44806/comm /proc/44830/comm /proc/44862/comm /proc/44883/comm /proc/45/comm /proc/45236/comm /proc/45260/comm /proc/45332/comm /proc/455/comm /proc/45711/comm /proc/45735/comm /proc/45750/comm /proc/45777/comm /proc/45794/comm /proc/45822/comm /proc/45941/comm /proc/45986/comm /proc/46/comm /proc/46030/comm /proc/46186/comm /proc/47758/comm /proc/47852/comm /proc/47881/comm /proc/47960/comm /proc/47984/comm /proc/48/comm /proc/48201/comm /proc/48214/comm /proc/48254/comm /proc/48369/comm /proc/48727/comm /proc/48770/comm /proc/49/comm /proc/49028/comm /proc/49053/comm /proc/49097/comm /proc/49217/comm /proc/49403/comm /proc/49426/comm /proc/49546/comm /proc/49692/comm /proc/49715/comm /proc/5/comm /proc/50/comm /proc/50050/comm /proc/50075/comm /proc/50206/comm /proc/50307/comm /proc/50405/comm /proc/50434/comm /proc/50492/comm /proc/50549/comm /proc/51/comm /proc/51517/comm /proc/518/comm /proc/52/comm /proc/52393/comm /proc/52414/comm /proc/52521/comm /proc/52546/comm /proc/52742/comm /proc/52836/comm /proc/53058/comm /proc/53114/comm /proc/54/comm /proc/55/comm /proc/56/comm /proc/56952/comm /proc/56977/comm /proc/57/comm /proc/57570/comm /proc/57600/comm /proc/57641/comm /proc/57669/comm /proc/57685/comm /proc/57708/comm /proc/57876/comm /proc/57900/comm /proc/57945/comm /proc/57984/comm /proc/58/comm /proc/58025/comm /proc/58132/comm /proc/6/comm /proc/60/comm /proc/61/comm /proc/610/comm /proc/613/comm /proc/616/comm /proc/61706/comm /proc/61897/comm /proc/61919/comm /proc/61966/comm /proc/62/comm /proc/62095/comm /proc/62131/comm /proc/62159/comm /proc/62184/comm /proc/622/comm /proc/62205/comm /proc/62229/comm /proc/623/comm /proc/62510/comm /proc/62857/comm /proc/63/comm /proc/63101/comm /proc/63125/comm /proc/63356/comm /proc/63373/comm /proc/63374/comm /proc/63387/comm /proc/63388/comm /proc/63574/comm /proc/63606/comm /proc/63690/comm /proc/63713/comm /proc/63918/comm /proc/63947/comm /proc/64/comm /proc/640/comm /proc/64007/comm /proc/64054/comm /proc/64104/comm /proc/64131/comm /proc/64435/comm /proc/64466/comm /proc/64486/comm /proc/646/comm /proc/64873/comm /proc/64898/comm /proc/65006/comm /proc/65021/comm /proc/65022/comm /proc/65023/comm /proc/65024/comm /proc/65025/comm /proc/65203/comm /proc/65227/comm /proc/65471/comm /proc/65616/comm /proc/65661/comm /proc/65684/comm /proc/65911/comm /proc/66/comm /proc/66027/comm /proc/66061/comm /proc/66186/comm /proc/66234/comm /proc/66448/comm /proc/66473/comm /proc/66532/comm /proc/66533/comm /proc/66580/comm /proc/66610/comm /proc/66740/comm /proc/66775/comm /proc/66823/comm /proc/66902/comm /proc/67/comm /proc/67022/comm /proc/67093/comm /proc/67138/comm /proc/67319/comm /proc/67507/comm /proc/67528/comm /proc/67557/comm /proc/68/comm /proc/68039/comm /proc/68066/comm /proc/68560/comm /proc/68577/comm /proc/68583/comm /proc/68641/comm /proc/68642/comm /proc/68652/comm /proc/68845/comm /proc/69/comm /proc/699/comm /proc/70/comm /proc/70033/comm /proc/70057/comm /proc/702/comm /proc/703/comm /proc/70718/comm /proc/716/comm /proc/72/comm /proc/73/comm /proc/73342/comm /proc/73386/comm /proc/73387/comm /proc/73388/comm /proc/73389/comm /proc/73390/comm /proc/73391/comm /proc/73393/comm /proc/73395/comm /proc/73398/comm /proc/73400/comm /proc/73401/comm /proc/73402/comm /proc/73404/comm /proc/73405/comm /proc/74/comm /proc/75/comm /proc/76/comm /proc/78/comm /proc/79/comm /proc/79463/comm /proc/79486/comm /proc/79640/comm /proc/79657/comm /proc/79663/comm /proc/79748/comm /proc/79749/comm /proc/79759/comm /proc/79886/comm /proc/8/comm /proc/80/comm /proc/81/comm /proc/81088/comm /proc/81112/comm /proc/81534/comm /proc/82/comm /proc/82286/comm /proc/83213/comm /proc/83779/comm /proc/84/comm /proc/85/comm /proc/86/comm /proc/861/comm /proc/86215/comm /proc/86239/comm /proc/86961/comm /proc/86987/comm /proc/87/comm /proc/87771/comm /proc/88/comm /proc/88708/comm /proc/9/comm /proc/90/comm /proc/90633/comm /proc/91/comm /proc/92/comm /proc/9236/comm /proc/9253/comm /proc/9269/comm /proc/92811/comm /proc/93/comm /proc/93079/comm /proc/93105/comm /proc/93268/comm /proc/93286/comm /proc/93292/comm /proc/93404/comm /proc/93405/comm /proc/93415/comm /proc/9351/comm /proc/93616/comm /proc/94/comm /proc/96/comm /proc/97/comm /proc/97085/comm /proc/97109/comm /proc/97120/comm /proc/97146/comm /proc/97590/comm /proc/97664/comm /proc/98/comm /proc/98361/comm /proc/99/comm /proc/99247/comm /proc/99250/comm /proc/99430/comm /proc/9968/comm /proc/self/comm /proc/thread-self/comm
+ '[' -n '' ']'
+ rm -f /var/run/libvirtd.pid
+ [[ -c /dev/kvm ]]
+ chmod 660 /dev/kvm
+ chown root:kvm /dev/kvm
+ CGROUPS=
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/blkio ']'
+ grep -w blkio /sys/fs/cgroup/cgroup.controllers
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/cpu ']'
+ grep -w cpu /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=cpu,
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/devices ']'
+ grep -w devices /sys/fs/cgroup/cgroup.controllers
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/freezer ']'
+ grep -w freezer /sys/fs/cgroup/cgroup.controllers
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/hugetlb ']'
+ grep -w hugetlb /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=hugetlb,
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/memory ']'
+ grep -w memory /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=memory,
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/net_cls ']'
+ grep -w net_cls /sys/fs/cgroup/cgroup.controllers
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/perf_event ']'
+ grep -w perf_event /sys/fs/cgroup/cgroup.controllers
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/rdma ']'
+ grep -w rdma /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=rdma,
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/misc ']'
+ grep -w misc /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=misc,
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/pids ']'
+ grep -w pids /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=pids,
+ cgcreate -g cpu,hugetlb,memory,rdma,misc,pids:/osh-libvirt
++ cat /proc/meminfo
++ grep HugePages_Total
++ tr -cd '[:digit:]'
+ hp_count=0
+ '[' 00 -gt 0 ']'
+ '[' -n 457eb676-33da-42ec-9a8c-9293d545c337 ']'
+ cgexec -g cpu,hugetlb,memory,rdma,misc,pids:/osh-libvirt systemd-run --scope --slice=system libvirtd --listen
++ mktemp --suffix .xml
+ tmpsecret=/tmp/tmp.5jSOT1hqTf.xml
+ '[' -n '' ']'
+ trap cleanup EXIT
+ TIMEOUT=60
+ [[ ! -f /var/run/libvirtd.pid ]]
+ [[ 60 -gt 0 ]]
+ let TIMEOUT-=1
+ sleep 1
Running as unit: run-r0529fa69dd484ab19cb050a6dca332c0.scope; invocation ID: aa8b0c66dc9847429e48d55ebc57fcd5
+ [[ ! -f /var/run/libvirtd.pid ]]
+ TIMEOUT=10
+ [[ ! -e /var/run/libvirt/libvirt-sock ]]
+ '[' -z '' ']'
+ '[' -n cinder ']'
++ awk '/key/{print $3}' /etc/ceph/ceph.client.cinder.keyring
+ CEPH_CINDER_KEYRING=AQDaW4ZqS9aUKRAAu+kaO1zQ7pNl4BD6JcKJ/g==
+ '[' -n cinder ']'
+ create_virsh_libvirt_secret cinder 457eb676-33da-42ec-9a8c-9293d545c337 AQDaW4ZqS9aUKRAAu+kaO1zQ7pNl4BD6JcKJ/g==
+ sec_user=cinder
+ sec_uuid=457eb676-33da-42ec-9a8c-9293d545c337
+ sec_ceph_keyring=AQDaW4ZqS9aUKRAAu+kaO1zQ7pNl4BD6JcKJ/g==
+ cat
+ virsh secret-define --file /tmp/tmp.5jSOT1hqTf.xml
Secret 457eb676-33da-42ec-9a8c-9293d545c337 created

+ virsh secret-set-value --secret 457eb676-33da-42ec-9a8c-9293d545c337 --base64 AQDaW4ZqS9aUKRAAu+kaO1zQ7pNl4BD6JcKJ/g==
error: Passing secret value as command-line argument is insecure!
Secret value set

+ '[' -n '' ']'
+ '[' -n '' ']'
+ cleanup
+ rm -f /tmp/tmp.5jSOT1hqTf.xml
+ '[' -n '' ']'
++ cat /var/run/libvirtd.pid
+ LIBVIRTD_PID=190295
+ kill 190295
+ tail --pid=190295 -f /dev/null
+ cgexec -g cpu,hugetlb,memory,rdma,misc,pids:/osh-libvirt systemd-run --scope --slice=system libvirtd --listen
Running as unit: run-r84a4aab1d7c14fe4814a7937134293c7.scope; invocation ID: f2eff9904c63466fac3af5874e8c0314