+ wait_for_file /etc/pki/CA/cacert.pem
+ local file=/etc/pki/CA/cacert.pem
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ sleep 1
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ sleep 1
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ sleep 1
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ sleep 1
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ sleep 1
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ wait_for_file /etc/pki/qemu/ca-cert.pem
+ local file=/etc/pki/qemu/ca-cert.pem
+ '[' '!' -f /etc/pki/qemu/ca-cert.pem ']'
+ wait_for_file /etc/pki/libvirt/servercert.pem
+ local file=/etc/pki/libvirt/servercert.pem
+ '[' '!' -f /etc/pki/libvirt/servercert.pem ']'
+ wait_for_file /etc/pki/libvirt/clientcert.pem
+ local file=/etc/pki/libvirt/clientcert.pem
+ '[' '!' -f /etc/pki/libvirt/clientcert.pem ']'
+ wait_for_file /etc/pki/qemu/server-cert.pem
+ local file=/etc/pki/qemu/server-cert.pem
+ '[' '!' -f /etc/pki/qemu/server-cert.pem ']'
+ wait_for_file /etc/pki/qemu/client-cert.pem
+ local file=/etc/pki/qemu/client-cert.pem
+ '[' '!' -f /etc/pki/qemu/client-cert.pem ']'
+ wait_for_file /etc/pki/libvirt/private/serverkey.pem
+ local file=/etc/pki/libvirt/private/serverkey.pem
+ '[' '!' -f /etc/pki/libvirt/private/serverkey.pem ']'
+ wait_for_file /etc/pki/libvirt/private/clientkey.pem
+ local file=/etc/pki/libvirt/private/clientkey.pem
+ '[' '!' -f /etc/pki/libvirt/private/clientkey.pem ']'
+ wait_for_file /etc/pki/qemu/server-key.pem
+ local file=/etc/pki/qemu/server-key.pem
+ '[' '!' -f /etc/pki/qemu/server-key.pem ']'
+ wait_for_file /etc/pki/qemu/client-key.pem
+ local file=/etc/pki/qemu/client-key.pem
+ '[' '!' -f /etc/pki/qemu/client-key.pem ']'
+ wait_for_file /etc/pki/libvirt-vnc/ca-cert.pem
+ local file=/etc/pki/libvirt-vnc/ca-cert.pem
+ '[' '!' -f /etc/pki/libvirt-vnc/ca-cert.pem ']'
+ wait_for_file /etc/pki/libvirt-vnc/server-cert.pem
+ local file=/etc/pki/libvirt-vnc/server-cert.pem
+ '[' '!' -f /etc/pki/libvirt-vnc/server-cert.pem ']'
+ wait_for_file /etc/pki/libvirt-vnc/server-key.pem
+ local file=/etc/pki/libvirt-vnc/server-key.pem
+ '[' '!' -f /etc/pki/libvirt-vnc/server-key.pem ']'
++ grep -w libvirtd
++ cat /proc/1/comm /proc/10/comm /proc/100/comm /proc/100367/comm /proc/102/comm /proc/103/comm /proc/10337/comm /proc/10358/comm /proc/103882/comm /proc/104/comm /proc/105/comm /proc/106/comm /proc/106187/comm /proc/106692/comm /proc/107965/comm /proc/108/comm /proc/10843/comm /proc/10844/comm /proc/109/comm /proc/1094/comm /proc/11/comm /proc/110/comm /proc/111/comm /proc/112/comm /proc/112754/comm /proc/112778/comm /proc/113/comm /proc/113266/comm /proc/113280/comm /proc/113281/comm /proc/114/comm /proc/114327/comm /proc/114351/comm /proc/114371/comm /proc/114395/comm /proc/114652/comm /proc/114881/comm /proc/114883/comm /proc/115/comm /proc/115544/comm /proc/115926/comm /proc/116/comm /proc/116267/comm /proc/116291/comm /proc/116471/comm /proc/116488/comm /proc/116494/comm /proc/116613/comm /proc/116614/comm /proc/116624/comm /proc/116713/comm /proc/117/comm /proc/118088/comm /proc/118115/comm /proc/118137/comm /proc/118180/comm /proc/118762/comm /proc/12/comm /proc/120872/comm /proc/120878/comm /proc/121203/comm /proc/121822/comm /proc/12237/comm /proc/12268/comm /proc/123004/comm /proc/123009/comm /proc/12325/comm /proc/12349/comm /proc/12368/comm /proc/124540/comm /proc/12601/comm /proc/12632/comm /proc/12689/comm /proc/12713/comm /proc/12732/comm /proc/127566/comm /proc/127694/comm /proc/128077/comm /proc/128091/comm /proc/128092/comm /proc/129747/comm /proc/13/comm /proc/13179/comm /proc/14/comm /proc/141846/comm /proc/141869/comm /proc/141890/comm /proc/141915/comm /proc/1425/comm /proc/142506/comm /proc/142959/comm /proc/143203/comm /proc/144538/comm /proc/144563/comm /proc/144898/comm /proc/145005/comm /proc/147235/comm /proc/148588/comm /proc/148653/comm /proc/148658/comm /proc/149490/comm /proc/15/comm /proc/150114/comm /proc/150138/comm /proc/150152/comm /proc/150153/comm /proc/151674/comm /proc/151675/comm /proc/1543/comm /proc/1544/comm /proc/1545/comm /proc/1546/comm /proc/1550/comm /proc/158849/comm /proc/158850/comm /proc/158852/comm /proc/158853/comm /proc/158976/comm /proc/159555/comm /proc/159585/comm /proc/159940/comm /proc/159979/comm /proc/16/comm /proc/160015/comm /proc/160027/comm /proc/160059/comm /proc/160060/comm /proc/160061/comm /proc/160062/comm /proc/161239/comm /proc/161263/comm /proc/161648/comm /proc/161672/comm /proc/1617/comm /proc/161868/comm /proc/161901/comm /proc/1621/comm /proc/162315/comm /proc/162691/comm /proc/162714/comm /proc/162809/comm /proc/162826/comm /proc/162832/comm /proc/162915/comm /proc/162916/comm /proc/162926/comm /proc/1630/comm /proc/163092/comm /proc/163801/comm /proc/164767/comm /proc/164804/comm /proc/164871/comm /proc/164937/comm /proc/164962/comm /proc/164976/comm /proc/165008/comm /proc/165024/comm /proc/165053/comm /proc/165141/comm /proc/165175/comm /proc/165260/comm /proc/16531/comm /proc/165512/comm /proc/165537/comm /proc/165705/comm /proc/165729/comm /proc/166/comm /proc/166226/comm /proc/167/comm /proc/168/comm /proc/169/comm /proc/169457/comm /proc/170/comm /proc/170406/comm /proc/170412/comm /proc/171/comm /proc/171098/comm /proc/171141/comm /proc/171321/comm /proc/171347/comm /proc/171706/comm /proc/172/comm /proc/172538/comm /proc/173/comm /proc/174/comm /proc/175180/comm /proc/175187/comm /proc/175190/comm /proc/175191/comm /proc/175809/comm /proc/175827/comm /proc/175854/comm /proc/175855/comm /proc/175857/comm /proc/175858/comm /proc/176305/comm /proc/176306/comm /proc/176307/comm /proc/176308/comm /proc/176326/comm /proc/176475/comm /proc/176516/comm /proc/176537/comm /proc/176576/comm /proc/176650/comm /proc/176873/comm /proc/176874/comm /proc/176885/comm /proc/176887/comm /proc/177/comm /proc/177436/comm /proc/177585/comm /proc/177608/comm /proc/177757/comm /proc/177775/comm /proc/177781/comm /proc/177909/comm /proc/177910/comm /proc/177920/comm /proc/177986/comm /proc/179/comm /proc/179467/comm /proc/179494/comm /proc/179561/comm /proc/179572/comm /proc/179615/comm /proc/179619/comm /proc/179728/comm /proc/179777/comm /proc/179796/comm /proc/179834/comm /proc/179898/comm /proc/179958/comm /proc/18/comm /proc/180/comm /proc/180023/comm /proc/180074/comm /proc/180690/comm /proc/180702/comm /proc/180730/comm /proc/180764/comm /proc/180776/comm /proc/182/comm /proc/183/comm /proc/184158/comm /proc/184195/comm /proc/185/comm /proc/185477/comm /proc/185496/comm /proc/186/comm /proc/187/comm /proc/18779/comm /proc/188/comm /proc/18800/comm /proc/18822/comm /proc/18850/comm /proc/188539/comm /proc/188540/comm /proc/188541/comm /proc/18867/comm /proc/188808/comm /proc/188813/comm /proc/188843/comm /proc/188844/comm /proc/188860/comm /proc/188880/comm /proc/188881/comm /proc/189154/comm /proc/189157/comm /proc/189160/comm /proc/189557/comm /proc/189624/comm /proc/19/comm /proc/190/comm /proc/190125/comm /proc/190263/comm /proc/190597/comm /proc/190682/comm /proc/190985/comm /proc/191138/comm /proc/191172/comm /proc/191223/comm /proc/191294/comm /proc/191529/comm /proc/191572/comm /proc/191830/comm /proc/191831/comm /proc/191832/comm /proc/191833/comm /proc/191834/comm /proc/191843/comm /proc/192055/comm /proc/192184/comm /proc/192188/comm /proc/192198/comm /proc/192199/comm /proc/192214/comm /proc/192215/comm /proc/192249/comm /proc/192517/comm /proc/192708/comm /proc/192845/comm /proc/192853/comm /proc/192878/comm /proc/192937/comm /proc/192985/comm /proc/193069/comm /proc/193174/comm /proc/193197/comm /proc/193326/comm /proc/193434/comm /proc/193452/comm /proc/193459/comm /proc/193506/comm /proc/193510/comm /proc/193515/comm /proc/193516/comm /proc/193517/comm /proc/193518/comm /proc/193536/comm /proc/193565/comm /proc/193568/comm /proc/193569/comm /proc/193581/comm /proc/193582/comm /proc/193583/comm /proc/2/comm /proc/20/comm /proc/201/comm /proc/202/comm /proc/203/comm /proc/204/comm /proc/21/comm /proc/215/comm /proc/21777/comm /proc/21845/comm /proc/21846/comm /proc/21859/comm /proc/219/comm /proc/22/comm /proc/220/comm /proc/225/comm /proc/24/comm /proc/247/comm /proc/25/comm /proc/25112/comm /proc/25380/comm /proc/25398/comm /proc/25424/comm /proc/25436/comm /proc/26/comm /proc/266/comm /proc/27/comm /proc/28/comm /proc/289/comm /proc/291/comm /proc/292/comm /proc/294/comm /proc/29784/comm /proc/3/comm /proc/30/comm /proc/30058/comm /proc/30075/comm /proc/30100/comm /proc/30113/comm /proc/30881/comm /proc/31/comm /proc/313/comm /proc/314/comm /proc/318/comm /proc/319/comm /proc/32/comm /proc/320/comm /proc/321/comm /proc/322/comm /proc/323/comm /proc/324/comm /proc/325/comm /proc/327/comm /proc/33/comm /proc/34/comm /proc/34326/comm /proc/34590/comm /proc/34607/comm /proc/34633/comm /proc/34645/comm /proc/36/comm /proc/366/comm /proc/37/comm /proc/38/comm /proc/39/comm /proc/39047/comm /proc/39049/comm /proc/39215/comm /proc/39235/comm /proc/39268/comm /proc/39295/comm /proc/39314/comm /proc/398/comm /proc/4/comm /proc/40/comm /proc/402/comm /proc/41775/comm /proc/41801/comm /proc/41822/comm /proc/41839/comm /proc/41850/comm /proc/41864/comm /proc/41925/comm /proc/41941/comm /proc/41944/comm /proc/41960/comm /proc/42/comm /proc/42027/comm /proc/42039/comm /proc/42057/comm /proc/42083/comm /proc/42196/comm /proc/42250/comm /proc/42378/comm /proc/42402/comm /proc/42426/comm /proc/43/comm /proc/43139/comm /proc/43163/comm /proc/43190/comm /proc/43216/comm /proc/43441/comm /proc/43668/comm /proc/44/comm /proc/44102/comm /proc/44500/comm /proc/44523/comm /proc/44548/comm /proc/44939/comm /proc/44963/comm /proc/44978/comm /proc/45/comm /proc/45001/comm /proc/45035/comm /proc/45070/comm /proc/45433/comm /proc/45458/comm /proc/455/comm /proc/45632/comm /proc/45949/comm /proc/45972/comm /proc/45988/comm /proc/46/comm /proc/46015/comm /proc/46034/comm /proc/46065/comm /proc/46175/comm /proc/46223/comm /proc/46269/comm /proc/48/comm /proc/48101/comm /proc/48130/comm /proc/48209/comm /proc/48233/comm /proc/48616/comm /proc/48628/comm /proc/48685/comm /proc/48774/comm /proc/49/comm /proc/49130/comm /proc/49155/comm /proc/49169/comm /proc/49193/comm /proc/49269/comm /proc/49394/comm /proc/49555/comm /proc/49579/comm /proc/49707/comm /proc/49918/comm /proc/49942/comm /proc/5/comm /proc/50/comm /proc/50210/comm /proc/50251/comm /proc/50394/comm /proc/50447/comm /proc/50545/comm /proc/50574/comm /proc/50665/comm /proc/50713/comm /proc/51/comm /proc/51766/comm /proc/52/comm /proc/524/comm /proc/52620/comm /proc/52643/comm /proc/52789/comm /proc/52813/comm /proc/52878/comm /proc/52994/comm /proc/53159/comm /proc/53276/comm /proc/54/comm /proc/55/comm /proc/56/comm /proc/57/comm /proc/57933/comm /proc/57957/comm /proc/58/comm /proc/58588/comm /proc/58622/comm /proc/58636/comm /proc/58661/comm /proc/58694/comm /proc/58718/comm /proc/58830/comm /proc/58854/comm /proc/58916/comm /proc/59021/comm /proc/59099/comm /proc/59211/comm /proc/6/comm /proc/60/comm /proc/61/comm /proc/616/comm /proc/62/comm /proc/620/comm /proc/622/comm /proc/63/comm /proc/631/comm /proc/632/comm /proc/63689/comm /proc/63693/comm /proc/63935/comm /proc/63990/comm /proc/64/comm /proc/64095/comm /proc/64122/comm /proc/64148/comm /proc/64172/comm /proc/64201/comm /proc/64204/comm /proc/64431/comm /proc/648/comm /proc/64899/comm /proc/64946/comm /proc/651/comm /proc/65193/comm /proc/65244/comm /proc/65245/comm /proc/65247/comm /proc/65248/comm /proc/65372/comm /proc/65407/comm /proc/65488/comm /proc/65541/comm /proc/65564/comm /proc/65636/comm /proc/65637/comm /proc/65638/comm /proc/65887/comm /proc/65914/comm /proc/65930/comm /proc/65961/comm /proc/65981/comm /proc/66/comm /proc/66011/comm /proc/66486/comm /proc/66510/comm /proc/66580/comm /proc/66810/comm /proc/66841/comm /proc/67/comm /proc/67140/comm /proc/67163/comm /proc/67164/comm /proc/67165/comm /proc/67166/comm /proc/67167/comm /proc/67198/comm /proc/67225/comm /proc/67331/comm /proc/67583/comm /proc/67606/comm /proc/67631/comm /proc/67705/comm /proc/68/comm /proc/68383/comm /proc/68439/comm /proc/68601/comm /proc/68624/comm /proc/68753/comm /proc/68889/comm /proc/68932/comm /proc/68980/comm /proc/69/comm /proc/69111/comm /proc/69187/comm /proc/69248/comm /proc/69460/comm /proc/69653/comm /proc/69835/comm /proc/69868/comm /proc/69901/comm /proc/69947/comm /proc/70/comm /proc/70017/comm /proc/70033/comm /proc/70057/comm /proc/70480/comm /proc/70496/comm /proc/70502/comm /proc/70560/comm /proc/70561/comm /proc/70571/comm /proc/70728/comm /proc/708/comm /proc/711/comm /proc/712/comm /proc/72/comm /proc/72066/comm /proc/72091/comm /proc/725/comm /proc/73/comm /proc/74/comm /proc/75/comm /proc/75379/comm /proc/75395/comm /proc/75396/comm /proc/75397/comm /proc/75398/comm /proc/75399/comm /proc/75403/comm /proc/75404/comm /proc/75406/comm /proc/75409/comm /proc/75410/comm /proc/75411/comm /proc/75412/comm /proc/75413/comm /proc/75414/comm /proc/76/comm /proc/78/comm /proc/79/comm /proc/8/comm /proc/80/comm /proc/81/comm /proc/81026/comm /proc/81312/comm /proc/81339/comm /proc/81475/comm /proc/81491/comm /proc/81497/comm /proc/81544/comm /proc/81545/comm /proc/81555/comm /proc/81731/comm /proc/82/comm /proc/82775/comm /proc/82800/comm /proc/84/comm /proc/84016/comm /proc/84782/comm /proc/84852/comm /proc/85/comm /proc/86/comm /proc/87/comm /proc/870/comm /proc/88/comm /proc/88122/comm /proc/88135/comm /proc/88915/comm /proc/88947/comm /proc/89671/comm /proc/89786/comm /proc/90/comm /proc/91/comm /proc/92/comm /proc/9229/comm /proc/9246/comm /proc/9262/comm /proc/93/comm /proc/9346/comm /proc/94/comm /proc/95348/comm /proc/95649/comm /proc/95674/comm /proc/95838/comm /proc/95854/comm /proc/95860/comm /proc/95985/comm /proc/95986/comm /proc/95996/comm /proc/96/comm /proc/96411/comm /proc/97/comm /proc/98/comm /proc/98987/comm /proc/99/comm /proc/99011/comm /proc/99036/comm /proc/99060/comm /proc/99592/comm /proc/9966/comm /proc/99726/comm /proc/99727/comm /proc/self/comm /proc/thread-self/comm
+ '[' -n '' ']'
+ rm -f /var/run/libvirtd.pid
+ [[ -c /dev/kvm ]]
+ chmod 660 /dev/kvm
+ chown root:kvm /dev/kvm
+ CGROUPS=
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/blkio ']'
+ grep -w blkio /sys/fs/cgroup/cgroup.controllers
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/cpu ']'
+ grep -w cpu /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=cpu,
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/devices ']'
+ grep -w devices /sys/fs/cgroup/cgroup.controllers
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/freezer ']'
+ grep -w freezer /sys/fs/cgroup/cgroup.controllers
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/hugetlb ']'
+ grep -w hugetlb /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=hugetlb,
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/memory ']'
+ grep -w memory /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=memory,
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/net_cls ']'
+ grep -w net_cls /sys/fs/cgroup/cgroup.controllers
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/perf_event ']'
+ grep -w perf_event /sys/fs/cgroup/cgroup.controllers
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/rdma ']'
+ grep -w rdma /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=rdma,
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/misc ']'
+ grep -w misc /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=misc,
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/pids ']'
+ grep -w pids /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=pids,
+ cgcreate -g cpu,hugetlb,memory,rdma,misc,pids:/osh-libvirt
++ cat /proc/meminfo
++ grep HugePages_Total
++ tr -cd '[:digit:]'
+ hp_count=0
+ '[' 00 -gt 0 ']'
+ '[' -n 457eb676-33da-42ec-9a8c-9293d545c337 ']'
+ cgexec -g cpu,hugetlb,memory,rdma,misc,pids:/osh-libvirt systemd-run --scope --slice=system libvirtd --listen
++ mktemp --suffix .xml
+ tmpsecret=/tmp/tmp.BdWn5mUGkY.xml
+ '[' -n '' ']'
+ trap cleanup EXIT
+ TIMEOUT=60
+ [[ ! -f /var/run/libvirtd.pid ]]
+ [[ 60 -gt 0 ]]
+ let TIMEOUT-=1
+ sleep 1
Running as unit: run-rae407d07435948c4befab04063c6ac5e.scope; invocation ID: 726de22f80af4af29cbfbba268d32b74
+ [[ ! -f /var/run/libvirtd.pid ]]
+ TIMEOUT=10
+ [[ ! -e /var/run/libvirt/libvirt-sock ]]
+ '[' -z '' ']'
+ '[' -n cinder ']'
++ awk '/key/{print $3}' /etc/ceph/ceph.client.cinder.keyring
+ CEPH_CINDER_KEYRING=AQDx8s5q45D5IxAAACHF5JqQD5zBthCCeUd+wg==
+ '[' -n cinder ']'
+ create_virsh_libvirt_secret cinder 457eb676-33da-42ec-9a8c-9293d545c337 AQDx8s5q45D5IxAAACHF5JqQD5zBthCCeUd+wg==
+ sec_user=cinder
+ sec_uuid=457eb676-33da-42ec-9a8c-9293d545c337
+ sec_ceph_keyring=AQDx8s5q45D5IxAAACHF5JqQD5zBthCCeUd+wg==
+ cat
+ virsh secret-define --file /tmp/tmp.BdWn5mUGkY.xml
Secret 457eb676-33da-42ec-9a8c-9293d545c337 created

+ virsh secret-set-value --secret 457eb676-33da-42ec-9a8c-9293d545c337 --base64 AQDx8s5q45D5IxAAACHF5JqQD5zBthCCeUd+wg==
error: Passing secret value as command-line argument is insecure!
Secret value set

+ '[' -n '' ']'
+ '[' -n '' ']'
+ cleanup
+ rm -f /tmp/tmp.BdWn5mUGkY.xml
+ '[' -n '' ']'
++ cat /var/run/libvirtd.pid
+ LIBVIRTD_PID=193617
+ kill 193617
+ tail --pid=193617 -f /dev/null
+ cgexec -g cpu,hugetlb,memory,rdma,misc,pids:/osh-libvirt systemd-run --scope --slice=system libvirtd --listen
Running as unit: run-ra94e13bf1ced4dcdbc581c9afd99dc56.scope; invocation ID: cb9c59214f1b43f396d88c60156f0b2e