+ wait_for_file /etc/pki/CA/cacert.pem
+ local file=/etc/pki/CA/cacert.pem
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ sleep 1
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ sleep 1
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ sleep 1
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ sleep 1
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ sleep 1
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ wait_for_file /etc/pki/qemu/ca-cert.pem
+ local file=/etc/pki/qemu/ca-cert.pem
+ '[' '!' -f /etc/pki/qemu/ca-cert.pem ']'
+ wait_for_file /etc/pki/libvirt/servercert.pem
+ local file=/etc/pki/libvirt/servercert.pem
+ '[' '!' -f /etc/pki/libvirt/servercert.pem ']'
+ wait_for_file /etc/pki/libvirt/clientcert.pem
+ local file=/etc/pki/libvirt/clientcert.pem
+ '[' '!' -f /etc/pki/libvirt/clientcert.pem ']'
+ wait_for_file /etc/pki/qemu/server-cert.pem
+ local file=/etc/pki/qemu/server-cert.pem
+ '[' '!' -f /etc/pki/qemu/server-cert.pem ']'
+ wait_for_file /etc/pki/qemu/client-cert.pem
+ local file=/etc/pki/qemu/client-cert.pem
+ '[' '!' -f /etc/pki/qemu/client-cert.pem ']'
+ wait_for_file /etc/pki/libvirt/private/serverkey.pem
+ local file=/etc/pki/libvirt/private/serverkey.pem
+ '[' '!' -f /etc/pki/libvirt/private/serverkey.pem ']'
+ wait_for_file /etc/pki/libvirt/private/clientkey.pem
+ local file=/etc/pki/libvirt/private/clientkey.pem
+ '[' '!' -f /etc/pki/libvirt/private/clientkey.pem ']'
+ wait_for_file /etc/pki/qemu/server-key.pem
+ local file=/etc/pki/qemu/server-key.pem
+ '[' '!' -f /etc/pki/qemu/server-key.pem ']'
+ wait_for_file /etc/pki/qemu/client-key.pem
+ local file=/etc/pki/qemu/client-key.pem
+ '[' '!' -f /etc/pki/qemu/client-key.pem ']'
+ wait_for_file /etc/pki/libvirt-vnc/ca-cert.pem
+ local file=/etc/pki/libvirt-vnc/ca-cert.pem
+ '[' '!' -f /etc/pki/libvirt-vnc/ca-cert.pem ']'
+ wait_for_file /etc/pki/libvirt-vnc/server-cert.pem
+ local file=/etc/pki/libvirt-vnc/server-cert.pem
+ '[' '!' -f /etc/pki/libvirt-vnc/server-cert.pem ']'
+ wait_for_file /etc/pki/libvirt-vnc/server-key.pem
+ local file=/etc/pki/libvirt-vnc/server-key.pem
+ '[' '!' -f /etc/pki/libvirt-vnc/server-key.pem ']'
++ grep -w libvirtd
++ cat /proc/1/comm /proc/10/comm /proc/100/comm /proc/100172/comm /proc/100204/comm /proc/10169/comm /proc/101952/comm /proc/101975/comm /proc/102/comm /proc/102141/comm /proc/102142/comm /proc/102282/comm /proc/102295/comm /proc/102296/comm /proc/103/comm /proc/103317/comm /proc/103344/comm /proc/103359/comm /proc/103394/comm /proc/103677/comm /proc/103730/comm /proc/103995/comm /proc/104/comm /proc/104002/comm /proc/104634/comm /proc/104901/comm /proc/105/comm /proc/105167/comm /proc/105216/comm /proc/105388/comm /proc/105412/comm /proc/105537/comm /proc/105555/comm /proc/105561/comm /proc/105617/comm /proc/105618/comm /proc/105628/comm /proc/105855/comm /proc/106/comm /proc/10675/comm /proc/10676/comm /proc/107075/comm /proc/107343/comm /proc/107371/comm /proc/107450/comm /proc/107484/comm /proc/107899/comm /proc/107914/comm /proc/108/comm /proc/109/comm /proc/11/comm /proc/110/comm /proc/111/comm /proc/111417/comm /proc/111418/comm /proc/112/comm /proc/112387/comm /proc/113/comm /proc/114/comm /proc/115/comm /proc/115726/comm /proc/116/comm /proc/117/comm /proc/117420/comm /proc/1185/comm /proc/118619/comm /proc/118632/comm /proc/118633/comm /proc/12/comm /proc/120137/comm /proc/120170/comm /proc/120436/comm /proc/120458/comm /proc/120480/comm /proc/120504/comm /proc/12106/comm /proc/121111/comm /proc/12138/comm /proc/121563/comm /proc/121725/comm /proc/12185/comm /proc/12219/comm /proc/12237/comm /proc/123220/comm /proc/123244/comm /proc/123633/comm /proc/124501/comm /proc/124507/comm /proc/124635/comm /proc/12468/comm /proc/12497/comm /proc/12503/comm /proc/12553/comm /proc/125678/comm /proc/125681/comm /proc/12578/comm /proc/12598/comm /proc/127054/comm /proc/127084/comm /proc/128717/comm /proc/128744/comm /proc/128746/comm /proc/1290/comm /proc/1291/comm /proc/1292/comm /proc/1293/comm /proc/13/comm /proc/130079/comm /proc/130080/comm /proc/137172/comm /proc/137173/comm /proc/137175/comm /proc/137176/comm /proc/137327/comm /proc/138009/comm /proc/138034/comm /proc/1383/comm /proc/138487/comm /proc/138522/comm /proc/138534/comm /proc/138566/comm /proc/138567/comm /proc/138568/comm /proc/138569/comm /proc/1387/comm /proc/138842/comm /proc/139045/comm /proc/139069/comm /proc/139963/comm /proc/139964/comm /proc/14/comm /proc/140204/comm /proc/140230/comm /proc/140242/comm /proc/140266/comm /proc/140575/comm /proc/140595/comm /proc/140610/comm /proc/140765/comm /proc/140791/comm /proc/140829/comm /proc/140881/comm /proc/140896/comm /proc/140944/comm /proc/141030/comm /proc/141069/comm /proc/141278/comm /proc/141283/comm /proc/141761/comm /proc/142005/comm /proc/142030/comm /proc/142119/comm /proc/142138/comm /proc/142144/comm /proc/142193/comm /proc/142194/comm /proc/142204/comm /proc/142474/comm /proc/144451/comm /proc/144474/comm /proc/144520/comm /proc/144563/comm /proc/144587/comm /proc/144594/comm /proc/144650/comm /proc/144653/comm /proc/144701/comm /proc/144895/comm /proc/144947/comm /proc/145017/comm /proc/145126/comm /proc/145166/comm /proc/1452/comm /proc/145229/comm /proc/145253/comm /proc/1456/comm /proc/145601/comm /proc/145817/comm /proc/1465/comm /proc/15/comm /proc/16/comm /proc/163794/comm /proc/163801/comm /proc/163807/comm /proc/163808/comm /proc/164435/comm /proc/164470/comm /proc/165772/comm /proc/166067/comm /proc/168/comm /proc/168958/comm /proc/169/comm /proc/169499/comm /proc/169501/comm /proc/169525/comm /proc/169526/comm /proc/169527/comm /proc/169528/comm /proc/170/comm /proc/170322/comm /proc/170340/comm /proc/170634/comm /proc/170750/comm /proc/170751/comm /proc/170918/comm /proc/170921/comm /proc/171/comm /proc/171101/comm /proc/171205/comm /proc/171207/comm /proc/171208/comm /proc/171489/comm /proc/171514/comm /proc/171610/comm /proc/171628/comm /proc/171635/comm /proc/171688/comm /proc/171689/comm /proc/171699/comm /proc/171938/comm /proc/172/comm /proc/173/comm /proc/173291/comm /proc/173303/comm /proc/173357/comm /proc/173382/comm /proc/173402/comm /proc/173450/comm /proc/173683/comm /proc/173701/comm /proc/173724/comm /proc/173759/comm /proc/173793/comm /proc/174/comm /proc/174004/comm /proc/174303/comm /proc/174316/comm /proc/174376/comm /proc/174378/comm /proc/174756/comm /proc/175/comm /proc/176/comm /proc/177325/comm /proc/178/comm /proc/178076/comm /proc/179222/comm /proc/179407/comm /proc/179992/comm /proc/18/comm /proc/180/comm /proc/180015/comm /proc/180223/comm /proc/180365/comm /proc/180659/comm /proc/180717/comm /proc/180786/comm /proc/180832/comm /proc/180954/comm /proc/180965/comm /proc/181/comm /proc/181210/comm /proc/182935/comm /proc/183/comm /proc/183219/comm /proc/183220/comm /proc/183221/comm /proc/183629/comm /proc/183647/comm /proc/183673/comm /proc/183674/comm /proc/183687/comm /proc/183700/comm /proc/183701/comm /proc/184109/comm /proc/184116/comm /proc/184120/comm /proc/184735/comm /proc/184958/comm /proc/184977/comm /proc/185/comm /proc/185265/comm /proc/185322/comm /proc/185336/comm /proc/185559/comm /proc/185576/comm /proc/185577/comm /proc/185578/comm /proc/185579/comm /proc/185580/comm /proc/185581/comm /proc/185636/comm /proc/186/comm /proc/186067/comm /proc/186140/comm /proc/186177/comm /proc/186368/comm /proc/186404/comm /proc/186473/comm /proc/186548/comm /proc/186600/comm /proc/186679/comm /proc/186698/comm /proc/186716/comm /proc/186722/comm /proc/186767/comm /proc/186768/comm /proc/186819/comm /proc/186827/comm /proc/186828/comm /proc/186838/comm /proc/186903/comm /proc/186991/comm /proc/187/comm /proc/187012/comm /proc/187026/comm /proc/187027/comm /proc/187028/comm /proc/188/comm /proc/189/comm /proc/19/comm /proc/190/comm /proc/191/comm /proc/19111/comm /proc/19133/comm /proc/19155/comm /proc/19181/comm /proc/19197/comm /proc/192/comm /proc/193/comm /proc/194/comm /proc/195/comm /proc/196/comm /proc/2/comm /proc/20/comm /proc/200/comm /proc/21/comm /proc/21033/comm /proc/21052/comm /proc/21053/comm /proc/21074/comm /proc/217/comm /proc/21743/comm /proc/22/comm /proc/220/comm /proc/221/comm /proc/226/comm /proc/24/comm /proc/24039/comm /proc/24314/comm /proc/24331/comm /proc/24356/comm /proc/24368/comm /proc/248/comm /proc/25/comm /proc/26/comm /proc/262/comm /proc/27/comm /proc/28/comm /proc/282/comm /proc/28569/comm /proc/286/comm /proc/287/comm /proc/28842/comm /proc/28859/comm /proc/28884/comm /proc/28896/comm /proc/289/comm /proc/290/comm /proc/3/comm /proc/30/comm /proc/31/comm /proc/312/comm /proc/313/comm /proc/32/comm /proc/33/comm /proc/33063/comm /proc/33341/comm /proc/33359/comm /proc/33382/comm /proc/33395/comm /proc/33897/comm /proc/34/comm /proc/343/comm /proc/34964/comm /proc/34966/comm /proc/351/comm /proc/352/comm /proc/359/comm /proc/36/comm /proc/369/comm /proc/37/comm /proc/379/comm /proc/38/comm /proc/380/comm /proc/38736/comm /proc/38768/comm /proc/38775/comm /proc/388/comm /proc/38810/comm /proc/38811/comm /proc/38819/comm /proc/38867/comm /proc/38888/comm /proc/38902/comm /proc/38915/comm /proc/38972/comm /proc/39/comm /proc/39005/comm /proc/39021/comm /proc/39033/comm /proc/39144/comm /proc/39204/comm /proc/39306/comm /proc/39329/comm /proc/39354/comm /proc/394/comm /proc/398/comm /proc/4/comm /proc/40/comm /proc/40079/comm /proc/40098/comm /proc/40127/comm /proc/40142/comm /proc/40377/comm /proc/40582/comm /proc/41005/comm /proc/41452/comm /proc/41474/comm /proc/41513/comm /proc/41826/comm /proc/41851/comm /proc/41879/comm /proc/41889/comm /proc/41914/comm /proc/41963/comm /proc/42/comm /proc/42320/comm /proc/42345/comm /proc/42443/comm /proc/42786/comm /proc/42812/comm /proc/42845/comm /proc/42869/comm /proc/42884/comm /proc/42907/comm /proc/43/comm /proc/43025/comm /proc/43068/comm /proc/43116/comm /proc/44/comm /proc/45/comm /proc/45204/comm /proc/45228/comm /proc/45243/comm /proc/45266/comm /proc/45403/comm /proc/455/comm /proc/45560/comm /proc/45578/comm /proc/45656/comm /proc/457/comm /proc/46/comm /proc/46006/comm /proc/46032/comm /proc/46048/comm /proc/46073/comm /proc/46153/comm /proc/46291/comm /proc/46462/comm /proc/46487/comm /proc/46605/comm /proc/46940/comm /proc/46970/comm /proc/47146/comm /proc/47386/comm /proc/47409/comm /proc/47501/comm /proc/47555/comm /proc/47652/comm /proc/47681/comm /proc/47737/comm /proc/47797/comm /proc/48/comm /proc/48717/comm /proc/49/comm /proc/49412/comm /proc/49558/comm /proc/49591/comm /proc/49698/comm /proc/49722/comm /proc/49755/comm /proc/49858/comm /proc/5/comm /proc/50/comm /proc/50067/comm /proc/50147/comm /proc/51/comm /proc/52/comm /proc/522/comm /proc/53737/comm /proc/53769/comm /proc/54/comm /proc/54452/comm /proc/54476/comm /proc/54491/comm /proc/54518/comm /proc/54537/comm /proc/54567/comm /proc/54675/comm /proc/54700/comm /proc/54819/comm /proc/54862/comm /proc/54904/comm /proc/55/comm /proc/55013/comm /proc/56/comm /proc/57/comm /proc/58/comm /proc/58415/comm /proc/58542/comm /proc/58607/comm /proc/58714/comm /proc/58748/comm /proc/58763/comm /proc/58789/comm /proc/58803/comm /proc/58835/comm /proc/59067/comm /proc/59185/comm /proc/59720/comm /proc/59744/comm /proc/59960/comm /proc/59961/comm /proc/59975/comm /proc/59983/comm /proc/59985/comm /proc/6/comm /proc/60/comm /proc/60307/comm /proc/60333/comm /proc/60347/comm /proc/60373/comm /proc/60608/comm /proc/60635/comm /proc/60648/comm /proc/60677/comm /proc/60693/comm /proc/60725/comm /proc/61/comm /proc/61275/comm /proc/61301/comm /proc/61334/comm /proc/614/comm /proc/61429/comm /proc/61451/comm /proc/618/comm /proc/61810/comm /proc/61829/comm /proc/61830/comm /proc/61831/comm /proc/61832/comm /proc/61833/comm /proc/61896/comm /proc/61919/comm /proc/62/comm /proc/620/comm /proc/62228/comm /proc/62253/comm /proc/62334/comm /proc/62379/comm /proc/625/comm /proc/62642/comm /proc/62669/comm /proc/627/comm /proc/62730/comm /proc/62786/comm /proc/62906/comm /proc/62921/comm /proc/62981/comm /proc/63/comm /proc/63011/comm /proc/63127/comm /proc/63185/comm /proc/63309/comm /proc/63404/comm /proc/63445/comm /proc/63701/comm /proc/63867/comm /proc/63989/comm /proc/64/comm /proc/64024/comm /proc/64055/comm /proc/64085/comm /proc/64106/comm /proc/642/comm /proc/64221/comm /proc/64248/comm /proc/644/comm /proc/64652/comm /proc/64669/comm /proc/64675/comm /proc/64722/comm /proc/64723/comm /proc/64733/comm /proc/64802/comm /proc/66/comm /proc/66445/comm /proc/66469/comm /proc/67/comm /proc/68/comm /proc/69/comm /proc/69114/comm /proc/69639/comm /proc/69676/comm /proc/69677/comm /proc/69678/comm /proc/69679/comm /proc/69680/comm /proc/69681/comm /proc/69682/comm /proc/69684/comm /proc/69686/comm /proc/69687/comm /proc/69692/comm /proc/69693/comm /proc/69694/comm /proc/69695/comm /proc/698/comm /proc/70/comm /proc/701/comm /proc/702/comm /proc/715/comm /proc/72/comm /proc/73/comm /proc/74/comm /proc/75/comm /proc/75650/comm /proc/75674/comm /proc/75855/comm /proc/75872/comm /proc/75878/comm /proc/75928/comm /proc/75929/comm /proc/75939/comm /proc/76/comm /proc/76038/comm /proc/77025/comm /proc/77090/comm /proc/78/comm /proc/78237/comm /proc/78455/comm /proc/78710/comm /proc/79/comm /proc/8/comm /proc/80/comm /proc/80867/comm /proc/81/comm /proc/82/comm /proc/82179/comm /proc/82204/comm /proc/82217/comm /proc/82949/comm /proc/82975/comm /proc/83814/comm /proc/84/comm /proc/85/comm /proc/86/comm /proc/860/comm /proc/87/comm /proc/88/comm /proc/88989/comm /proc/89015/comm /proc/89274/comm /proc/89291/comm /proc/89297/comm /proc/89400/comm /proc/89401/comm /proc/89411/comm /proc/89581/comm /proc/9/comm /proc/90/comm /proc/9062/comm /proc/9079/comm /proc/9095/comm /proc/91/comm /proc/9177/comm /proc/92/comm /proc/93/comm /proc/93193/comm /proc/93218/comm /proc/93232/comm /proc/93258/comm /proc/93707/comm /proc/93867/comm /proc/94/comm /proc/94542/comm /proc/96/comm /proc/96116/comm /proc/97/comm /proc/9794/comm /proc/98/comm /proc/98244/comm /proc/98279/comm /proc/99/comm /proc/99775/comm /proc/self/comm /proc/thread-self/comm
+ '[' -n '' ']'
+ rm -f /var/run/libvirtd.pid
+ [[ -c /dev/kvm ]]
+ chmod 660 /dev/kvm
+ chown root:kvm /dev/kvm
+ CGROUPS=
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/blkio ']'
+ grep -w blkio /sys/fs/cgroup/cgroup.controllers
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/cpu ']'
+ grep -w cpu /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=cpu,
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/devices ']'
+ grep -w devices /sys/fs/cgroup/cgroup.controllers
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/freezer ']'
+ grep -w freezer /sys/fs/cgroup/cgroup.controllers
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/hugetlb ']'
+ grep -w hugetlb /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=hugetlb,
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/memory ']'
+ grep -w memory /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=memory,
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/net_cls ']'
+ grep -w net_cls /sys/fs/cgroup/cgroup.controllers
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/perf_event ']'
+ grep -w perf_event /sys/fs/cgroup/cgroup.controllers
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/rdma ']'
+ grep -w rdma /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=rdma,
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/misc ']'
+ grep -w misc /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=misc,
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/pids ']'
+ grep -w pids /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=pids,
+ cgcreate -g cpu,hugetlb,memory,rdma,misc,pids:/osh-libvirt
++ cat /proc/meminfo
++ grep HugePages_Total
++ tr -cd '[:digit:]'
+ hp_count=0
+ '[' 00 -gt 0 ']'
+ '[' -n 457eb676-33da-42ec-9a8c-9293d545c337 ']'
+ cgexec -g cpu,hugetlb,memory,rdma,misc,pids:/osh-libvirt systemd-run --scope --slice=system libvirtd --listen
++ mktemp --suffix .xml
+ tmpsecret=/tmp/tmp.JBx9OzbLdd.xml
+ '[' -n '' ']'
+ trap cleanup EXIT
+ TIMEOUT=60
+ [[ ! -f /var/run/libvirtd.pid ]]
+ [[ 60 -gt 0 ]]
+ let TIMEOUT-=1
+ sleep 1
Running as unit: run-r73d540b8271a456395bd6a2682bda8ed.scope; invocation ID: 95f75945630f4632ab79c683ffda451a
+ [[ ! -f /var/run/libvirtd.pid ]]
+ TIMEOUT=10
+ [[ ! -e /var/run/libvirt/libvirt-sock ]]
+ '[' -z '' ']'
+ '[' -n cinder ']'
++ awk '/key/{print $3}' /etc/ceph/ceph.client.cinder.keyring
+ CEPH_CINDER_KEYRING=AQCBoAJqioJOFhAAeGdJvq6Gte3wTA3nrcH/mg==
+ '[' -n cinder ']'
+ create_virsh_libvirt_secret cinder 457eb676-33da-42ec-9a8c-9293d545c337 AQCBoAJqioJOFhAAeGdJvq6Gte3wTA3nrcH/mg==
+ sec_user=cinder
+ sec_uuid=457eb676-33da-42ec-9a8c-9293d545c337
+ sec_ceph_keyring=AQCBoAJqioJOFhAAeGdJvq6Gte3wTA3nrcH/mg==
+ cat
+ virsh secret-define --file /tmp/tmp.JBx9OzbLdd.xml
Secret 457eb676-33da-42ec-9a8c-9293d545c337 created

+ virsh secret-set-value --secret 457eb676-33da-42ec-9a8c-9293d545c337 --base64 AQCBoAJqioJOFhAAeGdJvq6Gte3wTA3nrcH/mg==
error: Passing secret value as command-line argument is insecure!
Secret value set

+ '[' -n '' ']'
+ '[' -n '' ']'
+ cleanup
+ rm -f /tmp/tmp.JBx9OzbLdd.xml
+ '[' -n '' ']'
++ cat /var/run/libvirtd.pid
+ LIBVIRTD_PID=187048
+ kill 187048
+ tail --pid=187048 -f /dev/null
+ cgexec -g cpu,hugetlb,memory,rdma,misc,pids:/osh-libvirt systemd-run --scope --slice=system libvirtd --listen
Running as unit: run-r89647191c07a4700bc5ee75044cddd5f.scope; invocation ID: 6a1cf429b25b462a986a6eaf165acf9a