+ wait_for_file /etc/pki/CA/cacert.pem
+ local file=/etc/pki/CA/cacert.pem
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ sleep 1
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ sleep 1
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ sleep 1
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ sleep 1
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ sleep 1
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ wait_for_file /etc/pki/qemu/ca-cert.pem
+ local file=/etc/pki/qemu/ca-cert.pem
+ '[' '!' -f /etc/pki/qemu/ca-cert.pem ']'
+ wait_for_file /etc/pki/libvirt/servercert.pem
+ local file=/etc/pki/libvirt/servercert.pem
+ '[' '!' -f /etc/pki/libvirt/servercert.pem ']'
+ wait_for_file /etc/pki/libvirt/clientcert.pem
+ local file=/etc/pki/libvirt/clientcert.pem
+ '[' '!' -f /etc/pki/libvirt/clientcert.pem ']'
+ wait_for_file /etc/pki/qemu/server-cert.pem
+ local file=/etc/pki/qemu/server-cert.pem
+ '[' '!' -f /etc/pki/qemu/server-cert.pem ']'
+ wait_for_file /etc/pki/qemu/client-cert.pem
+ local file=/etc/pki/qemu/client-cert.pem
+ '[' '!' -f /etc/pki/qemu/client-cert.pem ']'
+ wait_for_file /etc/pki/libvirt/private/serverkey.pem
+ local file=/etc/pki/libvirt/private/serverkey.pem
+ '[' '!' -f /etc/pki/libvirt/private/serverkey.pem ']'
+ wait_for_file /etc/pki/libvirt/private/clientkey.pem
+ local file=/etc/pki/libvirt/private/clientkey.pem
+ '[' '!' -f /etc/pki/libvirt/private/clientkey.pem ']'
+ wait_for_file /etc/pki/qemu/server-key.pem
+ local file=/etc/pki/qemu/server-key.pem
+ '[' '!' -f /etc/pki/qemu/server-key.pem ']'
+ wait_for_file /etc/pki/qemu/client-key.pem
+ local file=/etc/pki/qemu/client-key.pem
+ '[' '!' -f /etc/pki/qemu/client-key.pem ']'
+ wait_for_file /etc/pki/libvirt-vnc/ca-cert.pem
+ local file=/etc/pki/libvirt-vnc/ca-cert.pem
+ '[' '!' -f /etc/pki/libvirt-vnc/ca-cert.pem ']'
+ wait_for_file /etc/pki/libvirt-vnc/server-cert.pem
+ local file=/etc/pki/libvirt-vnc/server-cert.pem
+ '[' '!' -f /etc/pki/libvirt-vnc/server-cert.pem ']'
+ wait_for_file /etc/pki/libvirt-vnc/server-key.pem
+ local file=/etc/pki/libvirt-vnc/server-key.pem
+ '[' '!' -f /etc/pki/libvirt-vnc/server-key.pem ']'
++ grep -w libvirtd
++ cat /proc/1/comm /proc/10/comm /proc/100/comm /proc/100812/comm /proc/102/comm /proc/103/comm /proc/10318/comm /proc/103967/comm /proc/104/comm /proc/104927/comm /proc/104953/comm /proc/105/comm /proc/105295/comm /proc/105307/comm /proc/105308/comm /proc/106/comm /proc/106369/comm /proc/106393/comm /proc/106409/comm /proc/106436/comm /proc/106673/comm /proc/106812/comm /proc/106975/comm /proc/106977/comm /proc/107813/comm /proc/107965/comm /proc/108/comm /proc/108353/comm /proc/108377/comm /proc/108468/comm /proc/108485/comm /proc/108491/comm /proc/108573/comm /proc/108574/comm /proc/108584/comm /proc/108729/comm /proc/1089/comm /proc/109/comm /proc/11/comm /proc/110/comm /proc/110088/comm /proc/110119/comm /proc/110266/comm /proc/110291/comm /proc/110643/comm /proc/110649/comm /proc/11078/comm /proc/11079/comm /proc/111/comm /proc/112/comm /proc/112734/comm /proc/113/comm /proc/114/comm /proc/115/comm /proc/116/comm /proc/116330/comm /proc/117/comm /proc/117488/comm /proc/118314/comm /proc/119955/comm /proc/119969/comm /proc/119970/comm /proc/12/comm /proc/121374/comm /proc/123144/comm /proc/123178/comm /proc/123180/comm /proc/123208/comm /proc/123482/comm /proc/123820/comm /proc/124154/comm /proc/124387/comm /proc/12464/comm /proc/12493/comm /proc/12531/comm /proc/12576/comm /proc/125887/comm /proc/12589/comm /proc/125914/comm /proc/126285/comm /proc/126302/comm /proc/127442/comm /proc/127462/comm /proc/127524/comm /proc/12826/comm /proc/12857/comm /proc/128670/comm /proc/12915/comm /proc/12939/comm /proc/12958/comm /proc/13/comm /proc/131019/comm /proc/131749/comm /proc/131762/comm /proc/131763/comm /proc/133004/comm /proc/133005/comm /proc/14/comm /proc/140030/comm /proc/140031/comm /proc/140033/comm /proc/140037/comm /proc/140168/comm /proc/140732/comm /proc/140787/comm /proc/141135/comm /proc/141169/comm /proc/141183/comm /proc/141215/comm /proc/141216/comm /proc/141217/comm /proc/141218/comm /proc/141747/comm /proc/141777/comm /proc/1420/comm /proc/142030/comm /proc/142540/comm /proc/142558/comm /proc/142559/comm /proc/142715/comm /proc/142738/comm /proc/142754/comm /proc/142778/comm /proc/143071/comm /proc/143089/comm /proc/143125/comm /proc/143144/comm /proc/143185/comm /proc/143200/comm /proc/143301/comm /proc/143350/comm /proc/143457/comm /proc/143481/comm /proc/143604/comm /proc/143605/comm /proc/143803/comm /proc/143997/comm /proc/144002/comm /proc/144534/comm /proc/144559/comm /proc/144830/comm /proc/144930/comm /proc/144947/comm /proc/144953/comm /proc/145025/comm /proc/145026/comm /proc/145037/comm /proc/145314/comm /proc/15/comm /proc/1525/comm /proc/1526/comm /proc/1527/comm /proc/1528/comm /proc/1532/comm /proc/159172/comm /proc/159230/comm /proc/159358/comm /proc/159440/comm /proc/159483/comm /proc/159556/comm /proc/159582/comm /proc/159600/comm /proc/159632/comm /proc/159700/comm /proc/159745/comm /proc/159885/comm /proc/1599/comm /proc/159937/comm /proc/159975/comm /proc/16/comm /proc/160182/comm /proc/160207/comm /proc/1603/comm /proc/160563/comm /proc/160723/comm /proc/1612/comm /proc/165110/comm /proc/165133/comm /proc/165437/comm /proc/165802/comm /proc/165844/comm /proc/165886/comm /proc/167/comm /proc/167274/comm /proc/167281/comm /proc/167286/comm /proc/168/comm /proc/168419/comm /proc/168476/comm /proc/169/comm /proc/170/comm /proc/170114/comm /proc/170458/comm /proc/170619/comm /proc/170658/comm /proc/170659/comm /proc/170709/comm /proc/170723/comm /proc/170724/comm /proc/171/comm /proc/171590/comm /proc/171607/comm /proc/171793/comm /proc/172/comm /proc/172042/comm /proc/172116/comm /proc/172119/comm /proc/172136/comm /proc/172138/comm /proc/172711/comm /proc/172735/comm /proc/172954/comm /proc/172971/comm /proc/172977/comm /proc/173/comm /proc/173047/comm /proc/173048/comm /proc/173058/comm /proc/173184/comm /proc/174/comm /proc/174594/comm /proc/174622/comm /proc/174671/comm /proc/174700/comm /proc/174707/comm /proc/174747/comm /proc/174784/comm /proc/174877/comm /proc/175/comm /proc/175038/comm /proc/175061/comm /proc/175132/comm /proc/175172/comm /proc/175685/comm /proc/175698/comm /proc/175711/comm /proc/175712/comm /proc/178/comm /proc/178950/comm /proc/179285/comm /proc/179288/comm /proc/18/comm /proc/180513/comm /proc/180654/comm /proc/180682/comm /proc/180691/comm /proc/180703/comm /proc/180706/comm /proc/181/comm /proc/181373/comm /proc/181398/comm /proc/181844/comm /proc/181906/comm /proc/181990/comm /proc/182/comm /proc/182017/comm /proc/182095/comm /proc/182106/comm /proc/182215/comm /proc/182222/comm /proc/183779/comm /proc/184/comm /proc/184235/comm /proc/184236/comm /proc/184237/comm /proc/184388/comm /proc/184673/comm /proc/184699/comm /proc/184700/comm /proc/184713/comm /proc/184726/comm /proc/184727/comm /proc/186/comm /proc/186108/comm /proc/186110/comm /proc/186235/comm /proc/186546/comm /proc/186807/comm /proc/186854/comm /proc/186880/comm /proc/186896/comm /proc/186984/comm /proc/186987/comm /proc/186990/comm /proc/187/comm /proc/187029/comm /proc/187045/comm /proc/187064/comm /proc/187065/comm /proc/187068/comm /proc/187069/comm /proc/187070/comm /proc/187071/comm /proc/187073/comm /proc/187083/comm /proc/187084/comm /proc/187085/comm /proc/188/comm /proc/18892/comm /proc/189/comm /proc/19/comm /proc/190/comm /proc/19015/comm /proc/19034/comm /proc/19057/comm /proc/19084/comm /proc/191/comm /proc/19101/comm /proc/192/comm /proc/193/comm /proc/194/comm /proc/195/comm /proc/196/comm /proc/197/comm /proc/2/comm /proc/20/comm /proc/203/comm /proc/21/comm /proc/21655/comm /proc/217/comm /proc/21757/comm /proc/22/comm /proc/220/comm /proc/22028/comm /proc/22097/comm /proc/22099/comm /proc/221/comm /proc/22118/comm /proc/226/comm /proc/24/comm /proc/248/comm /proc/25/comm /proc/25371/comm /proc/25645/comm /proc/25661/comm /proc/25686/comm /proc/25699/comm /proc/26/comm /proc/269/comm /proc/27/comm /proc/28/comm /proc/285/comm /proc/289/comm /proc/290/comm /proc/29987/comm /proc/3/comm /proc/30/comm /proc/30249/comm /proc/30266/comm /proc/30290/comm /proc/30302/comm /proc/309/comm /proc/31/comm /proc/310/comm /proc/319/comm /proc/32/comm /proc/33/comm /proc/34/comm /proc/34685/comm /proc/348/comm /proc/34957/comm /proc/34973/comm /proc/34998/comm /proc/35010/comm /proc/351/comm /proc/35511/comm /proc/356/comm /proc/36/comm /proc/367/comm /proc/37/comm /proc/375/comm /proc/38/comm /proc/38279/comm /proc/38281/comm /proc/385/comm /proc/39/comm /proc/391/comm /proc/395/comm /proc/397/comm /proc/399/comm /proc/4/comm /proc/40/comm /proc/40634/comm /proc/40661/comm /proc/40685/comm /proc/40707/comm /proc/40710/comm /proc/40712/comm /proc/40781/comm /proc/40791/comm /proc/40798/comm /proc/40806/comm /proc/40898/comm /proc/40900/comm /proc/40918/comm /proc/40937/comm /proc/41050/comm /proc/41102/comm /proc/41218/comm /proc/41242/comm /proc/41275/comm /proc/41982/comm /proc/41999/comm /proc/42/comm /proc/42029/comm /proc/42044/comm /proc/42302/comm /proc/42510/comm /proc/42895/comm /proc/43/comm /proc/43358/comm /proc/43382/comm /proc/43415/comm /proc/43792/comm /proc/43815/comm /proc/43846/comm /proc/43859/comm /proc/43883/comm /proc/43936/comm /proc/44/comm /proc/44252/comm /proc/44277/comm /proc/44402/comm /proc/44742/comm /proc/44770/comm /proc/44798/comm /proc/44829/comm /proc/44831/comm /proc/44859/comm /proc/44969/comm /proc/45/comm /proc/45013/comm /proc/45058/comm /proc/455/comm /proc/46/comm /proc/47103/comm /proc/47127/comm /proc/47219/comm /proc/47242/comm /proc/47421/comm /proc/47433/comm /proc/47469/comm /proc/47579/comm /proc/47895/comm /proc/47918/comm /proc/48/comm /proc/48013/comm /proc/48035/comm /proc/48083/comm /proc/48206/comm /proc/48579/comm /proc/48603/comm /proc/48725/comm /proc/48864/comm /proc/48892/comm /proc/49/comm /proc/49288/comm /proc/49311/comm /proc/49341/comm /proc/49418/comm /proc/49520/comm /proc/49617/comm /proc/49643/comm /proc/49730/comm /proc/5/comm /proc/50/comm /proc/50825/comm /proc/51/comm /proc/51612/comm /proc/51642/comm /proc/51811/comm /proc/51835/comm /proc/51875/comm /proc/51968/comm /proc/52/comm /proc/520/comm /proc/52158/comm /proc/52247/comm /proc/54/comm /proc/55/comm /proc/56/comm /proc/56030/comm /proc/56054/comm /proc/56707/comm /proc/56735/comm /proc/56756/comm /proc/56780/comm /proc/56796/comm /proc/56826/comm /proc/57/comm /proc/57000/comm /proc/57024/comm /proc/57062/comm /proc/57108/comm /proc/57147/comm /proc/57190/comm /proc/573/comm /proc/58/comm /proc/58565/comm /proc/6/comm /proc/60/comm /proc/60800/comm /proc/61/comm /proc/61013/comm /proc/61041/comm /proc/61066/comm /proc/61201/comm /proc/61226/comm /proc/61247/comm /proc/61276/comm /proc/61278/comm /proc/613/comm /proc/61307/comm /proc/61406/comm /proc/61668/comm /proc/61669/comm /proc/617/comm /proc/619/comm /proc/62/comm /proc/62141/comm /proc/62184/comm /proc/62432/comm /proc/62486/comm /proc/62492/comm /proc/62493/comm /proc/62514/comm /proc/62515/comm /proc/62573/comm /proc/62732/comm /proc/62774/comm /proc/628/comm /proc/62868/comm /proc/62870/comm /proc/62871/comm /proc/629/comm /proc/62903/comm /proc/62925/comm /proc/63/comm /proc/63180/comm /proc/63209/comm /proc/63234/comm /proc/63257/comm /proc/63330/comm /proc/63364/comm /proc/63705/comm /proc/63760/comm /proc/63783/comm /proc/64/comm /proc/64161/comm /proc/64184/comm /proc/642/comm /proc/64281/comm /proc/64296/comm /proc/64297/comm /proc/64298/comm /proc/64299/comm /proc/64300/comm /proc/64419/comm /proc/64445/comm /proc/647/comm /proc/64919/comm /proc/65004/comm /proc/65029/comm /proc/65047/comm /proc/65324/comm /proc/65476/comm /proc/65509/comm /proc/65603/comm /proc/65683/comm /proc/65852/comm /proc/65875/comm /proc/66/comm /proc/66028/comm /proc/66070/comm /proc/66117/comm /proc/66167/comm /proc/66266/comm /proc/66409/comm /proc/66474/comm /proc/66785/comm /proc/66826/comm /proc/66919/comm /proc/66939/comm /proc/66968/comm /proc/67/comm /proc/67246/comm /proc/67269/comm /proc/67542/comm /proc/67558/comm /proc/67564/comm /proc/67635/comm /proc/67636/comm /proc/67646/comm /proc/67784/comm /proc/68/comm /proc/69/comm /proc/69059/comm /proc/69083/comm /proc/70/comm /proc/701/comm /proc/70365/comm /proc/704/comm /proc/705/comm /proc/719/comm /proc/72/comm /proc/72275/comm /proc/72310/comm /proc/72311/comm /proc/72312/comm /proc/72313/comm /proc/72317/comm /proc/72318/comm /proc/72320/comm /proc/72322/comm /proc/72324/comm /proc/72325/comm /proc/72326/comm /proc/72327/comm /proc/72328/comm /proc/72329/comm /proc/73/comm /proc/74/comm /proc/75/comm /proc/75075/comm /proc/76/comm /proc/78/comm /proc/78367/comm /proc/78391/comm /proc/78520/comm /proc/78537/comm /proc/78543/comm /proc/78590/comm /proc/78591/comm /proc/78601/comm /proc/78783/comm /proc/79/comm /proc/79713/comm /proc/79737/comm /proc/8/comm /proc/80/comm /proc/81/comm /proc/82/comm /proc/82541/comm /proc/82974/comm /proc/84/comm /proc/85/comm /proc/85001/comm /proc/85032/comm /proc/85688/comm /proc/85713/comm /proc/86/comm /proc/864/comm /proc/86530/comm /proc/87/comm /proc/88/comm /proc/89388/comm /proc/9/comm /proc/90/comm /proc/90655/comm /proc/91/comm /proc/91610/comm /proc/91771/comm /proc/91794/comm /proc/92/comm /proc/92016/comm /proc/92068/comm /proc/92085/comm /proc/92091/comm /proc/9210/comm /proc/92265/comm /proc/92266/comm /proc/9227/comm /proc/92276/comm /proc/9243/comm /proc/92495/comm /proc/93/comm /proc/9325/comm /proc/94/comm /proc/95912/comm /proc/95936/comm /proc/95956/comm /proc/95985/comm /proc/96/comm /proc/96216/comm /proc/96329/comm /proc/97/comm /proc/97146/comm /proc/98/comm /proc/98118/comm /proc/99/comm /proc/9942/comm /proc/self/comm /proc/thread-self/comm
+ '[' -n '' ']'
+ rm -f /var/run/libvirtd.pid
+ [[ -c /dev/kvm ]]
+ chmod 660 /dev/kvm
+ chown root:kvm /dev/kvm
+ CGROUPS=
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/blkio ']'
+ grep -w blkio /sys/fs/cgroup/cgroup.controllers
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/cpu ']'
+ grep -w cpu /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=cpu,
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/devices ']'
+ grep -w devices /sys/fs/cgroup/cgroup.controllers
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/freezer ']'
+ grep -w freezer /sys/fs/cgroup/cgroup.controllers
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/hugetlb ']'
+ grep -w hugetlb /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=hugetlb,
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/memory ']'
+ grep -w memory /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=memory,
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/net_cls ']'
+ grep -w net_cls /sys/fs/cgroup/cgroup.controllers
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/perf_event ']'
+ grep -w perf_event /sys/fs/cgroup/cgroup.controllers
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/rdma ']'
+ grep -w rdma /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=rdma,
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/misc ']'
+ grep -w misc /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=misc,
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/pids ']'
+ grep -w pids /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=pids,
+ cgcreate -g cpu,hugetlb,memory,rdma,misc,pids:/osh-libvirt
++ cat /proc/meminfo
++ grep HugePages_Total
++ tr -cd '[:digit:]'
+ hp_count=0
+ '[' 00 -gt 0 ']'
+ '[' -n 457eb676-33da-42ec-9a8c-9293d545c337 ']'
+ cgexec -g cpu,hugetlb,memory,rdma,misc,pids:/osh-libvirt systemd-run --scope --slice=system libvirtd --listen
++ mktemp --suffix .xml
+ tmpsecret=/tmp/tmp.5jSVH2p4n7.xml
+ '[' -n '' ']'
+ trap cleanup EXIT
+ TIMEOUT=60
+ [[ ! -f /var/run/libvirtd.pid ]]
+ [[ 60 -gt 0 ]]
+ let TIMEOUT-=1
+ sleep 1
Running as unit: run-r316dea93baa04bf4b54259444cd971f1.scope; invocation ID: 87654868b21a475a93bdf7ebc219d763
+ [[ ! -f /var/run/libvirtd.pid ]]
+ TIMEOUT=10
+ [[ ! -e /var/run/libvirt/libvirt-sock ]]
+ '[' -z '' ']'
+ '[' -n cinder ']'
++ awk '/key/{print $3}' /etc/ceph/ceph.client.cinder.keyring
+ CEPH_CINDER_KEYRING=AQCXERZqCDQzJhAA3LNjOc9tlKUPyNnc0XVFeA==
+ '[' -n cinder ']'
+ create_virsh_libvirt_secret cinder 457eb676-33da-42ec-9a8c-9293d545c337 AQCXERZqCDQzJhAA3LNjOc9tlKUPyNnc0XVFeA==
+ sec_user=cinder
+ sec_uuid=457eb676-33da-42ec-9a8c-9293d545c337
+ sec_ceph_keyring=AQCXERZqCDQzJhAA3LNjOc9tlKUPyNnc0XVFeA==
+ cat
+ virsh secret-define --file /tmp/tmp.5jSVH2p4n7.xml
Secret 457eb676-33da-42ec-9a8c-9293d545c337 created

+ virsh secret-set-value --secret 457eb676-33da-42ec-9a8c-9293d545c337 --base64 AQCXERZqCDQzJhAA3LNjOc9tlKUPyNnc0XVFeA==
error: Passing secret value as command-line argument is insecure!
Secret value set

+ '[' -n '' ']'
+ '[' -n '' ']'
+ cleanup
+ rm -f /tmp/tmp.5jSVH2p4n7.xml
+ '[' -n '' ']'
++ cat /var/run/libvirtd.pid
+ LIBVIRTD_PID=187105
+ kill 187105
+ tail --pid=187105 -f /dev/null
+ cgexec -g cpu,hugetlb,memory,rdma,misc,pids:/osh-libvirt systemd-run --scope --slice=system libvirtd --listen
Running as unit: run-r659fd8ce6a9a4b6ebab59bef6251fe04.scope; invocation ID: 5e8dcdfbf64d4f3abef056b0b872e872