+ wait_for_file /etc/pki/CA/cacert.pem
+ local file=/etc/pki/CA/cacert.pem
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ sleep 1
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ sleep 1
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ sleep 1
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ sleep 1
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ sleep 1
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ wait_for_file /etc/pki/qemu/ca-cert.pem
+ local file=/etc/pki/qemu/ca-cert.pem
+ '[' '!' -f /etc/pki/qemu/ca-cert.pem ']'
+ wait_for_file /etc/pki/libvirt/servercert.pem
+ local file=/etc/pki/libvirt/servercert.pem
+ '[' '!' -f /etc/pki/libvirt/servercert.pem ']'
+ wait_for_file /etc/pki/libvirt/clientcert.pem
+ local file=/etc/pki/libvirt/clientcert.pem
+ '[' '!' -f /etc/pki/libvirt/clientcert.pem ']'
+ wait_for_file /etc/pki/qemu/server-cert.pem
+ local file=/etc/pki/qemu/server-cert.pem
+ '[' '!' -f /etc/pki/qemu/server-cert.pem ']'
+ wait_for_file /etc/pki/qemu/client-cert.pem
+ local file=/etc/pki/qemu/client-cert.pem
+ '[' '!' -f /etc/pki/qemu/client-cert.pem ']'
+ wait_for_file /etc/pki/libvirt/private/serverkey.pem
+ local file=/etc/pki/libvirt/private/serverkey.pem
+ '[' '!' -f /etc/pki/libvirt/private/serverkey.pem ']'
+ wait_for_file /etc/pki/libvirt/private/clientkey.pem
+ local file=/etc/pki/libvirt/private/clientkey.pem
+ '[' '!' -f /etc/pki/libvirt/private/clientkey.pem ']'
+ wait_for_file /etc/pki/qemu/server-key.pem
+ local file=/etc/pki/qemu/server-key.pem
+ '[' '!' -f /etc/pki/qemu/server-key.pem ']'
+ wait_for_file /etc/pki/qemu/client-key.pem
+ local file=/etc/pki/qemu/client-key.pem
+ '[' '!' -f /etc/pki/qemu/client-key.pem ']'
+ wait_for_file /etc/pki/libvirt-vnc/ca-cert.pem
+ local file=/etc/pki/libvirt-vnc/ca-cert.pem
+ '[' '!' -f /etc/pki/libvirt-vnc/ca-cert.pem ']'
+ wait_for_file /etc/pki/libvirt-vnc/server-cert.pem
+ local file=/etc/pki/libvirt-vnc/server-cert.pem
+ '[' '!' -f /etc/pki/libvirt-vnc/server-cert.pem ']'
+ wait_for_file /etc/pki/libvirt-vnc/server-key.pem
+ local file=/etc/pki/libvirt-vnc/server-key.pem
+ '[' '!' -f /etc/pki/libvirt-vnc/server-key.pem ']'
++ grep -w libvirtd
++ cat /proc/1/comm /proc/10/comm /proc/100/comm /proc/102/comm /proc/103/comm /proc/10317/comm /proc/104/comm /proc/105/comm /proc/106/comm /proc/108/comm /proc/10821/comm /proc/10822/comm /proc/109/comm /proc/1093/comm /proc/11/comm /proc/110/comm /proc/110204/comm /proc/110227/comm /proc/110586/comm /proc/110599/comm /proc/110600/comm /proc/111/comm /proc/111715/comm /proc/111740/comm /proc/111874/comm /proc/111897/comm /proc/111981/comm /proc/112/comm /proc/112208/comm /proc/112596/comm /proc/112598/comm /proc/113/comm /proc/113393/comm /proc/113412/comm /proc/113625/comm /proc/113702/comm /proc/113725/comm /proc/113927/comm /proc/113944/comm /proc/113950/comm /proc/114/comm /proc/114000/comm /proc/114001/comm /proc/114011/comm /proc/114078/comm /proc/115/comm /proc/115526/comm /proc/115551/comm /proc/115572/comm /proc/115601/comm /proc/116/comm /proc/116197/comm /proc/117/comm /proc/119339/comm /proc/119419/comm /proc/12/comm /proc/120286/comm /proc/120287/comm /proc/120451/comm /proc/121856/comm /proc/121952/comm /proc/12211/comm /proc/12243/comm /proc/12288/comm /proc/123081/comm /proc/12324/comm /proc/12337/comm /proc/125478/comm /proc/125495/comm /proc/125496/comm /proc/12575/comm /proc/12609/comm /proc/12665/comm /proc/12690/comm /proc/12709/comm /proc/127179/comm /proc/128630/comm /proc/128653/comm /proc/128668/comm /proc/128691/comm /proc/129206/comm /proc/129724/comm /proc/129980/comm /proc/13/comm /proc/131284/comm /proc/131307/comm /proc/131434/comm /proc/131639/comm /proc/14/comm /proc/1424/comm /proc/143941/comm /proc/145171/comm /proc/147900/comm /proc/148324/comm /proc/148386/comm /proc/148410/comm /proc/148411/comm /proc/149745/comm /proc/149746/comm /proc/15/comm /proc/1529/comm /proc/1530/comm /proc/1531/comm /proc/1532/comm /proc/1536/comm /proc/156818/comm /proc/156819/comm /proc/156821/comm /proc/156822/comm /proc/156956/comm /proc/157537/comm /proc/157561/comm /proc/157707/comm /proc/157867/comm /proc/157959/comm /proc/157995/comm /proc/158012/comm /proc/158046/comm /proc/158047/comm /proc/158048/comm /proc/158049/comm /proc/158362/comm /proc/158696/comm /proc/158719/comm /proc/159450/comm /proc/159465/comm /proc/159470/comm /proc/159475/comm /proc/159805/comm /proc/159840/comm /proc/159855/comm /proc/159884/comm /proc/16/comm /proc/160063/comm /proc/160064/comm /proc/160097/comm /proc/160123/comm /proc/160202/comm /proc/160222/comm /proc/1603/comm /proc/160428/comm /proc/160450/comm /proc/160489/comm /proc/160512/comm /proc/1607/comm /proc/160719/comm /proc/160849/comm /proc/161043/comm /proc/161048/comm /proc/161488/comm /proc/161494/comm /proc/161572/comm /proc/161595/comm /proc/1616/comm /proc/161878/comm /proc/161895/comm /proc/161901/comm /proc/161949/comm /proc/161950/comm /proc/161960/comm /proc/162187/comm /proc/163691/comm /proc/163807/comm /proc/163875/comm /proc/163972/comm /proc/163999/comm /proc/164013/comm /proc/164049/comm /proc/164212/comm /proc/164235/comm /proc/164254/comm /proc/164299/comm /proc/164382/comm /proc/164448/comm /proc/164472/comm /proc/164878/comm /proc/164901/comm /proc/165/comm /proc/165119/comm /proc/16526/comm /proc/166/comm /proc/167/comm /proc/168/comm /proc/169/comm /proc/169669/comm /proc/169670/comm /proc/169901/comm /proc/170/comm /proc/170094/comm /proc/170556/comm /proc/170597/comm /proc/171/comm /proc/171949/comm /proc/171957/comm /proc/172/comm /proc/172348/comm /proc/172587/comm /proc/173/comm /proc/173209/comm /proc/173299/comm /proc/173300/comm /proc/175/comm /proc/175445/comm /proc/175486/comm /proc/175487/comm /proc/175568/comm /proc/175581/comm /proc/175582/comm /proc/176170/comm /proc/176171/comm /proc/176628/comm /proc/176630/comm /proc/176641/comm /proc/176643/comm /proc/177/comm /proc/177356/comm /proc/177365/comm /proc/177445/comm /proc/177469/comm /proc/177717/comm /proc/177735/comm /proc/177741/comm /proc/177788/comm /proc/177789/comm /proc/177799/comm /proc/178/comm /proc/178041/comm /proc/179260/comm /proc/179262/comm /proc/179338/comm /proc/179349/comm /proc/179370/comm /proc/179407/comm /proc/179498/comm /proc/179521/comm /proc/179709/comm /proc/179733/comm /proc/179866/comm /proc/179898/comm /proc/18/comm /proc/180363/comm /proc/180394/comm /proc/180441/comm /proc/180480/comm /proc/180493/comm /proc/181/comm /proc/183/comm /proc/183575/comm /proc/183588/comm /proc/183987/comm /proc/184079/comm /proc/184304/comm /proc/184305/comm /proc/184308/comm /proc/185/comm /proc/185650/comm /proc/185688/comm /proc/18570/comm /proc/185710/comm /proc/185734/comm /proc/18591/comm /proc/186/comm /proc/186417/comm /proc/186511/comm /proc/186623/comm /proc/186653/comm /proc/18674/comm /proc/186749/comm /proc/186759/comm /proc/18697/comm /proc/187/comm /proc/18711/comm /proc/187447/comm /proc/188/comm /proc/189/comm /proc/189501/comm /proc/189502/comm /proc/189503/comm /proc/189635/comm /proc/189851/comm /proc/189885/comm /proc/189886/comm /proc/189899/comm /proc/189912/comm /proc/189913/comm /proc/19/comm /proc/190/comm /proc/190344/comm /proc/190700/comm /proc/190702/comm /proc/190953/comm /proc/191/comm /proc/191039/comm /proc/191283/comm /proc/191299/comm /proc/191346/comm /proc/191376/comm /proc/191586/comm /proc/191591/comm /proc/191615/comm /proc/191616/comm /proc/191617/comm /proc/192/comm /proc/193/comm /proc/194/comm /proc/2/comm /proc/20/comm /proc/21/comm /proc/213/comm /proc/21514/comm /proc/21573/comm /proc/21574/comm /proc/21587/comm /proc/216/comm /proc/217/comm /proc/22/comm /proc/220/comm /proc/222/comm /proc/227/comm /proc/24/comm /proc/24849/comm /proc/25/comm /proc/25119/comm /proc/25136/comm /proc/25160/comm /proc/25173/comm /proc/26/comm /proc/269/comm /proc/27/comm /proc/28/comm /proc/289/comm /proc/291/comm /proc/293/comm /proc/294/comm /proc/29636/comm /proc/29910/comm /proc/29927/comm /proc/29951/comm /proc/29963/comm /proc/3/comm /proc/30/comm /proc/31/comm /proc/313/comm /proc/314/comm /proc/32/comm /proc/33/comm /proc/34/comm /proc/34475/comm /proc/34749/comm /proc/34766/comm /proc/34791/comm /proc/34803/comm /proc/351/comm /proc/358/comm /proc/36/comm /proc/37/comm /proc/370/comm /proc/37985/comm /proc/37987/comm /proc/38/comm /proc/386/comm /proc/39/comm /proc/392/comm /proc/397/comm /proc/399/comm /proc/4/comm /proc/40/comm /proc/401/comm /proc/40352/comm /proc/40383/comm /proc/40397/comm /proc/40421/comm /proc/40437/comm /proc/40438/comm /proc/40476/comm /proc/40494/comm /proc/40513/comm /proc/40526/comm /proc/40589/comm /proc/40626/comm /proc/40627/comm /proc/40650/comm /proc/40765/comm /proc/40823/comm /proc/40964/comm /proc/40988/comm /proc/41013/comm /proc/41719/comm /proc/41743/comm /proc/41769/comm /proc/41787/comm /proc/42/comm /proc/42018/comm /proc/42228/comm /proc/42318/comm /proc/42646/comm /proc/43/comm /proc/43158/comm /proc/43184/comm /proc/43233/comm /proc/43467/comm /proc/43490/comm /proc/43511/comm /proc/43541/comm /proc/43556/comm /proc/43601/comm /proc/43942/comm /proc/43967/comm /proc/44/comm /proc/44192/comm /proc/44426/comm /proc/44449/comm /proc/44470/comm /proc/44507/comm /proc/44559/comm /proc/44586/comm /proc/44664/comm /proc/44707/comm /proc/44761/comm /proc/44910/comm /proc/45/comm /proc/451/comm /proc/454/comm /proc/46/comm /proc/46938/comm /proc/46961/comm /proc/47102/comm /proc/47128/comm /proc/47309/comm /proc/47321/comm /proc/47356/comm /proc/47421/comm /proc/47804/comm /proc/47828/comm /proc/47901/comm /proc/47925/comm /proc/48/comm /proc/48055/comm /proc/48239/comm /proc/48262/comm /proc/48314/comm /proc/48429/comm /proc/48572/comm /proc/48599/comm /proc/489/comm /proc/48990/comm /proc/49/comm /proc/49013/comm /proc/49126/comm /proc/49315/comm /proc/49408/comm /proc/49475/comm /proc/49574/comm /proc/49613/comm /proc/5/comm /proc/50/comm /proc/504/comm /proc/51/comm /proc/51376/comm /proc/51400/comm /proc/51582/comm /proc/51606/comm /proc/51647/comm /proc/51803/comm /proc/51967/comm /proc/52/comm /proc/521/comm /proc/52100/comm /proc/52142/comm /proc/522/comm /proc/54/comm /proc/55/comm /proc/55784/comm /proc/56/comm /proc/56029/comm /proc/56053/comm /proc/56714/comm /proc/56744/comm /proc/56746/comm /proc/56777/comm /proc/56794/comm /proc/56827/comm /proc/57/comm /proc/57025/comm /proc/57048/comm /proc/57098/comm /proc/57137/comm /proc/57169/comm /proc/57263/comm /proc/57276/comm /proc/58/comm /proc/6/comm /proc/60/comm /proc/61/comm /proc/61109/comm /proc/61111/comm /proc/61399/comm /proc/614/comm /proc/61442/comm /proc/61489/comm /proc/61514/comm /proc/61530/comm /proc/61562/comm /proc/61576/comm /proc/61600/comm /proc/61794/comm /proc/618/comm /proc/62/comm /proc/620/comm /proc/62061/comm /proc/62320/comm /proc/62482/comm /proc/62507/comm /proc/62637/comm /proc/62638/comm /proc/62640/comm /proc/62642/comm /proc/62657/comm /proc/627/comm /proc/62767/comm /proc/62791/comm /proc/628/comm /proc/62892/comm /proc/62924/comm /proc/63/comm /proc/63302/comm /proc/63329/comm /proc/63356/comm /proc/63381/comm /proc/63400/comm /proc/63424/comm /proc/63811/comm /proc/63924/comm /proc/63950/comm /proc/64/comm /proc/64292/comm /proc/643/comm /proc/64316/comm /proc/64402/comm /proc/64421/comm /proc/64422/comm /proc/64423/comm /proc/64424/comm /proc/64425/comm /proc/64436/comm /proc/64461/comm /proc/64842/comm /proc/64909/comm /proc/650/comm /proc/65034/comm /proc/65059/comm /proc/65442/comm /proc/65454/comm /proc/65502/comm /proc/65570/comm /proc/65625/comm /proc/65867/comm /proc/65891/comm /proc/65952/comm /proc/66/comm /proc/66168/comm /proc/66210/comm /proc/66255/comm /proc/66296/comm /proc/66330/comm /proc/66578/comm /proc/66629/comm /proc/66671/comm /proc/66730/comm /proc/66901/comm /proc/67/comm /proc/67091/comm /proc/67110/comm /proc/67130/comm /proc/67245/comm /proc/67451/comm /proc/67473/comm /proc/68/comm /proc/68111/comm /proc/68129/comm /proc/68135/comm /proc/68182/comm /proc/68183/comm /proc/68194/comm /proc/68257/comm /proc/69/comm /proc/69659/comm /proc/69682/comm /proc/69818/comm /proc/70/comm /proc/705/comm /proc/708/comm /proc/709/comm /proc/72/comm /proc/723/comm /proc/73/comm /proc/73126/comm /proc/73140/comm /proc/73141/comm /proc/73142/comm /proc/73143/comm /proc/73144/comm /proc/73147/comm /proc/73149/comm /proc/73151/comm /proc/73154/comm /proc/73155/comm /proc/73156/comm /proc/73157/comm /proc/73158/comm /proc/73159/comm /proc/74/comm /proc/75/comm /proc/76/comm /proc/78/comm /proc/79/comm /proc/79023/comm /proc/79047/comm /proc/79298/comm /proc/79315/comm /proc/79321/comm /proc/79379/comm /proc/79380/comm /proc/79390/comm /proc/79454/comm /proc/8/comm /proc/80/comm /proc/80629/comm /proc/80652/comm /proc/81/comm /proc/82/comm /proc/84/comm /proc/85/comm /proc/85857/comm /proc/85870/comm /proc/86/comm /proc/86536/comm /proc/86610/comm /proc/868/comm /proc/87/comm /proc/87424/comm /proc/88/comm /proc/9/comm /proc/90/comm /proc/90668/comm /proc/90730/comm /proc/91/comm /proc/91792/comm /proc/92/comm /proc/9214/comm /proc/9231/comm /proc/9247/comm /proc/92500/comm /proc/92726/comm /proc/92879/comm /proc/92903/comm /proc/93/comm /proc/93164/comm /proc/93195/comm /proc/93201/comm /proc/93270/comm /proc/93271/comm /proc/93281/comm /proc/9329/comm /proc/93590/comm /proc/94/comm /proc/96/comm /proc/96656/comm /proc/97/comm /proc/97185/comm /proc/97210/comm /proc/97233/comm /proc/97275/comm /proc/97367/comm /proc/97471/comm /proc/98/comm /proc/98514/comm /proc/99/comm /proc/9946/comm /proc/self/comm /proc/thread-self/comm
+ '[' -n '' ']'
+ rm -f /var/run/libvirtd.pid
+ [[ -c /dev/kvm ]]
+ chmod 660 /dev/kvm
+ chown root:kvm /dev/kvm
+ CGROUPS=
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/blkio ']'
+ grep -w blkio /sys/fs/cgroup/cgroup.controllers
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/cpu ']'
+ grep -w cpu /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=cpu,
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/devices ']'
+ grep -w devices /sys/fs/cgroup/cgroup.controllers
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/freezer ']'
+ grep -w freezer /sys/fs/cgroup/cgroup.controllers
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/hugetlb ']'
+ grep -w hugetlb /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=hugetlb,
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/memory ']'
+ grep -w memory /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=memory,
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/net_cls ']'
+ grep -w net_cls /sys/fs/cgroup/cgroup.controllers
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/perf_event ']'
+ grep -w perf_event /sys/fs/cgroup/cgroup.controllers
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/rdma ']'
+ grep -w rdma /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=rdma,
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/misc ']'
+ grep -w misc /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=misc,
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/pids ']'
+ grep -w pids /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=pids,
+ cgcreate -g cpu,hugetlb,memory,rdma,misc,pids:/osh-libvirt
++ cat /proc/meminfo
++ grep HugePages_Total
++ tr -cd '[:digit:]'
+ hp_count=0
+ '[' 00 -gt 0 ']'
+ '[' -n 457eb676-33da-42ec-9a8c-9293d545c337 ']'
+ cgexec -g cpu,hugetlb,memory,rdma,misc,pids:/osh-libvirt systemd-run --scope --slice=system libvirtd --listen
++ mktemp --suffix .xml
+ tmpsecret=/tmp/tmp.ukZPj0YEyN.xml
+ '[' -n '' ']'
+ trap cleanup EXIT
+ TIMEOUT=60
+ [[ ! -f /var/run/libvirtd.pid ]]
+ [[ 60 -gt 0 ]]
+ let TIMEOUT-=1
+ sleep 1
Running as unit: run-r000d5dd583134445971d6ada5c706ac4.scope; invocation ID: cb3d57a0580e4eebbc33aa982b32092d
+ [[ ! -f /var/run/libvirtd.pid ]]
+ TIMEOUT=10
+ [[ ! -e /var/run/libvirt/libvirt-sock ]]
+ '[' -z '' ']'
+ '[' -n cinder ']'
++ awk '/key/{print $3}' /etc/ceph/ceph.client.cinder.keyring
+ CEPH_CINDER_KEYRING=AQAKEhpq0K8XJhAAiXgV/TPemqV5ag9hixDuOg==
+ '[' -n cinder ']'
+ create_virsh_libvirt_secret cinder 457eb676-33da-42ec-9a8c-9293d545c337 AQAKEhpq0K8XJhAAiXgV/TPemqV5ag9hixDuOg==
+ sec_user=cinder
+ sec_uuid=457eb676-33da-42ec-9a8c-9293d545c337
+ sec_ceph_keyring=AQAKEhpq0K8XJhAAiXgV/TPemqV5ag9hixDuOg==
+ cat
+ virsh secret-define --file /tmp/tmp.ukZPj0YEyN.xml
Secret 457eb676-33da-42ec-9a8c-9293d545c337 created

+ virsh secret-set-value --secret 457eb676-33da-42ec-9a8c-9293d545c337 --base64 AQAKEhpq0K8XJhAAiXgV/TPemqV5ag9hixDuOg==
error: Passing secret value as command-line argument is insecure!
Secret value set

+ '[' -n '' ']'
+ '[' -n '' ']'
+ cleanup
+ rm -f /tmp/tmp.ukZPj0YEyN.xml
+ '[' -n '' ']'
++ cat /var/run/libvirtd.pid
+ LIBVIRTD_PID=191640
+ kill 191640
+ tail --pid=191640 -f /dev/null
+ cgexec -g cpu,hugetlb,memory,rdma,misc,pids:/osh-libvirt systemd-run --scope --slice=system libvirtd --listen
Running as unit: run-rbe0e74905e044596bafb0c8016e736f9.scope; invocation ID: ef1befe2d6c04772ae838cbbb1051fe0