+ wait_for_file /etc/pki/CA/cacert.pem
+ local file=/etc/pki/CA/cacert.pem
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ sleep 1
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ sleep 1
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ sleep 1
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ sleep 1
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ sleep 1
+ '[' '!' -f /etc/pki/CA/cacert.pem ']'
+ wait_for_file /etc/pki/qemu/ca-cert.pem
+ local file=/etc/pki/qemu/ca-cert.pem
+ '[' '!' -f /etc/pki/qemu/ca-cert.pem ']'
+ wait_for_file /etc/pki/libvirt/servercert.pem
+ local file=/etc/pki/libvirt/servercert.pem
+ '[' '!' -f /etc/pki/libvirt/servercert.pem ']'
+ wait_for_file /etc/pki/libvirt/clientcert.pem
+ local file=/etc/pki/libvirt/clientcert.pem
+ '[' '!' -f /etc/pki/libvirt/clientcert.pem ']'
+ wait_for_file /etc/pki/qemu/server-cert.pem
+ local file=/etc/pki/qemu/server-cert.pem
+ '[' '!' -f /etc/pki/qemu/server-cert.pem ']'
+ wait_for_file /etc/pki/qemu/client-cert.pem
+ local file=/etc/pki/qemu/client-cert.pem
+ '[' '!' -f /etc/pki/qemu/client-cert.pem ']'
+ wait_for_file /etc/pki/libvirt/private/serverkey.pem
+ local file=/etc/pki/libvirt/private/serverkey.pem
+ '[' '!' -f /etc/pki/libvirt/private/serverkey.pem ']'
+ wait_for_file /etc/pki/libvirt/private/clientkey.pem
+ local file=/etc/pki/libvirt/private/clientkey.pem
+ '[' '!' -f /etc/pki/libvirt/private/clientkey.pem ']'
+ wait_for_file /etc/pki/qemu/server-key.pem
+ local file=/etc/pki/qemu/server-key.pem
+ '[' '!' -f /etc/pki/qemu/server-key.pem ']'
+ wait_for_file /etc/pki/qemu/client-key.pem
+ local file=/etc/pki/qemu/client-key.pem
+ '[' '!' -f /etc/pki/qemu/client-key.pem ']'
+ wait_for_file /etc/pki/libvirt-vnc/ca-cert.pem
+ local file=/etc/pki/libvirt-vnc/ca-cert.pem
+ '[' '!' -f /etc/pki/libvirt-vnc/ca-cert.pem ']'
+ wait_for_file /etc/pki/libvirt-vnc/server-cert.pem
+ local file=/etc/pki/libvirt-vnc/server-cert.pem
+ '[' '!' -f /etc/pki/libvirt-vnc/server-cert.pem ']'
+ wait_for_file /etc/pki/libvirt-vnc/server-key.pem
+ local file=/etc/pki/libvirt-vnc/server-key.pem
+ '[' '!' -f /etc/pki/libvirt-vnc/server-key.pem ']'
++ grep -w libvirtd
++ cat /proc/1/comm /proc/10/comm /proc/100/comm /proc/100231/comm /proc/100278/comm /proc/100300/comm /proc/100331/comm /proc/100528/comm /proc/100674/comm /proc/101366/comm /proc/102/comm /proc/102330/comm /proc/102332/comm /proc/103/comm /proc/10321/comm /proc/103416/comm /proc/103419/comm /proc/10344/comm /proc/104/comm /proc/104252/comm /proc/105/comm /proc/105368/comm /proc/106/comm /proc/106343/comm /proc/107785/comm /proc/108/comm /proc/10829/comm /proc/10830/comm /proc/108467/comm /proc/108589/comm /proc/1086/comm /proc/109/comm /proc/11/comm /proc/110/comm /proc/111/comm /proc/112/comm /proc/113/comm /proc/114/comm /proc/114223/comm /proc/114246/comm /proc/114542/comm /proc/114585/comm /proc/114597/comm /proc/114598/comm /proc/115/comm /proc/115909/comm /proc/115933/comm /proc/115999/comm /proc/116/comm /proc/116024/comm /proc/116329/comm /proc/116515/comm /proc/116517/comm /proc/116936/comm /proc/117/comm /proc/117436/comm /proc/117689/comm /proc/117875/comm /proc/117899/comm /proc/118127/comm /proc/118147/comm /proc/118153/comm /proc/118339/comm /proc/118340/comm /proc/118350/comm /proc/118467/comm /proc/119549/comm /proc/119779/comm /proc/119806/comm /proc/119939/comm /proc/119973/comm /proc/12/comm /proc/12229/comm /proc/122479/comm /proc/12260/comm /proc/12310/comm /proc/12343/comm /proc/12356/comm /proc/125267/comm /proc/12590/comm /proc/12622/comm /proc/126533/comm /proc/12676/comm /proc/12702/comm /proc/12721/comm /proc/127590/comm /proc/128636/comm /proc/13/comm /proc/130257/comm /proc/130270/comm /proc/130271/comm /proc/131899/comm /proc/14/comm /proc/1417/comm /proc/143494/comm /proc/143520/comm /proc/143627/comm /proc/143651/comm /proc/144154/comm /proc/144623/comm /proc/144884/comm /proc/146389/comm /proc/146413/comm /proc/146913/comm /proc/147080/comm /proc/149096/comm /proc/149821/comm /proc/15/comm /proc/150592/comm /proc/150643/comm /proc/151803/comm /proc/151892/comm /proc/152554/comm /proc/152568/comm /proc/152569/comm /proc/1535/comm /proc/1536/comm /proc/1537/comm /proc/1538/comm /proc/153967/comm /proc/153968/comm /proc/1542/comm /proc/16/comm /proc/1609/comm /proc/161108/comm /proc/161109/comm /proc/161111/comm /proc/161112/comm /proc/1613/comm /proc/161364/comm /proc/161953/comm /proc/161978/comm /proc/162059/comm /proc/1622/comm /proc/162401/comm /proc/162441/comm /proc/162475/comm /proc/162489/comm /proc/162521/comm /proc/162522/comm /proc/162524/comm /proc/162525/comm /proc/163064/comm /proc/163094/comm /proc/163874/comm /proc/163882/comm /proc/163883/comm /proc/163898/comm /proc/164179/comm /proc/164207/comm /proc/164282/comm /proc/164305/comm /proc/164400/comm /proc/164419/comm /proc/164456/comm /proc/164479/comm /proc/164520/comm /proc/164538/comm /proc/164626/comm /proc/164715/comm /proc/164893/comm /proc/164919/comm /proc/165/comm /proc/165045/comm /proc/165346/comm /proc/165353/comm /proc/165938/comm /proc/166/comm /proc/166077/comm /proc/166105/comm /proc/166215/comm /proc/166251/comm /proc/166271/comm /proc/166277/comm /proc/166444/comm /proc/166445/comm /proc/166455/comm /proc/166530/comm /proc/167/comm /proc/168/comm /proc/168262/comm /proc/168312/comm /proc/168457/comm /proc/168582/comm /proc/168607/comm /proc/168643/comm /proc/168681/comm /proc/168779/comm /proc/168821/comm /proc/168888/comm /proc/168927/comm /proc/168951/comm /proc/168996/comm /proc/169/comm /proc/169032/comm /proc/169507/comm /proc/169533/comm /proc/169850/comm /proc/169889/comm /proc/170/comm /proc/171/comm /proc/171549/comm /proc/172/comm /proc/173/comm /proc/174554/comm /proc/175/comm /proc/175418/comm /proc/175482/comm /proc/176726/comm /proc/176792/comm /proc/177/comm /proc/177251/comm /proc/178126/comm /proc/178142/comm /proc/178578/comm /proc/179/comm /proc/179928/comm /proc/179990/comm /proc/179994/comm /proc/18/comm /proc/180/comm /proc/180022/comm /proc/180467/comm /proc/180501/comm /proc/180502/comm /proc/180598/comm /proc/180631/comm /proc/180632/comm /proc/180706/comm /proc/180707/comm /proc/180708/comm /proc/181278/comm /proc/181303/comm /proc/181439/comm /proc/181499/comm /proc/181500/comm /proc/181633/comm /proc/181634/comm /proc/181679/comm /proc/181681/comm /proc/182/comm /proc/182417/comm /proc/182429/comm /proc/182503/comm /proc/182529/comm /proc/182713/comm /proc/182729/comm /proc/182735/comm /proc/182848/comm /proc/182849/comm /proc/182859/comm /proc/182923/comm /proc/183/comm /proc/184/comm /proc/184534/comm /proc/184586/comm /proc/184615/comm /proc/184623/comm /proc/184665/comm /proc/184675/comm /proc/184801/comm /proc/184831/comm /proc/184930/comm /proc/184950/comm /proc/184974/comm /proc/185/comm /proc/185002/comm /proc/185070/comm /proc/185088/comm /proc/185635/comm /proc/185649/comm /proc/186/comm /proc/18653/comm /proc/187/comm /proc/18775/comm /proc/18795/comm /proc/188/comm /proc/188090/comm /proc/18816/comm /proc/18845/comm /proc/18862/comm /proc/188982/comm /proc/189010/comm /proc/189044/comm /proc/189664/comm /proc/189783/comm /proc/189807/comm /proc/19/comm /proc/190/comm /proc/190407/comm /proc/190474/comm /proc/190540/comm /proc/190569/comm /proc/190646/comm /proc/190653/comm /proc/191216/comm /proc/192717/comm /proc/192718/comm /proc/192719/comm /proc/192720/comm /proc/193013/comm /proc/193764/comm /proc/194548/comm /proc/194550/comm /proc/194923/comm /proc/194996/comm /proc/195266/comm /proc/195282/comm /proc/195354/comm /proc/195381/comm /proc/195600/comm /proc/195601/comm /proc/195616/comm /proc/195663/comm /proc/195667/comm /proc/195710/comm /proc/195725/comm /proc/195726/comm /proc/195727/comm /proc/2/comm /proc/20/comm /proc/202/comm /proc/203/comm /proc/207/comm /proc/21/comm /proc/215/comm /proc/21727/comm /proc/21795/comm /proc/21796/comm /proc/21810/comm /proc/219/comm /proc/22/comm /proc/220/comm /proc/225/comm /proc/24/comm /proc/247/comm /proc/25/comm /proc/25089/comm /proc/25358/comm /proc/25374/comm /proc/25399/comm /proc/25411/comm /proc/26/comm /proc/266/comm /proc/27/comm /proc/28/comm /proc/283/comm /proc/287/comm /proc/289/comm /proc/290/comm /proc/29583/comm /proc/29856/comm /proc/29874/comm /proc/29900/comm /proc/29913/comm /proc/3/comm /proc/30/comm /proc/309/comm /proc/31/comm /proc/310/comm /proc/314/comm /proc/315/comm /proc/316/comm /proc/317/comm /proc/318/comm /proc/319/comm /proc/32/comm /proc/320/comm /proc/322/comm /proc/323/comm /proc/33/comm /proc/34/comm /proc/34402/comm /proc/34678/comm /proc/34696/comm /proc/34722/comm /proc/34734/comm /proc/35708/comm /proc/36/comm /proc/362/comm /proc/37/comm /proc/38/comm /proc/382/comm /proc/39/comm /proc/39194/comm /proc/39196/comm /proc/39295/comm /proc/39315/comm /proc/39359/comm /proc/39387/comm /proc/39404/comm /proc/395/comm /proc/4/comm /proc/40/comm /proc/400/comm /proc/41893/comm /proc/41910/comm /proc/41944/comm /proc/41967/comm /proc/41972/comm /proc/41977/comm /proc/42/comm /proc/42010/comm /proc/42042/comm /proc/42059/comm /proc/42061/comm /proc/42154/comm /proc/42156/comm /proc/42174/comm /proc/42203/comm /proc/42294/comm /proc/42359/comm /proc/42457/comm /proc/42481/comm /proc/42506/comm /proc/43/comm /proc/43257/comm /proc/43277/comm /proc/43299/comm /proc/43319/comm /proc/43553/comm /proc/43764/comm /proc/44/comm /proc/44188/comm /proc/44431/comm /proc/44605/comm /proc/44628/comm /proc/44653/comm /proc/45/comm /proc/45049/comm /proc/45072/comm /proc/45087/comm /proc/45112/comm /proc/45143/comm /proc/45171/comm /proc/45508/comm /proc/45532/comm /proc/45635/comm /proc/45683/comm /proc/459/comm /proc/46/comm /proc/46026/comm /proc/46049/comm /proc/46062/comm /proc/46089/comm /proc/46098/comm /proc/46124/comm /proc/46245/comm /proc/46289/comm /proc/46334/comm /proc/48/comm /proc/48298/comm /proc/48330/comm /proc/48394/comm /proc/48432/comm /proc/48694/comm /proc/48710/comm /proc/48769/comm /proc/48815/comm /proc/49/comm /proc/49143/comm /proc/49168/comm /proc/49246/comm /proc/49269/comm /proc/49317/comm /proc/49437/comm /proc/49624/comm /proc/49647/comm /proc/49766/comm /proc/49913/comm /proc/49937/comm /proc/5/comm /proc/50/comm /proc/50306/comm /proc/50331/comm /proc/50459/comm /proc/50516/comm /proc/50613/comm /proc/50642/comm /proc/50709/comm /proc/50782/comm /proc/51/comm /proc/51805/comm /proc/52/comm /proc/522/comm /proc/52588/comm /proc/52611/comm /proc/52776/comm /proc/52882/comm /proc/52905/comm /proc/52967/comm /proc/53074/comm /proc/53264/comm /proc/54/comm /proc/55/comm /proc/56/comm /proc/57/comm /proc/57850/comm /proc/57873/comm /proc/58/comm /proc/58647/comm /proc/58674/comm /proc/58706/comm /proc/58733/comm /proc/58750/comm /proc/58777/comm /proc/58936/comm /proc/58961/comm /proc/59119/comm /proc/59164/comm /proc/59207/comm /proc/59332/comm /proc/6/comm /proc/60/comm /proc/61/comm /proc/613/comm /proc/617/comm /proc/619/comm /proc/62/comm /proc/626/comm /proc/627/comm /proc/63/comm /proc/63684/comm /proc/63685/comm /proc/63686/comm /proc/63687/comm /proc/63688/comm /proc/63859/comm /proc/63913/comm /proc/64/comm /proc/641/comm /proc/64155/comm /proc/64179/comm /proc/64216/comm /proc/64240/comm /proc/64253/comm /proc/64278/comm /proc/64505/comm /proc/648/comm /proc/64847/comm /proc/65227/comm /proc/65262/comm /proc/65447/comm /proc/65481/comm /proc/65488/comm /proc/65490/comm /proc/65521/comm /proc/65522/comm /proc/65545/comm /proc/65616/comm /proc/65639/comm /proc/65699/comm /proc/65702/comm /proc/66/comm /proc/66002/comm /proc/66041/comm /proc/66042/comm /proc/66076/comm /proc/66151/comm /proc/66185/comm /proc/66448/comm /proc/66472/comm /proc/66702/comm /proc/66825/comm /proc/66848/comm /proc/67/comm /proc/67085/comm /proc/67109/comm /proc/67268/comm /proc/67420/comm /proc/67446/comm /proc/67447/comm /proc/67448/comm /proc/67449/comm /proc/67450/comm /proc/67727/comm /proc/67750/comm /proc/67807/comm /proc/67892/comm /proc/68/comm /proc/68267/comm /proc/68318/comm /proc/68489/comm /proc/68513/comm /proc/68618/comm /proc/68636/comm /proc/69/comm /proc/69060/comm /proc/69101/comm /proc/69141/comm /proc/69243/comm /proc/69300/comm /proc/69487/comm /proc/69757/comm /proc/69804/comm /proc/69833/comm /proc/69864/comm /proc/70/comm /proc/70069/comm /proc/70088/comm /proc/701/comm /proc/70194/comm /proc/70219/comm /proc/704/comm /proc/705/comm /proc/70587/comm /proc/70604/comm /proc/70610/comm /proc/70660/comm /proc/70661/comm /proc/70671/comm /proc/70826/comm /proc/718/comm /proc/72/comm /proc/72145/comm /proc/72202/comm /proc/73/comm /proc/74/comm /proc/75/comm /proc/75694/comm /proc/75730/comm /proc/75731/comm /proc/75732/comm /proc/75733/comm /proc/75734/comm /proc/75736/comm /proc/75737/comm /proc/75738/comm /proc/75739/comm /proc/75744/comm /proc/75745/comm /proc/75746/comm /proc/75747/comm /proc/75749/comm /proc/76/comm /proc/78/comm /proc/79/comm /proc/8/comm /proc/80/comm /proc/81/comm /proc/81762/comm /proc/81785/comm /proc/81943/comm /proc/81960/comm /proc/81966/comm /proc/82/comm /proc/82025/comm /proc/82026/comm /proc/82036/comm /proc/82212/comm /proc/83211/comm /proc/83235/comm /proc/84/comm /proc/84642/comm /proc/85/comm /proc/86/comm /proc/86107/comm /proc/863/comm /proc/87/comm /proc/88/comm /proc/88838/comm /proc/88850/comm /proc/89585/comm /proc/89610/comm /proc/90/comm /proc/90465/comm /proc/91/comm /proc/92/comm /proc/9219/comm /proc/9236/comm /proc/9252/comm /proc/93/comm /proc/9334/comm /proc/94/comm /proc/94977/comm /proc/96/comm /proc/96969/comm /proc/97/comm /proc/97116/comm /proc/97212/comm /proc/97439/comm /proc/97456/comm /proc/97462/comm /proc/97533/comm /proc/97535/comm /proc/97552/comm /proc/97805/comm /proc/98/comm /proc/99/comm /proc/9951/comm /proc/self/comm /proc/thread-self/comm
+ '[' -n '' ']'
+ rm -f /var/run/libvirtd.pid
+ [[ -c /dev/kvm ]]
+ chmod 660 /dev/kvm
+ chown root:kvm /dev/kvm
+ CGROUPS=
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/blkio ']'
+ grep -w blkio /sys/fs/cgroup/cgroup.controllers
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/cpu ']'
+ grep -w cpu /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=cpu,
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/devices ']'
+ grep -w devices /sys/fs/cgroup/cgroup.controllers
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/freezer ']'
+ grep -w freezer /sys/fs/cgroup/cgroup.controllers
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/hugetlb ']'
+ grep -w hugetlb /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=hugetlb,
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/memory ']'
+ grep -w memory /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=memory,
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/net_cls ']'
+ grep -w net_cls /sys/fs/cgroup/cgroup.controllers
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/perf_event ']'
+ grep -w perf_event /sys/fs/cgroup/cgroup.controllers
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/rdma ']'
+ grep -w rdma /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=rdma,
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/misc ']'
+ grep -w misc /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=misc,
+ for CGROUP in blkio cpu devices freezer hugetlb memory net_cls perf_event rdma misc pids
+ '[' -d /sys/fs/cgroup/pids ']'
+ grep -w pids /sys/fs/cgroup/cgroup.controllers
cpuset cpu io memory hugetlb pids rdma misc
+ CGROUPS+=pids,
+ cgcreate -g cpu,hugetlb,memory,rdma,misc,pids:/osh-libvirt
++ grep HugePages_Total
++ tr -cd '[:digit:]'
++ cat /proc/meminfo
+ hp_count=0
+ '[' 00 -gt 0 ']'
+ '[' -n 457eb676-33da-42ec-9a8c-9293d545c337 ']'
+ cgexec -g cpu,hugetlb,memory,rdma,misc,pids:/osh-libvirt systemd-run --scope --slice=system libvirtd --listen
++ mktemp --suffix .xml
+ tmpsecret=/tmp/tmp.LcHfvWPcE1.xml
+ '[' -n '' ']'
+ trap cleanup EXIT
+ TIMEOUT=60
+ [[ ! -f /var/run/libvirtd.pid ]]
+ [[ 60 -gt 0 ]]
+ let TIMEOUT-=1
+ sleep 1
Running as unit: run-r103512629a344196a9b277e450d7428b.scope; invocation ID: 8ee897448f2e410e9b2eb817e9601d96
+ [[ ! -f /var/run/libvirtd.pid ]]
+ TIMEOUT=10
+ [[ ! -e /var/run/libvirt/libvirt-sock ]]
+ '[' -z '' ']'
+ '[' -n cinder ']'
++ awk '/key/{print $3}' /etc/ceph/ceph.client.cinder.keyring
+ CEPH_CINDER_KEYRING=AQD2pbBqDxSuAxAAPRNR0BUkIFw3leONDRJS/w==
+ '[' -n cinder ']'
+ create_virsh_libvirt_secret cinder 457eb676-33da-42ec-9a8c-9293d545c337 AQD2pbBqDxSuAxAAPRNR0BUkIFw3leONDRJS/w==
+ sec_user=cinder
+ sec_uuid=457eb676-33da-42ec-9a8c-9293d545c337
+ sec_ceph_keyring=AQD2pbBqDxSuAxAAPRNR0BUkIFw3leONDRJS/w==
+ cat
+ virsh secret-define --file /tmp/tmp.LcHfvWPcE1.xml
Secret 457eb676-33da-42ec-9a8c-9293d545c337 created

+ virsh secret-set-value --secret 457eb676-33da-42ec-9a8c-9293d545c337 --base64 AQD2pbBqDxSuAxAAPRNR0BUkIFw3leONDRJS/w==
error: Passing secret value as command-line argument is insecure!
Secret value set

+ '[' -n '' ']'
+ '[' -n '' ']'
+ cleanup
+ rm -f /tmp/tmp.LcHfvWPcE1.xml
+ '[' -n '' ']'
++ cat /var/run/libvirtd.pid
+ LIBVIRTD_PID=195747
+ kill 195747
+ tail --pid=195747 -f /dev/null
+ cgexec -g cpu,hugetlb,memory,rdma,misc,pids:/osh-libvirt systemd-run --scope --slice=system libvirtd --listen
Running as unit: run-r89c05f5022b2452ab86a471718afe3f4.scope; invocation ID: 30f2aa6954b7440ebfcc1bd68b23766f