为了减少CPU竞争,提高CPU cache命中率,可以把guest的vcpu pin到host的物理CPU上。
在openstack中,可以添加以下到flavor extra specs:
hw:cpu_policy=shared|dedicated
hw:cpu_threads_policy=avoid|separate|isolate|prefer
如果hw:cpu_policy=shared,则和现有的默认vcpu放置一样,有NUMA来定义vcpu的放置,即没有显示的vcpu pin。
如果hw:cpu_policy=dedicated则显示的vcpu pin。pin的policy有:
- hw:cpu_threads_policy = avoid
guest不会调度到有超线程的host上。 - hw:cpu_threads_policy = separate
每个vcpu到放置到不同的core。 - hw:cpu_threads_policy = isolate
每个vcpu到放置到不同的core上,并且独占这个core。其他vcpu不能再放置到该core上。 - hw:cpu_threads_policy = prefer
guest的vcpu放置到同一core上,让vcpu成为siblings thread。
image metadata properties也可以用来设置放置policy:
- hw_cpu_threads_policy=avoid|separate|isolate|prefer
为了使用vcpu pin,必须使用host aggregates,用来区分 hw:cpu_policy=shared/dedicated。
但同一host agg可以同时支持dedicated RAM (via huge pages) and dedicated CPUs (via pinning).
https://specs.openstack.org/openstack/nova-specs/specs/juno/approved/virt-driver-cpu-pinning.html
https://github.com/openstack/nova-specs/blob/master/specs/juno/implemented/virt-driver-numa-placement.rst