openstack cpu pinning

为了减少CPU竞争，提高CPU cache命中率，可以把guest的vcpu pin到host的物理CPU上。

在openstack中，可以添加以下到flavor extra specs：

hw:cpu_policy=shared|dedicated
hw:cpu_threads_policy=avoid|separate|isolate|prefer

如果hw:cpu_policy=shared，则和现有的默认vcpu放置一样，有NUMA来定义vcpu的放置，即没有显示的vcpu pin。

如果hw:cpu_policy=dedicated则显示的vcpu pin。pin的policy有：

• hw:cpu_threads_policy = avoid
  guest不会调度到有超线程的host上。
  
• hw:cpu_threads_policy = separate
  每个vcpu到放置到不同的core。
  
• hw:cpu_threads_policy = isolate
  每个vcpu到放置到不同的core上，并且独占这个core。其他vcpu不能再放置到该core上。
  
• hw:cpu_threads_policy = prefer
  guest的vcpu放置到同一core上，让vcpu成为siblings thread。 
  

image metadata properties也可以用来设置放置policy：

• hw_cpu_threads_policy=avoid|separate|isolate|prefer

为了使用vcpu pin，必须使用host aggregates，用来区分 hw:cpu_policy=shared/dedicated。

但同一host agg可以同时支持dedicated RAM (via huge pages) and dedicated CPUs (via pinning).

https://specs.openstack.org/openstack/nova-specs/specs/juno/approved/virt-driver-cpu-pinning.html

https://github.com/openstack/nova-specs/blob/master/specs/juno/implemented/virt-driver-numa-placement.rst