Apache Sparkに対するKubernetesのNUMAノードを意識したリソース割り当ての性能効果

2024年12月11日にリリースされたKubernetes 1.32でMemory ManagerがGA版になりました。
Memory Managerは同一のNUMAノードのCPU、MemoryをPodに割り当てることで、性能を引き出すための機能です。

本セッションではこのNUMAノードを意識したリソース割り当てが、Apache SparkのJob対してどのような性能効果があるか測定した結果をご紹介します。