参与者:Ayush Saxena、郑振宇、刘胜
背景:2019年,本团队在 Apache Hadoop 开源社区上游完成了 ARM 平台适配并使能了 Hadoop ARM CI 以便保证 Hadoop 在后续的版本开发中均保证 ARM 平台适配,并且团队成员正在推动 Hadoop 开源社区发布 ARM 平台的软件包,以便用户可以直接下载使用。在 ARM 的基本适配工作完成后,性能调优成了我们下一步的工作重心。
近期,华为计算开源生态部技术团队进行了 Apache Hadoop 在 ARM 及 X86 平台上的初步性能比拼测试及简要分析,可以为关心 ARM 数据中心大数据场景的读者提供一些参考。