日期: 2021 年 12 月 6 日

1 篇文章

Run spark Hibench Test Container on yarn
Hadoop2.6新增了Docker Container Executor,这样可以用yarn来管理docker容器,本文记录了如何使用spark来运行Hibench相关的数据集 环境: hadoop 3.2 docker 18.06.3-ce 这里先要有hdfs的,没有配置hdfs网上有很多教程,就不在这里说了 配置yarn-site.xml和c…
Theme Argon
本网站自 2020-12-24 12:00:00 起已运行