如何使用单个命令在hadoop中创建多个目录?

时间:2016-11-23 10:32:39

标签: linux hadoop hadoop2

我想每年创建365个文件夹。我在下面添加了我试过的参考资料。请建议我在hadoop 2中一次创建多个文件夹。

hdfs dfs -mkdir /mnt/hadoop/Ram/Birla/home/inside/{dt=2016-11-01,dt=2016-11-02,dt=2016-11-03,dt=2016-11-04,dt=2016-11-05,dt=2016-11-06,dt=2016-11-07,dt=2016-11-08,dt=2016-11-09,dt=2016-11-10,dt=2016-11-11,dt=2016-11-12,dt=2016-11-13,dt=2016-11-14,dt=2016-11-15,dt=2016-11-16,dt=2016-11-17,dt=2016-11-18,dt=2016-11-19,dt=2016-11-20,dt=2016-11-21,dt=2016-11-22,dt=2016-11-23}

1 个答案:

答案 0 :(得分:2)

您可以编写一个shell脚本,在其中以“2016-01-01”上的变量开头,并在循环中将其递增直到年末,同时在循环内执行命令。像这样:

FIRST_DAY="2016-01-01"
for i in {0..364}
do
   DAY=$(date +%m-%d-%Y -d "$FIRST_DAY + $i day")
   hdfs dfs -mkdir /mnt/hadoop/Ram/Birla/home/inside/$DAY
done

请参阅How to increment a date in a bash script

相关问题