大括号内的大括号(大括号) - gnu parallel / xargs / find

时间:2012-04-20 00:25:20

标签: regex bash shell parallel-processing curly-braces

使用GNU parallel(http://www.gnu.org/software/parallel/

我遇到括号(花括号)问题

我有四个文件列表:

file1.txt.super
file2.txt.super
file3.txt.super
file4.txt.super

如果我发出:ls * | parallel "mkdir ./{.}"

我得到了四个目录:

file1.txt
file2.txt
file3.txt
file4.txt

我的问题是,我怎样才能简单地返回四个目录:

file1
file2
file3
file4

我已阅读http://www.linuxjournal.com/article/8919,但无法使用gnu parallel实现这些正则表达式。我想我在这里遗漏了一些东西。此外,任何具有更复杂的正则表达式的例子都将非常受欢迎。

6 个答案:

答案 0 :(得分:6)

是的,看来你在这里遗漏了一些东西linuxjournal文章解释了shell参数扩展的功能。这些大括号(总是以$开头)与parallel实用程序的默认替换字符串无关,后者恰好使用大括号。 parallel documentation显示命令行选项允许使用任意字符串而不是括号括起的默认值。

例如,您示例中的替换字符串 {.}可以更改为%foo

ls * | parallel --extensionreplace %foo "mkdir ./%foo"

可以在${…}页面的参数扩展部分中找到有关linuxjournal文章man bash的更多信息。

由于您在@AdamLiss答案的评论中询问,这是一种方式(ab)使用花括号--colsep参数来执行您的任务:

ls * | parallel --colsep '\.' "mkdir ./{1}"

注意:如果文件名包含两个以上的句点,则此--colsep 技巧(如@AdamLiss提出的sed)会产生不良结果(因为路径名被截断)在第一阶段。)

但是,由于--colsep参数是正则表达式,因此它应该适应文件名中其他位置的句点:

ls * | parallel --colsep '\.[^\.]*$' "mkdir ./{1.}"

注意:由于当前(21120422)并行版本中的错误,--extensionreplace无效。但由于parallel是一个perl脚本,您可以通过更改:

来修复它
    "extensionreplace|er" => \$::opt_U,

    "extensionreplace|er=s" => \$::opt_U,

答案 1 :(得分:2)

如果你不介意使用sed,这是一个解决方法:

ls * | sed 's/\..*//' | parallel "mkdir ./{}"

答案 2 :(得分:1)

我没有得到“.super”是什么,或者当你并行运行时,或者在并行命令中使用“{。}”。 AFAIK,parallel类似于xargs,只能理解{}。我错过了什么?

无论如何,我会用for循环实现目标:

for f in *; do mkdir "${f%%.*}"; done

或者,如果你真的关心工作的并行性这么短:

for f in *; do mkdir "${f%%.*}" & done

答案 3 :(得分:1)

根据example in the manual page,以下内容应该有效,即使它并不完美:

ls *.txt.super| parallel --er {txt} 'echo {txt}|parallel "mkdir ./{.}"'

删除第二个文件扩展名是通过并行调用parallel并将{.}字符串别名化为并行父实例中的{txt}来完成的。

答案 4 :(得分:1)

这可能对您有用:

ls * | parallel echo {.} | parallel mkdir {.}

答案 5 :(得分:1)

除了这里已经很好的答案之外,我很确定最简单的解决方案(可能是@Steve 正在寻找的)如下:

ls * | parallel --plus mkdir {..}

gnu parallel 中的 {.} 替换字符串 旨在将字符串“修剪”到最外层的 . 字符。我相信您最多可以将字符串修剪 3 . 级。

这意味着 {.} 将仅削减一级至 file1.txt{..} 将削减二级至 file1,而 {...} 将削减第三级。

相关问题