在两个文件夹中查找名称的相同初始部分的文件

时间:2018-04-09 12:34:57

标签: python list set-intersection

我使用listdir来读取两个文件夹中的文件:

from os import listdir 
list_1 = [file for file in listdir("./folder1/") if file.endswith(".csv")]
list_2 = [file for file in listdir("./folder2/") if file.endswith(".json")]

现在我有两个列表:

list_1 = ['12_a1_pp.csv', '32_a3_pp.csv', '45_a17_pp.csv', '81_a123_pp.csv']
list_2 = ['12_a1.json', '32_a3.json', '61_a54.json']

我想找到相应的两个子列表,其中包含名称的初始部分相同的那些文件。换句话说:

list_1b = ['12_a1_pp.csv', '32_a3_pp.csv']
list_2b = ['12_a1.json', '32_a3.json']

我该怎么做?

PS注意listdir部分可能无关紧要。我只包含它,因为如果listdir的结果保证按字母顺序排列,那么这可能有助于遍历这两个列表。当然,在这个简单的例子中,列表很简短,但在实际使用案例中,它们汇集了数百个文件。

4 个答案:

答案 0 :(得分:2)

这是使用字典理解和set.intersection的一种方式。

list_1 = ['12_a1_pp.csv', '32_a3_pp.csv', '45_a17_pp.csv', '81_a123_pp.csv']
list_2 = ['12_a1.json', '32_a3.json', '61_a54.json']

start_1 = {k: '_'.join(k.split('_')[:-1]) for k in list_1}
start_2 = {k: k.split('.')[0] for k in list_2}

start_intersect = set(start_1.values()) & set(start_2.values())

list_1b = [k for k, v in start_1.items() if v in start_intersect]
list_2b = [k for k, v in start_2.items() if v in start_intersect]

如果任何“XY”的文件名以“_XY.csv”结尾,则此方法同样有效。它依赖于文件名的格式而不是包含的字母。

答案 1 :(得分:2)

更加pythonic方法将id(交集)运算符用于集合:

&

编辑:如果你需要拆分每个列表的特定字符(请参阅注释),这里有一个更新版本(搜索list_1中的最后一个' _'并搜索最后一个' ;。' in list_2):

common = set(x[:-7] for x in list_1) & set(x[:5] for x in list_2)
list_1b = [x + '_pp.csv' for x in common]
list_2b = [x + '.json' for x in common]

答案 2 :(得分:1)

list_1 = ['12_a1_pp.csv', '32_a3_pp.csv', '45_a17_pp.csv', '81_a123_pp.csv']
list_2 = ['12_a1.json', '32_a3.json', '61_a54.json']

list_1_C = [i.split(".")[0].replace("_pp", "") for i in list_1]     #Check List
list_2_C = [i.split(".")[0] for i in list_2]                        #Check List

print([list_1[i] for i, v in enumerate(list_1_C) if v in list_2_C])
print([list_2[i] for i, v in enumerate(list_2_C) if v in list_1_C])

<强>输出:

['12_a1_pp.csv', '32_a3_pp.csv']
['12_a1.json', '32_a3.json']

答案 3 :(得分:1)

当你想到它时,这很简单,所以这里是:

list_1 = ['12_a1_pp.csv', '32_a3_pp.csv', '45_a17_pp.csv', '81_a123_pp.csv']
list_2 = ['12_a1.json', '32_a3.json', '61_a54.json']
starters = [eachfile.partition(".")[0] for eachfile in list2]
 for eachelement in starters:
    for eachfile in list_1:
       if eachfile.startswith(eachelement):
          list_1b.append(eachfile)
          list_2b.append(eachelement+".json")

此外,如果你想特定于这种情况:

collective_set_1 = { each.replace("_pp.csv","") for each in list_1}
collective_set_2 = { each.replace(".json","") for each in list_2}
intersection = collective_set_1.intersection(collective_set2)
list_1b = [ each+"_pp.csv" for each in intersection ]
list_2b = [ each+".json" for each in intersection ]
相关问题