我是火把的新手。我创建了一个lua脚本,我在其中加载64个't7'文件,其中包含我的训练数据,在for循环中。每个文件大约。 1 GB大小。以下是示例代码:
for i = 1,64 do
t = sys.clock();
x = torch.load("input_" .. i .. ".t7");
print("Data loaded in" .. (sys.clock()-t) .. " seconds");
--process data
end
平均加载1个文件需要28秒。我在'''提示符上直接运行了这段代码但结果相同。
然而,如果我在提示符中加载1个数据文件,则需要大约1-2秒。
我无法确定问题。请提出建议。