如何使用shell脚本在linux中运行url列表

时间:2011-07-25 11:06:38

标签: shell

我想使用一些shell脚本运行存储在文本文件中的URL列表。对此有任何帮助会有很大帮助。

我想要这个程序的脚本,所以当我点击它时。该程序将通过URL列表运行(如访问网站,然后将其替换为其他网站,*访问URL列表)

2 个答案:

答案 0 :(得分:4)

如果网址在文件url_file.txt中作为单独的行,您可以这样做:

for i in `cat url_file.txt`
do 
    wget $i 2>&1 >/dev/null
done

或代替wget使用lynx(或curl)。例如:

lynx --dump $i 2>&1 > /dev/null

答案 1 :(得分:0)

如果通过运行网址列表,您的意思是依次访问每个网址,您可以使用Perls WWW::MechanizeWWW::Mechanize::Firefox模块(后者应该需要JavaScript支持)。 wget是另一种选择,具体取决于您想要做什么。