读取多个文本文件并计算单词的出现次数?

时间:2013-06-07 13:38:29

标签: c++

我应该从具有多个(21578)文本文件的文件夹中读取(扫描)数据,文件名从1到21578编号,并读取文本文件中出现的每个单词,并计算次数它发生在整个文件夹中,即;在所有文件中 我该怎么办呢? Plz帮助。

    #include <iostream>
    #include <fstream>
    #include <string>
    using namespace std;

    void main ()
    {
    string STRING;
ifstream infile;
for(int i=0;i<21578;i++)
    {


infile.open (i+".txt");
    while(!infile.eof) // To get you all the lines.
    {
        getline(infile,STRING); // Saves the line in STRING.
        cout<<STRING; // Prints our STRING.
    }
infile.close();
system ("pause");
    }
    }

2 个答案:

答案 0 :(得分:4)

最简单的方法是创建一个字符串映射到整数。

std::map<std::string, int>

然后递增包含int,或者如果它不存在则添加到地图。

http://www.cplusplus.com/reference/map/map/

如果您正在使用c ++ 11(我认为)或更高版本,您甚至可以使用unordered_map,而不是使用排序来访问元素使用散列。如果性能很重要,这是您可以考虑的优化。

以下是一些示例代码,可帮助您入门

#include <iostream>
#include <map>
#include <string>
using namespace std;

void incrementString(map<string, int> &theMap, string &theString) {
    if(theMap.count(theString)) {
        theMap[theString]++;
    } else {
        theMap[theString] = 1;//This fixes the issue the other poster mentioned, though on most systems is not necessary, and this function would not need an if/else block at all.
    }
}

void printMap(map<string, int> &theMap) {
    map<string, int>::iterator it = theMap.begin();

    do {
        cout << it->first << ": " << it->second << endl;
    } while(++it != theMap.end());

}

int main() {
    map<string, int> stringMap;

    string hi = "hi";//Assigning "hi" to a string, like like cin>>string would.
    string the = "the";

    incrementString(stringMap, hi);//Adding one occurance of hi to the map

    incrementString(stringMap, the);//Adding one occurance of the to the map

    incrementString(stringMap, hi);//Adding another occurance of hi to the map

    printMap(stringMap); //Printing the map so far
}

int main_alt() {
    map<string, int> stringMap;

    string someString;

    while(cin>>someString) {//reads string from std::cin, I recommend using this instead of getline()
        incrementString(stringMap, someString);
    }

    printMap(stringMap);
}

因此预期的输出是:

hi: 2
the: 1

此外,如果您使用“main_alt()”,您可以像这样调用您的程序,并查看while(cin&gt;&gt;字符串)行的工作原理。

./program < someFile.txt

答案 1 :(得分:0)

当读取目录中的所有文件时,你最好使用操作系统设备,而不是假设文件名是什么(除非那些或多或少得到保证。)所以,我建议使用{{ 1}}和opendir符合POSIX标准的系统和Windows中的类似功能。

现在,在对事件进行计数时,您自然会以下列方式使用readdir

std::map<string, int>