槌中的Python主题建模错误

时间:2018-06-07 13:05:47

标签: python-3.x topic-modeling mallet

您好我正在使用gensim进行主题建模并且正在使用Mallet并且正在执行此代码我在c驱动器中解压缩了槌,如图所示,并且还设置了环境MALLET_HOME命令。我正在执行的代码是

mallet_path = r'c:/mallet-2.0.8/bin/mallet'
ldamallet = gensim.models.wrappers.LdaMallet(mallet_path, corpus=corpus, 
num_topics=20, id2word=id2word)

这给我一个像这样的错误

CalledProcessError                        Traceback (most recent call last)
<ipython-input-58-6e0dbb876ee6> in <module>()
----> 1 ldamallet = gensim.models.wrappers.LdaMallet(mallet_path, 
corpus=corpus, 
   num_topics=20, id2word=id2word)

~\AppData\Local\Continuum\anaconda3\lib\site- 
packages\gensim\models\wrappers\ldamallet.py in __init__(self, mallet_path, 
corpus, num_topics, alpha, id2word, workers, prefix, optimize_interval, 
iterations, topic_threshold)
124         self.iterations = iterations
125         if corpus is not None:
--> 126             self.train(corpus)
127 
128     def finferencer(self):

~\AppData\Local\Continuum\anaconda3\lib\site- 
packages\gensim\models\wrappers\ldamallet.py in train(self, corpus)
265 
266         """
--> 267         self.convert_input(corpus, infer=False)
268         cmd = self.mallet_path + ' train-topics --input %s --num-topics 
%s  --alpha %s --optimize-interval %s '\
269             '--num-threads %s --output-state %s --output-doc-topics %s - 
-output-topic-keys %s '\

~\AppData\Local\Continuum\anaconda3\lib\site- 
packages\gensim\models\wrappers\ldamallet.py in convert_input(self, corpus, 
infer, serialize_corpus)
254             cmd = cmd % (self.fcorpustxt(), self.fcorpusmallet())
255         logger.info("converting temporary corpus to MALLET format with 
%s", cmd)
--> 256         check_output(args=cmd, shell=True)
257 
258     def train(self, corpus):

~\AppData\Local\Continuum\anaconda3\lib\site-packages\gensim\utils.py in 
check_output(stdout, *popenargs, **kwargs)
1804             error = subprocess.CalledProcessError(retcode, cmd)
1805             error.output = output
-> 1806             raise error
1807         return output
1808     except KeyboardInterrupt:`

CalledProcessError: Command 'c:\mallet-2.0.8\bin\mallet import-file -- 
preserve-case --keep-sequence --remove-stopwords --token-regex "\S+" --input 
C:\Users\apath009\AppData\Local\Temp\d186ea_corpus.txt --output 
C:\Users\apath009\AppData\Local\Temp\d186ea_corpus.mallet' returned non-zero 
exit status 1.

请帮助!!!

2 个答案:

答案 0 :(得分:0)

我也有此错误,但是现在可以了。我不确定到底要如何使它开始工作,但是我将详细说明我所做的一切。

首先,我遵循此链接中的所有内容,通过3个步骤(以下粘贴)回答了此问题: Error when implementing gensim.LdaMallet

  1. 确保已设置MALLET_HOME

  2. 在Python中设置mallet_path时,转义斜线

    mallet_path = 'c:\\mallet-2.0.8\\bin\\mallet'
    LDA_model = gensim.models.LdaMallet(mallet_path, ...
    
  3. 此外,在Python\Lib\site-packages\gensim\models\ldamallet.py:更改--token-regex '\S+' to --token-regex \"\S+\"

  4. 中修改第142行可能会很有用

但是我仍然遇到错误。接下来,我的计算机是双启动的,所以我启动了lubuntu,安装了java,python3,gensim,并将槌子文件夹复制到lubuntu分区。我使用与Windows相同的代码运行了一个测试python文件,但是从lubuntu终端使用了新的槌目录/home/Desktop/mallet-2.0.8/bin/mallet。有效。然后我重新启动回Windows,突然间它也可以在Windows上运行。

答案 1 :(得分:0)

检查是否已正确安装Java,并且已设置JAVA_HOME系统变量,并且已将%JAVA_HOME%\bin添加到PATH全局系统变量中。

这样做之后,请重新启动计算机以使更改生效。

这帮了我大忙。