如何为sklearn下载数据集? – python

在NLTK中,有一个nltk.download()函数用于下载随NLP套件提供的数据集。

在sklearn中,它提到了加载数据集(http://scikit-learn.org/stable/datasets/)和从http://mldata.org/获取数据,但对于其余数据集,指示是从源头下载。

我应该将从源头下载的数据保存到哪里? 在将数据保存到正确的目录后,是否还有其他步骤才能在我的Python代码中调用?

是否有下载例如20newsgroups数据集的示例?

我已经通过pip安装了sklearn并尝试了这个方法,但得到了一个IOError。很可能是因为我还没有从源头下载数据集。

>>> from sklearn.datasets import fetch_20newsgroups>>> fetch_20newsgroups(subset='train')Traceback (most recent call last):  File "<stdin>", line 1, in <module>  File "/usr/local/lib/python2.7/dist-packages/sklearn/datasets/twenty_newsgroups.py", line 207, in fetch_20newsgroups    cache_path=cache_path)  File "/usr/local/lib/python2.7/dist-packages/sklearn/datasets/twenty_newsgroups.py", line 89, in download_20newsgroups    tarfile.open(archive_path, "r:gz").extractall(path=target_dir)  File "/usr/lib/python2.7/tarfile.py", line 1678, in open    return func(name, filemode, fileobj, **kwargs)  File "/usr/lib/python2.7/tarfile.py", line 1727, in gzopen    **kwargs)  File "/usr/lib/python2.7/tarfile.py", line 1705, in taropen    return cls(name, mode, fileobj, **kwargs)  File "/usr/lib/python2.7/tarfile.py", line 1574, in __init__    self.firstmember = self.next()  File "/usr/lib/python2.7/tarfile.py", line 2334, in next    raise ReadError("empty file")tarfile.ReadError: empty file

回答:

网络连接问题可能已经损坏了您驱动器上的源存档。请从您用户主目录中的scikit_learn_data文件夹中删除与twenty groups相关的文件或文件夹,然后再试一次。

$ cd ~/scikit_learn_data'$ rm -rf 20news_home$ rm 20news-bydate.pkz

Related Posts

Keras Dense层输入未被展平

这是我的测试代码: from keras import…

无法将分类变量输入随机森林

我有10个分类变量和3个数值变量。我在分割后直接将它们…

如何在Keras中对每个输出应用Sigmoid函数?

这是我代码的一部分。 model = Sequenti…

如何选择类概率的最佳阈值?

我的神经网络输出是一个用于多标签分类的预测类概率表: …

在Keras中使用深度学习得到不同的结果

我按照一个教程使用Keras中的深度神经网络进行文本分…

‘MatMul’操作的输入’b’类型为float32,与参数’a’的类型float64不匹配

我写了一个简单的TensorFlow代码,但不断遇到T…

发表回复

您的邮箱地址不会被公开。 必填项已用 * 标注