有没有办法更改pyspark.mllib.feature.Word2Vec
中使用的窗口大小,还是它永久固定为5?这似乎是一个相当重要的功能。
我在这里没有看到这个选项:https://spark.apache.org/docs/1.4.1/api/scala/index.html#org.apache.spark.mllib.feature.Word2Vec
回答:
没错,查看Word2Vec的代码我们可以看到它是一个私有值。如果你想的话,你可以尝试重写Word2Vec来更改窗口大小。我已经创建了一个JIRA(https://issues.apache.org/jira/browse/SPARK-10299)来允许设置窗口大小,由于1.5版本已经进入发布候选阶段,这可能要等到1.6版本才会实现。