如何在 Spark 机器学习中应用 scikit-learn？

Question

如何在 Spark 机器学习中应用 scikit-learn

Answer 1

没有用过scikit这个包，不过很同意你所说的spark api限制多这个结论。很多我们习惯使用的参数或者用法在spark里都不好使了。但是我对于spark mllib的理解是他的算法是basic的，但是其中的散列化和网络吞吐量的考虑是亮点