当前位置:   article > 正文

Spark MLlib

Spark MLlib

MLLib——Machine Learning Library  机器学习库

 

传统的机器学习算法,会受到数据量的制约(一般是基于抽样,在大量数据中抽出一部分来进行训练)

现在有了大数据技术之后,我们可以不用再抽样数据进行机器学习,可以对整个全局数据进行机器学习。这得益于近几年出现的一些分布式计算框架

 

MLlib

MLlib是一个基于海量数据的机器学习库。它提供了常用的机器学习算法的分布式实现,只需要调用它的接口

它只是一些API

  1. import org.apache.spark.mllib.linalg.{Vector, Vectors}
  2. import org.apache.spark.mllib.linalg.Vectors
  3. import org.apache.spark.regression.LabeledPoint

现在用spark.ml用的多

 

 

MLLib目前支持的五种机器学习问题

 

 

 

 

本文内容由网友自发贡献,转载请注明出处:【wpsshop博客】
推荐阅读
相关标签
  

闽ICP备14008679号