Optimization Spark MLLib算法的自定义优化器
我的团队有一个定制的优化例程,我们希望插入该例程,以替换一些ml/mllib算法使用的默认Optimization Spark MLLib算法的自定义优化器,optimization,apache-spark,apache-spark-mllib,Optimization,Apache Spark,Apache Spark Mllib,我的团队有一个定制的优化例程,我们希望插入该例程,以替换一些ml/mllib算法使用的默认LBFGS/OWLQN 然而,似乎优化器的选择在每个算法中都是硬编码的,除了LDA:即使在该算法中,它也只是内部定义的在线版本或批处理版本之间的选择 合并我们自己的优化器有什么解决方法吗?或者我们需要从上到下滚动所有算法——基本上是侧步ml/mllib
LBFGS
/OWLQN
然而,似乎优化器的选择在每个算法中都是硬编码的,除了LDA
:即使在该算法中,它也只是内部定义的在线版本或批处理版本之间的选择
合并我们自己的优化器有什么解决方法吗?或者我们需要从上到下滚动所有算法——基本上是侧步ml/mllib