jjzjj

setCheckpointDir

全部标签

hadoop - ALS.checkpointInterval 和 SparkContext.setCheckpointDir

我试图查找什么ALS.checkpointInterval确实如此,但它不是很能解释。设置ALS.checkpointInterval和设置sc.setCheckpointDir()有什么区别?两者都是必要的,还是它们的工作方式不同? 最佳答案 SparkContext.setCheckpointDir用于设置全局检查点目录。它不限于ALS或任何其他特定算法,但它是RDD.checkpoint工作所必需的。ALS.checkpointInterval是算法特定的属性,不会影响任何全局设置。来自机器学习文档:Paramforsetch