spark--案例分享--性别预测
spark里面有很多分类算法
逻辑回归（linear models (SVMs, logistic regression, linear regression)naive Bayes decision trees等
这里我采用ML来做里面的分类算法 支持LR ,决策树、还有NaiveBayesModel等
获取训练数据，（已知性别的数据在hive里面，所以从中获取数据）表我就一table代替了
val tainDataDF = getKnownSex(hiveContext, pathsave)
def getKnownSex(hiveContext: HiveContext, path: String) = {hiveContext.setConf("mapred.output.compress", "false")hiveContext.setConf("hive.exec.compress.output", "false")本文来自互联网用户投稿，文章观点仅代表作者本人，不代表本站立场，不承担相关法律责任。如若转载，请注明出处。 如若内容造成侵权/违法违规/事实不符，请点击【内容举报】进行投诉反馈！