li2007211979 发表于 2018-1-25 20:56

spark里头有深度学习算法吗

spark里头有深度学习常用算法吗

wangsu 发表于 2018-1-27 08:26

感觉好像spark没有,据说有外挂,没有研究过

bai 发表于 2018-1-27 17:02

好像有个拆分子图的算法

xiuxiuxiu 发表于 2018-1-27 18:55

好像没有欸,其他的我不知道,但是好像 关于图像的CNN的 神经网络 是不可能有的

gpnu001 发表于 2018-1-28 19:56

spark-deep-learning 提出了三个新的东西:

首先是,Spark的数据终于可以用DF的方式无缝的喂给Tensorflow/Keras了,而且对Tensorflow/Keras的适配了一套Mllib的库,方便以Spark Mllib的方式进行编程。当然,为了使得原先是Tensorflow/Keras的用户感觉爽,如果你使用Python API你也可以完全使用Keras/Tensorflow 的Style来完成代码的编写。
其次是多个TF模型同时训练,给的一样的数据,但是不同的参数,从而充分利用分布式并行计算来选择较好的模型。
另外是模型训练好后如何集成到Spark里进行使用呢?没错,SQL UDF函数,你可以很方便的把一个训练好的模型注册成UDF函数,从而实际完成了模型的部署。

作者:祝威廉
链接:https://www.jianshu.com/p/07e8200b7cea
來源:简书
著作权归作者所有。商业转载请联系作者获得授权,非商业转载请注明出处。

唐宋 发表于 2018-1-28 23:59

好像spark没有 好像 关于图像的CNN的 神经网络 是不可能有的

JackPeng 发表于 2018-6-10 20:44

可以了解一下PySpark,基于Python的Spark

MountainG 发表于 2018-6-27 15:27

目前还没有,TensorFlow蛮好的啊

data900 发表于 2018-8-20 21:03

有机器学习的算法,深度学习目前应该没有

xenron 发表于 2018-8-21 23:41

还没试过spark 深度学习。
spark-mllib里面有机器学习的常用算法
页: [1] 2
查看完整版本: spark里头有深度学习算法吗