查看: 278|回复: 7

spark里头有深度学习算法吗

[复制链接]
论坛徽章:
17
数据陷阱解读徽章
日期:2015-08-13 15:21:46Tensorflow徽章
日期:2018-03-01 16:44:34Kaggle徽章
日期:2017-12-25 17:28:27Tensorflow徽章
日期:2017-09-04 17:18:43python徽章
日期:2017-06-15 17:31:54python徽章
日期:2017-06-09 15:44:29机器学习徽章
日期:2017-03-30 17:23:20python徽章
日期:2017-03-09 16:38:29机器学习徽章
日期:2016-12-08 15:50:25python徽章
日期:2016-12-01 17:02:38matlab徽章
日期:2016-10-27 10:53:30投资理财徽章
日期:2016-08-25 10:49:04
发表于 2018-1-25 20:56 | 显示全部楼层 |阅读模式

算法 深度学习 Spark

spark里头有深度学习常用算法
回复

使用道具 举报

论坛徽章:
10
Oracle研习者初级
日期:2013-03-02 10:06:43spark徽章
日期:2018-05-03 15:46:21spark徽章
日期:2018-04-26 15:29:14Oracle研习者高级
日期:2013-08-25 14:26:25Oracle研习者中级
日期:2013-08-25 14:25:49Oracle研习者初级
日期:2013-08-08 23:04:01Oracle研习者高级
日期:2013-10-21 22:32:52Oracle研习者初级
日期:2013-06-19 14:31:10Oracle研习者初级
日期:2013-04-18 13:19:15Kafka徽章
日期:2018-06-07 16:22:12
发表于 2018-1-27 08:26 | 显示全部楼层
感觉好像spark没有,据说有外挂,没有研究过
回复 支持 反对

使用道具 举报

新浪微博达人勋 bai  未实名认证
论坛徽章:
5
机器学习徽章
日期:2015-03-02 14:31:17spss初级
日期:2015-08-13 12:05:21投资理财徽章
日期:2016-04-07 11:04:36统计徽章
日期:2017-06-15 17:35:57spark徽章
日期:2018-04-26 15:29:14
发表于 2018-1-27 17:02 | 显示全部楼层
好像有个拆分子图的算法  
回复 支持 反对

使用道具 举报

论坛徽章:
2
spark徽章
日期:2018-04-26 15:29:14知识图谱徽章
日期:2018-06-15 13:47:35
发表于 2018-1-27 18:55 | 显示全部楼层
好像没有欸,其他的我不知道,但是好像 关于图像的CNN的 神经网络 是不可能有的
回复 支持 反对

使用道具 举报

论坛徽章:
2
linux徽章
日期:2018-04-02 15:18:51spark徽章
日期:2018-04-26 15:29:14
发表于 2018-1-28 19:56 | 显示全部楼层
spark-deep-learning 提出了三个新的东西:

首先是,Spark的数据终于可以用DF的方式无缝的喂给Tensorflow/Keras了,而且对Tensorflow/Keras的适配了一套Mllib的库,方便以Spark Mllib的方式进行编程。当然,为了使得原先是Tensorflow/Keras的用户感觉爽,如果你使用Python API你也可以完全使用Keras/Tensorflow 的Style来完成代码的编写。
其次是多个TF模型同时训练,给的一样的数据,但是不同的参数,从而充分利用分布式并行计算来选择较好的模型。
另外是模型训练好后如何集成到Spark里进行使用呢?没错,SQL UDF函数,你可以很方便的把一个训练好的模型注册成UDF函数,从而实际完成了模型的部署。

作者:祝威廉
链接:https://www.jianshu.com/p/07e8200b7cea
來源:简书
著作权归作者所有。商业转载请联系作者获得授权,非商业转载请注明出处。
回复 支持 反对

使用道具 举报

论坛徽章:
9
Hadoop研习者初级
日期:2017-12-28 17:09:25Java徽章
日期:2018-01-04 17:15:14数据陷阱解读徽章
日期:2018-03-01 16:41:57计算徽章
日期:2018-03-19 15:04:30Kafka徽章
日期:2018-03-23 10:45:46大型分布式徽章
日期:2018-03-29 16:06:23spark徽章
日期:2018-04-20 15:29:14spark徽章
日期:2018-04-26 15:29:14spark徽章
日期:2018-05-03 15:46:21
发表于 2018-1-28 23:59 | 显示全部楼层
好像spark没有 好像 关于图像的CNN的 神经网络 是不可能有的
回复 支持 反对

使用道具 举报

论坛徽章:
0
发表于 2018-6-10 20:44 | 显示全部楼层
可以了解一下PySpark,基于Python的Spark
回复 支持 反对

使用道具 举报

论坛徽章:
1
机器学习徽章
日期:2017-01-18 16:15:42
发表于 2018-6-27 15:27 | 显示全部楼层
目前还没有,TensorFlow蛮好的啊
回复 支持 反对

使用道具 举报

您需要登录后才可以回帖 登录 | 立即注册 新浪微博登陆

本版积分规则

 

GMT+8, 2018-7-22 20:51 , Processed in 0.171905 second(s), 60 queries .