查看: 332|回复: 1

spark streaming结合sparksql

[复制链接]
论坛徽章:
2
spark徽章
日期:2019-03-28 14:58:37区块链徽章
日期:2019-09-12 14:43:17
发表于 2019-1-9 11:45 | 显示全部楼层 |阅读模式

数据分析 Spark Kafka

请问一下 sparkstreaming消费kafka数据怎么结合sparkSQL进行复杂的数据分析以及入库

回复

使用道具 举报

论坛徽章:
1
spark徽章
日期:2019-03-28 14:58:37
发表于 2019-1-9 18:32 | 显示全部楼层
一个是在线业务,一个是离线业务。如果已经有在线业务发生了,就可以直接入库做数据分析了。而sparkSQL是对离线业务做的分析,做完之后入库成表就可以了。
回复 支持 反对

使用道具 举报

您需要登录后才可以回帖 登录 | 立即注册 新浪微博登陆

本版积分规则

 

GMT+8, 2019-10-20 16:26 , Processed in 0.101619 second(s), 31 queries .

关闭

扫一扫加入
本版微信群