一、系统架构
前端埋点可以获取更多的信息,不仅可以获取用户点击浏览行为数据,还能获得用户定位位置信息等,滑动转跳
一、日志数据采集
SpringBoot --> Nginx-->(flume)-->Kafka-->flink
可以不用flume,直接怼到kafka消息队列,flikk消费
二、业务数据库数据采集
MYsql/Oracle --> Maxwell/canal -->kafka -->flink
前端埋点可以获取更多的信息,不仅可以获取用户点击浏览行为数据,还能获得用户定位位置信息等,滑动转跳
SpringBoot --> Nginx-->(flume)-->Kafka-->flink
可以不用flume,直接怼到kafka消息队列,flikk消费
MYsql/Oracle --> Maxwell/canal -->kafka -->flink