Titan数据操作系统
概览
《 Titan数据运营系统》,本项目所适用的行业或业务背景有:主营业务在线上(app /网站)进行的公司!操作行为进行统计分析,数据挖掘!以支撑公司的业务运营,精准形象营销,个性化推荐等,来提高业务转化率,改善公司运营效果! !
本项目是一个全栈闭环系统,我们先用flume-kafaka-flume对埋点日志服务器中日志进行读取,然后将日志放到我们的hdfs,然后在hive设计数仓,编写spark代码进行数仓表之间的转换以及ads层表到mysql的迁移,之后使用az