flume数据的采集,flume一直在采集,不需要定时的执行
2表模型三个mr的程序
第一个:mr清洗数据
第二个:pageview表模型
第三个:visit表模型
3hive建表加载数据
每天产生的数据,都要定时加载到hive对应的分区表里面去
4数据分析的SQL语句
自己开发的hql语句
flume数据的采集,flume一直在采集,不需要定时的执行
2表模型三个mr的程序
第一个:mr清洗数据
第二个:pageview表模型
第三个:visit表模型
3hive建表加载数据
每天产生的数据,都要定时加载到hive对应的分区表里面去
4数据分析的SQL语句
自己开发的hql语句