关于网站的UV分析

一:准备

1.统计的维度

　　guid

　　tracktime

　　provice

2.key与value的设定

　　key：date+provice_guid

　　value：NullWritable

3.案例分析

　　表示某天某个省份的某个人无论访问网站多少次，仅仅记做一次访问统计

　　UV：统计页面访问的总人数---》userID对于用户进行去重

二：程序

1.map程序

　　

　　

2.reduce程序

　　

3.结果

　　

4.理解点

　　1）怎么去重

　　　　数据key的形式：date+provice_guid。

　　　　当guid是相同的时候，在shuffle的group分组时，key被分组，一起的放在一起，而value则是nullwritable，没有使用value。

　　　　所以到达reduce的时候，数据已经被去重了。

　　2）NullWritable.get()

　　　　使用反射，获得NullWritable的对象。