????????????

????1. ???(??????????)

?????????н???150G?????????????(???????????)???????????????????????????250G??????????????????????????????????????????????????????÷?????????????????????????????????????????洢??????????????????????

????????????????????ü?????Ч???????????????????????????????????????????????????????????o???????????????????????????????????????????Hadoop??HDFS?????檔

????2. ???????(???????)

????????????????У???λ??????????????????????????????????????????????????????????grep???????????????????????????????????????????????????????????????????????????????????????????????????

?????????

????1. ????????????????????ID(???????ID)?????????????????????????????

????2. ????HBase??????????Rowkey?? family??column????????????user??app??api??????????????????????????????????????????????????????????檔(???HBase?????Hadoop HDFS)

????3. ???????(???????????????)

???????????????????????????????????????????????濪????????TOPID??????????????????????????ISV?????????????????????????????????μ????????????????????????????????????????????????????????Щ???С???????????????????????????????????????????????????????????

???????????????????С?????+???????????????????????????????????????????????????????????????????????????????δ???????????????????????????????????????????????????????????????o???????????????????????????????????????????????????????????????

????4. ?????澯????????

??????????????????????????????(2???????)????????????????????????????????????????澯????ν??澯??????????????????????λ?????????????????????????????????????????????????????????????????????á????磬?????????????????????1%???????????????????????????????????????????????????????ζ???????????????????????????????????????????ó???????????????????????????????????????ó????????

 ????5. ???Master-Slave??????ο?????(ISV??ü??????????)

????????????????????????????????????????ο??????????MapReduce?????????????????????ο???У?????????ISV??ü?????????????????????????????????????????????????Э?飬?????????????????Э??????????????????????????????????????????????????????????????(?????????洢?????????Master Reduce)?????????????????????????????????и?????????????

?????????

?????????ú???????e?????

??????????????????????????輰???????????????????裬???????????e????????????????????????????ж????н?????????2?????ɡ?