上QQ阅读APP看书,第一时间看更新
第12章
Spark商业案例之大数据电影点评系统应用案例
本章讲解Spark商业案例之大数据电影点评系统应用案例。电影点评系统可通过各种方式实现:如纯粹通过RDD的方式实现、通过DataFrame和RDD相结合的方式实现、纯粹使用DataFrame方式实现、纯粹通过DataSet方式实现等。综合应用实现大数据电影点评系统的功能:统计某特定电影观看者中男性和女性不同年龄的人数、计算所有电影中平均得分最高(口碑最好)的电影TopN、计算最流行电影(即所有电影中粉丝或者观看人数最多)的电影TopN、实现所有电影中最受男性、女性喜爱的电影TopN、实现所有电影中QQ或者微信核心目标用户最喜爱电影TopN分析、实现所有电影中淘宝核心目标用户最喜爱电影TopN分析、电影点评系统实现Java和Scala版本的二次排序系统等。