spark案例---实现ip地址查询

通过Spark实现ip地址查询 1.需求分析 ​ 在互联网中,我们经常会见到城市热点图这样的报表数据,例如在百度统计中,会统计今年的热门旅游城市、热门报考学校等,会将这样的信息显示在热点图中。 通过日志信息(运行商家或者网站自己生成)和城市ip段信息来判断用户的ip段,统计热点经纬度。 2.技术调研 因为我们的需求是完成一张报表信息,所以对程序的实时性没有要求,所以可以选择内存计算spark来实现
相关文章
相关标签/搜索