/News_Spark

基于Spark2.x新闻网大数据实时分析可视化系统项目

Primary LanguageJava

基于Spark2.x新闻网大数据实时分析可视化系统项目

一、业务需求分析

  • 捕获用户浏览日志信息
  • 实时分析前20名流量最高的新闻话题
  • 实时统计当前线上已曝光的新闻话题
  • 统计哪个时段用户浏览量最高

二、系统架构图设计

image

三、系统数据流程设计

image

四、集群资源规划设计

image

五、步骤详解

具体请参考博客