Skip to content

基于Spark2.x新闻网大数据实时分析可视化系统项目

Notifications You must be signed in to change notification settings

df1-df1/News_Spark

 
 

Folders and files

NameName
Last commit message
Last commit date

Latest commit

 

History

16 Commits
 
 
 
 
 
 
 
 
 
 
 
 

Repository files navigation

基于Spark2.x新闻网大数据实时分析可视化系统项目

一、业务需求分析

  • 捕获用户浏览日志信息
  • 实时分析前20名流量最高的新闻话题
  • 实时统计当前线上已曝光的新闻话题
  • 统计哪个时段用户浏览量最高

二、系统架构图设计

image

三、系统数据流程设计

image

四、集群资源规划设计

image

五、步骤详解

具体请参考博客

About

基于Spark2.x新闻网大数据实时分析可视化系统项目

Resources

Stars

Watchers

Forks

Releases

No releases published

Packages

No packages published

Languages

  • Java 56.4%
  • Scala 29.8%
  • HTML 13.8%