Skip to content

基于大数据的学习视频数据分析与个性化推荐:以B站2022年知识/科技区视频数据作为分析对象

License

Notifications You must be signed in to change notification settings

MineQihang/BigDataProject

Folders and files

NameName
Last commit message
Last commit date

Latest commit

 

History

55 Commits
 
 
 
 
 
 
 
 
 
 
 
 
 
 

Repository files navigation

BigDataProject

基于大数据的学习视频数据分析与个性化推荐:以B站2022年知识/科技区视频数据作为分析对象。

对于以下几个部分更详细的文档详见目录下的README文件和项目报告。

数据爬取

本部分对应Spider文件夹。

使用Aiohttp实现异步分布式爬虫。

视频分析

本部分对应DataAnalysis文件夹。

使用Hadoop+Spark对总体数据进行大数据分析。

后端部署

本部分对应Backend文件夹。

其中主要包括单视频分析(评论情感分析等),视频推荐等。

前端部署

本部分对应Visualization文件夹。

使用Vue+Element+ECharts实现数据可视化。

About

基于大数据的学习视频数据分析与个性化推荐:以B站2022年知识/科技区视频数据作为分析对象

Resources

License

Stars

Watchers

Forks

Releases

No releases published

Packages

No packages published