随着互联网的快速发展，基于Python的电影票房爬取与可视化系统的设计与实现作为一款受欢迎的娱乐平台，拥有大量的电影票房和用户评论等信息。为了更好地利用做好电影票房爬取与可视化系统的工作，开发了一个基于python的电影票房爬取与可视化系统。该系统利用python语言、mysql数据库以及hadoop、spark等大数据技术，对海量电影票房爬取与可视化系统的分析信息、评论数据进行处理和分析，通过与情感分析模型进行对比，准确识别出电影票房爬取与可视化系统的比值，并生成对应的电影票房爬取与可视化系统。

总的来说系统是一个可视化显示web界面，首先通过爬虫技术获取到对应的电影票房和评论等数据，考虑数据量较大，系统首先通过pandas进行文本的保存和读取，进而通过hadoop分布式保存到mysql数据库管理系统中，使用spark进行分布式计算，最后通过Django框架结合vue框架进行界面展示。本研究的意义在于，通过对电影票房爬取与可视化系统和用户评论信息等进行情感分析，提出电影票房爬取与可视化系统，规避电影票房用户发布一些不合法的信息。

 

关键字：电影票房爬取与可视化系统；爬虫；python；Django；vue；

 

  

目录

 

摘要 II

Abstract III

第一章 绪论 6

1.1研究背景与意义 6

1.2系统的特点 6

1.3研究内容 6

1.4论文结构 7

第二章 相关技术介绍 8

2.1 大数据与分布式架构理论介绍 8

2.2 Hadoop 8

2.3 Spider爬虫技术 9

2.4 Django框架 9

2.5 Vue和Echart 9

第三章 需求分析 11

3.1可行性分析 11

3.2 非功能性需求分析 11

3.3主要流程分析 12

3.4本章小结 12

第四章 系统设计 14

4.1 系统总体架构设计 14

4.2 系统模块设计 14

4.3 前台页面设计 15

4.4 数据库设计 15

4.5 本章小结 17

第五章 系统实现 18

5.1 系统的配置和部署 18

5.2 数据爬取与存储功能实现 18

5.3 首页功能实现 21

5.5 电影信息管理模块实现 24

5.6本章小结 24

第六章 系统测试 25

6.1 系统测试目的 25

6.2 系统兼容性测试 25

6.3 功能性测试 25

6.4 本章小结 26

结  论 27

参考文献 28

致谢 29