爬取51job数据并做可视化分析（可视化大屏项目）
项目简介
本项目是一个基于Python、ECharts、MySQL和Flask的Web可视化项目。通过爬取51job网站的数据，并对数据进行清洗、存储和可视化分析，最终呈现出一个交互式的可视化大屏。
项目特点
- 数据爬取：使用Python编写爬虫脚本，从51job网站上抓取招聘信息数据。
- 数据存储：将爬取的数据存储在MySQL数据库中，便于后续的数据分析和处理。
- 数据可视化：利用ECharts强大的可视化能力，将数据以图表的形式展示出来，包括但不限于柱状图、饼图、地图等。
- Web应用：使用Flask框架搭建Web应用，用户可以通过浏览器访问可视化大屏，进行交互式操作。
项目结构
- data_crawler：包含爬虫脚本，负责从51job网站爬取数据。
- data_processing：包含数据清洗和处理的脚本，将爬取的数据进行预处理，并存储到MySQL数据库中。
- visualization：包含ECharts的配置文件和前端代码，负责将数据可视化。
- web_app：包含Flask应用的代码，负责搭建Web服务器，提供可视化大屏的访问入口。
使用说明
- 数据爬取：运行
data_crawler目录下的脚本，开始爬取51job网站的数据。 - 数据处理：运行
data_processing目录下的脚本，对爬取的数据进行清洗和处理，并存储到MySQL数据库中。 - 启动Web应用：运行
web_app目录下的Flask应用，启动Web服务器。 - 访问可视化大屏：打开浏览器，访问Flask应用提供的URL，即可查看和交互可视化大屏。
注意事项
- 请确保在运行项目前，已经安装了所需的Python库和MySQL数据库。
- 爬虫脚本可能会受到51job网站的反爬虫机制影响，建议合理设置爬取频率，避免被封禁。
贡献
欢迎对本项目进行改进和扩展，如果您有任何建议或发现了问题，请提交Issue或Pull Request。
许可证
本项目采用MIT许可证，详情请参阅LICENSE文件。