该项目要求设计并实现一个BiliBili视频信息爬虫,并且能够将每个分类收藏数前三的视频下载至本地。
该项目使用的软件有Eclipse(IDE)、Charles(抓包工具)、MySQL(数据库)、Navicat Premium(数据库可视化工具)。
16年1月,经过反复的设计、编程、测试、修改,最终的程序能够爬取Bilibili视频网音乐区7个类别约62万个视频的信息(由于校园网波动,最后只爬了62w,实际上音乐区应该不止这么多视频),将其存入数据库,并将每个类别收藏数前三的视频下载至本地,符合要求。