动态IP解决新浪的反爬虫机制，快速抓取微博内容。
抓取1000个公司（在companyList.py文件中）五年内相关的微博，进而统计评论数、转发数、点赞数等等。
- Python2.7
- winxp服务器（通过某宝购买，关键是ADSL拨号功能，不然无法实现动态IP，也就解决不了新浪的反爬虫机制）
-
每个公司五年内的微博（通过sqlite3存储）
下面截图为company0000.db的微博。
-
所有公司微博评论数、转发数、点赞数的统计（excel形式呈现）
forked from szcf-weiya/SinaSpider
-
Notifications
You must be signed in to change notification settings - Fork 0
动态IP解决新浪的反爬虫机制，快速抓取内容。
License
Devopswalker/SinaSpider
Folders and files
| Name | Name | Last commit message | Last commit date | |
|---|---|---|---|---|
Repository files navigation
About
动态IP解决新浪的反爬虫机制，快速抓取内容。
Resources
License
Stars
Watchers
Forks
Releases
No releases published
Packages 0
No packages published
Languages
- Python 100.0%