Skip to content

scrapy框架使用。 chromedriver插件使用 动态网页数据爬取

Notifications You must be signed in to change notification settings

deqiang-kong/finance

Folders and files

NameName
Last commit message
Last commit date

Latest commit

 

History

5 Commits
 
 
 
 
 
 
 
 
 
 

Repository files navigation

finance

scrapy框架使用。 chromedriver插件使用 动态网页数据爬取

关键点:

  • Selenium方式实现Ajax数据获取
  • chromedriver插件使用
  • 随机头信息添加
  • 开启下载延时
  • 数据库,表自动创建
  • 数据库连接池,异步存储

其他:

About

scrapy框架使用。 chromedriver插件使用 动态网页数据爬取

Resources

Stars

Watchers

Forks

Releases

No releases published

Packages

No packages published

Languages