Skip to content

lonelygoneby/smzdm_reptile

 
 

Folders and files

NameName
Last commit message
Last commit date

Latest commit

 

History

21 Commits
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 

Repository files navigation

smzdm_reptile

什么值得买(张大妈)爬虫

2021-10-12

手机摔坏了,整来买个手机

2020-07-11

重构,分包模块了一下

2019-11-12

今年双十一大败,痛定思痛进行整理

  1. 对每个查询条件设置一个已发送名单,而不是全部查询条件共用一个已发送名单

  2. 保存商品的值/不值的爬升过程

  3. 商品的值/不值的爬升速度

  4. 某类商品的全部商品的值/不值的分布比例

  5. 对某类商品的全部商品进行聚类(例如根据值/不值的分布)

  6. 根据某类商品的全部商品自动配置过滤条件

  7. 能够即时(例如在web)对比多个商品详细信息

  8. 根据对商品的聚类进行个性化提示,并能够即时显示(例如在web)

  9. 能够即时(例如在web)对各类或各种商品的性价比程度进行调整

  10. 远期目标,根据以上的数据分析,倒腾一下神经网络

代理爬虫 公众号网关

商品属性 可值化:分类,价格,值,不值,商场,时间,评价数,总评价赞数,总评价贬数,总图片数,总视频数 非值化:标题,介绍,[评价] 评价属性 可值化:评价赞数,评价贬数,评价时间,图片数,视频数 非值化:评价

2019-5-13

换go语言试试

long long ago

自暴自弃式编程,有待完善

About

什么值得买(张大妈)爬虫

Resources

Stars

Watchers

Forks

Releases

No releases published

Packages

No packages published

Languages

  • Go 92.9%
  • Shell 4.7%
  • Dockerfile 2.4%