Skip to content

realars321/aggregator

This branch is 5 commits behind wzdnzd/aggregator:main.

Folders and files

NameName
Last commit message
Last commit date

Latest commit

Dec 22, 2024
31a9634 · Dec 22, 2024
Jul 22, 2024
Dec 19, 2024
May 14, 2024
Oct 11, 2024
Dec 22, 2024
Nov 7, 2024
May 30, 2024
May 30, 2024
Aug 18, 2024
Jun 10, 2019
Nov 11, 2024
Jan 11, 2023
Sep 12, 2024

Repository files navigation

功能

打造免费代理池,爬一切可爬节点

拥有灵活的插件系统,如果目标网站特殊,现有功能未能覆盖,可针对性地通过插件实现

欢迎 Star 及 PR。对于质量较高且普适的爬取目标,亦可在 Issues 中列出,将在评估后选择性添加

使用方法

略,自行探索。我才不会告诉你入口是 collect.pyprocess.py强烈建议使用后者,前者只是个小玩具,配置参考 subscribe/config/config.default.json

免责申明

  • 本项目仅用作学习爬虫技术,请勿滥用,不要通过此工具做任何违法乱纪或有损国家利益之事
  • 禁止使用该项目进行任何盈利活动,对一切非法使用所产生的后果,本人概不负责

About

One-stop Proxies Crawling and Aggregation Platform

Resources

License

Stars

Watchers

Forks

Releases

No releases published

Packages

No packages published

Languages

  • Python 95.9%
  • Smarty 3.5%
  • Other 0.6%