spring cloud for crawle
client-parent is a pom for project maven parent base
config-center is a file to save the project properties
config-server is spring cloud project for manage properties
web_config_main is spring cloud project for project manage center
crawle.sql is the all table sql defiened
1.1 项目说名
项目平台:1)爬虫平台;2)权限管理平台;3)限流-属性管理平台;4)流程设计以及服务平台;5)分布式任务调度平台;6)分布式大数据批处理平台
工具:1)爬虫处理引擎,以及分布式客户端;2)权限客户端;3)限流-属性查询客户端;4)流程服务客户端;5)调度任务客户端;6)大数据批处理客户端
7)rpc方法调用客户端;8)table-sql工具jar; 9)系统全局通用配置包