解决缓存数据量太大清空redis的性能问题，解决url匹配不够完美问题，增加redis集合，可以随机读取url进行采集，进行多域并发，缩短…