一个python写的多线程网站链接检测器,检测链接是否可达
============ 运行预览:
第1层未访问链接出队 "http://lazynight.me"
第2层未访问链接出队 "http://lazynight.me/2916.html"
第2层未访问链接出队 "http://lazynight.me/2898.html#comments"
第2层未访问链接出队 "http://lazynight.me/category/infiltration"
第2层未访问链接出队 "http://lazynight.me/2544.html"
第2层未访问链接出队 "http://lazynight.me/category/Java"
第2层未访问链接出队 "http://lazynight.me/2927.html#comments"
第2层未访问链接出队 "http://lazynight.me/2952.html#comments"
第2层未访问链接出队 "http://luoo.net"
第2层未访问链接出队 "http://lazynight.me/2876.html#comments"
第2层未访问链接出队 "http://www.xliebo.com/ "
第2层未访问链接出队 "http://lazynight.me/2932.html"
第2层未访问链接出队 "http://lazynight.me/category/php"
第2层未访问链接出队 "http://lazynight.me/category/JS/"
第2层未访问链接出队 "http://lazynight.me/2934.html#comments"
第2层未访问链接出队 "http://lazynight.me/2915.html#comments"
第2层未访问链接出队 "http://lazynight.me/category/THREE-JS"
<testThread(Thread-11, started daemon 4504825856)>
<testThread(Thread-12, started daemon 4505362432)><testThread(Thread-13, started daemon 4505899008)>
<testThread(Thread-14, started daemon 4506435584)>
<testThread(Thread-15, started daemon 4506972160)>
<testThread(Thread-16, started daemon 4507508736)>
<testThread(Thread-17, started daemon 4508045312)>
<testThread(Thread-18, started daemon 4508581888)>
<testThread(Thread-19, started daemon 4509118464)>
<testThread(Thread-20, started daemon 4509655040)>
<testThread(Thread-21, started daemon 4510191616)>
<testThread(Thread-22, started daemon 4510728192)>
<testThread(Thread-23, started daemon 4511264768)>
<testThread(Thread-24, started daemon 4511801344)>
<testThread(Thread-25, started daemon 4512337920)>
<testThread(Thread-26, started daemon 4512874496)>
<testThread(Thread-27, started daemon 4513411072)>
<testThread(Thread-28, started daemon 4513947648)>
<testThread(Thread-29, started daemon 4514484224)>
<testThread(Thread-30, started daemon 4515020800)>
第2层未访问链接出队 "http://lazynight.me/2939.html"
第2层未访问链接出队 "http://lazynight.me/category/discuz"
第2层未访问链接出队 "http://lazynight.me/category/mysql"
第2层未访问链接出队 "http://lazynight.me/2952.html"
剩余链接数量 685
<testThread(Thread-14, started daemon 4506435584)>
第2层未访问链接出队 "http://lazynight.me/category/notes"
第2层未访问链接出队 "http://www.iyinman.com/ "
剩余链接数量 836
<testThread(Thread-12, started daemon 4505362432)>
第2层未访问链接出队 "http://lazynight.me/category/injection"
剩余链接数量 891
<testThread(Thread-11, started daemon 4504825856)>
剩余链接数量 890
<testThread(Thread-17, started daemon 4508045312)>
剩余链接数量 889
<testThread(Thread-19, started daemon 4509118464)>
剩余链接数量 888
<testThread(Thread-15, started daemon 4506972160)>
剩余链接数量 887
<testThread(Thread-28, started daemon 4513947648)>
第2层未访问链接出队 "http://jing.fm"
剩余链接数量 911
<testThread(Thread-16, started daemon 4507508736)>
剩余链接数量 910
<testThread(Thread-20, started daemon 4509655040)>
剩余链接数量 909
<testThread(Thread-23, started daemon 4511264768)>
剩余链接数量 908
<testThread(Thread-17, started daemon 4508045312)>
第2层未访问链接出队 "http://lazynight.me/category/embedded"
剩余链接数量 908
<testThread(Thread-13, started daemon 4505899008)>
剩余链接数量 907
<testThread(Thread-22, started daemon 4510728192)>
剩余链接数量 906
<testThread(Thread-21, started daemon 4510191616)>
剩余链接数量 905
<testThread(Thread-18, started daemon 4508581888)>
第2层未访问链接出队 "http://lazynight.me/category/exploits"
剩余链接数量 931
<testThread(Thread-25, started daemon 4512337920)>
剩余链接数量 930
<testThread(Thread-26, started daemon 4512874496)>
剩余链接数量 929
<testThread(Thread-17, started daemon 4508045312)>
剩余链接数量 928
<testThread(Thread-27, started daemon 4513411072)>
第2层未访问链接出队 "http://lazynight.me/2544.html#comments"
剩余链接数量 983
<testThread(Thread-23, started daemon 4511264768)>
剩余链接数量 982
<testThread(Thread-30, started daemon 4515020800)>
剩余链接数量 981
<testThread(Thread-29, started daemon 4514484224)>
第2层未访问链接出队 "http://lazynight.me/2925.html#comments"
剩余链接数量 1035
<testThread(Thread-14, started daemon 4506435584)>
第2层未访问链接出队 "http://lazynight.me/ads"
剩余链接数量 1071
<testThread(Thread-24, started daemon 4511801344)>
第2层未访问链接出队 "http://lazynight.me/category/typecho"
第2层未访问链接出队 "http://lazynight.me/tools/UP.htm"
剩余链接数量 1196
<testThread(Thread-12, started daemon 4505362432)>
第2层未访问链接出队 "http://lazynight.me/tags"
第2层未访问链接出队 "http://lazynight.me/category/ajax"
剩余链接数量 1990
<testThread(Thread-11, started daemon 4504825856)>
剩余链接数量 1989
<testThread(Thread-15, started daemon 4506972160)>
剩余链接数量 1988
<testThread(Thread-28, started daemon 4513947648)>
剩余链接数量 1987
<testThread(Thread-20, started daemon 4509655040)>
剩余链接数量 1986
<testThread(Thread-16, started daemon 4507508736)>
第2层未访问链接出队 "http://lazynight.me/2895.html#comments"
剩余链接数量 2033
<testThread(Thread-22, started daemon 4510728192)>
剩余链接数量 2032
<testThread(Thread-21, started daemon 4510191616)>
剩余链接数量 2031
<testThread(Thread-13, started daemon 4505899008)>
剩余链接数量 2030
<testThread(Thread-23, started daemon 4511264768)>
第2层未访问链接出队 "http://www.last.fm"
剩余链接数量 2032
<testThread(Thread-25, started daemon 4512337920)>
第2层未访问链接出队 "http://lazynight.me/2895.html"
剩余链接数量 2051
<testThread(Thread-14, started daemon 4506435584)>
剩余链接数量 2050
<testThread(Thread-17, started daemon 4508045312)>
第2层未访问链接出队 "http://lazynight.me/2935.html"
剩余链接数量 2082
<testThread(Thread-12, started daemon 4505362432)>