diff --git a/static/url_list/url_list.json b/static/url_list/url_list.json new file mode 100644 index 0000000..255d8fd --- /dev/null +++ b/static/url_list/url_list.json @@ -0,0 +1,1011 @@ +[ + "http://www.ycit.cn/mailto:dbyb@ycit.cn", + "http://xxgk.ycit.cn", + "http://www.ycit.cn/xxgk2/ShowArticle.asp?ArticleID=331", + "http://www.ycit.cn/xxgk2/ShowArticle.asp?ArticleID=166", + "http://www.ycit.cn/ycitxsdt/ShowArticle.asp?ArticleID=148", + "http://www.ycit.cn/javascript:window.external.addFavorite('http://xxgk.ycit.cn/','Ñγǹ¤Ñ§ÔºÐÅÏ¢¹«¿ª×¨À¸');", + "http://www.ycit.cn/mailto:xcb@ycit.cn", + "http://www.ycit.cn/Announcelist.asp", + "http://paper.ycit.cn/111", + "http://gbt.ycit.cn/main/index.asp", + "http://xxgk.ycit.cn", + "http://www.ycit.cn/SchoolSet.jsp?SmallID=15", + "http://zjb.ycit.cn", + "http://yctvu.ycit.cn", + "http://gjjl.ycit.cn", + "http://yctvu.ycit.cn", + "http://yctvu.ycit.cn", + "http://mach.ycit.cn", + "http://jgxy.ycit.cn/Index.html", + "http://dianqi.ycit.cn", + "http://rwxy.ycit.cn", + "http://ad.ycit.cn", + "http://clxy.ycit.cn", + "http://tmxy.ycit.cn", + "http://textile.ycit.cn/Index.html", + "http://xinxi.ycit.cn", + "http://hjxy.ycit.cn", + "http://wyxy.ycit.cn/Index.html", + "http://hsxy.ycit.cn", + "http://econ.ycit.cn", + "http://skb.ycit.cn/Index.html", + "http://byxy.ycit.cn", + "http://jcjxb.ycit.cn", + "http://tiyu.ycit.cn", + "http://ae.ycit.cn", + "http://kjcx.ycit.cn", + "http://paper.ycit.cn/111", + "http://xxgk.ycit.cn", + "http://www.ycit.cn/SchoolSet.jsp?SmallID=16", + "http://zjb.ycit.cn", + "http://yctvu.ycit.cn", + "http://gjjl.ycit.cn", + "http://yb.ycit.cn", + "http://doc.ycit.cn", + "http://bjhh.ycit.cn", + "http://zzb.ycit.cn", + "http://jgdw.ycit.cn/Index.html", + "http://paper.ycit.cn/111", + "http://xgb.ycit.cn", + "http://zjb.ycit.cn", + "http://zx.ycit.cn", + "http://xinxie.ycit.cn", + "http://bwc.ycit.cn", + "http://gfjs.ycit.cn", + "http://gh.ycit.cn/Index.html", + "http://ltxc.ycit.cn", + "http://youth.ycit.cn", + "http://yjzx.ycit.cn", + "http://rsc.ycit.cn", + "http://jwc.ycit.cn", + "http://spzx.ycit.cn", + "http://pgc.ycit.cn/main.aspx", + "http://cwc.ycit.cn", + "http://shenji.ycit.cn/Index.html", + "http://kjc.ycit.cn/Index.html", + "http://dxkjy.ycit.cn/Index.html", + "http://zyzx.ycit.cn", + "http://xyh.ycit.cn", + "http://gjjl.ycit.cn", + "http://gjjl.ycit.cn", + "http://jjc.ycit.cn", + "http://hqglc.ycit.cn", + "http://hqglc.ycit.cn", + "http://lab.ycit.cn", + "http://analysis.ycit.cn", + "http://hqjt.ycit.cn", + "http://lib.ycit.cn", + "http://kjcx.ycit.cn", + "http://gjs.ycit.cn", + "http://xueb.ycit.cn", + "http://metc.ycit.cn", + "http://zyzx.ycit.cn", + "http://spzx.ycit.cn", + "http://zhb.ycit.cn", + "http://www.ycit.cn/special.asp", + "http://www.ycit.cn/photonews.asp", + "http://www.ycit.cn/guestbook.asp", + "http://www.ycit.cn/Type.asp?TypeId=11", + "http://www.ycit.cn/Type.asp?TypeId=10", + "http://www.ycit.cn/Type.asp?TypeId=4", + "http://www.ycit.cn/Type.asp?TypeId=12", + "http://www.ycit.cn/Type.asp?TypeId=7", + "http://www.ycit.cn/Type.asp?TypeId=14", + "http://www.ycit.cn/ycitzs/ShowArticle.asp?ArticleID=2210", + "http://www.ycit.cn/ReadNews.asp?NewsId=2362", + "http://www.ycit.cn/ReadNews.asp?NewsId=2361", + "http://www.ycit.cn/ReadNews.asp?NewsId=2360", + "http://www.ycit.cn/ReadNews.asp?NewsId=2359", + "http://www.ycit.cn/ReadNews.asp?NewsId=2355", + "http://www.ycit.cn/ReadNews.asp?NewsId=2349", + "http://www.ycit.cn/ReadNews.asp?NewsId=2346", + "http://www.ycit.cn/ReadNews.asp?NewsId=2345", + "http://www.ycit.cn/Type.asp?typeid=11", + "http://www.ycit.cn/ReadNews.asp?newsid=634", + "http://www.ycit.cn/ReadNews.asp?newsid=633", + "http://www.ycit.cn/ReadNews.asp?NewsID=2364", + "http://www.ycit.cn/ReadNews.asp?NewsID=2353", + "http://www.ycit.cn/ReadNews.asp?NewsID=2348", + "http://www.ycit.cn/ReadNews.asp?NewsID=2343", + "http://www.ycit.cn/ReadNews.asp?NewsID=2333", + "http://www.ycit.cn/ReadNews.asp?NewsID=2320", + "http://www.ycit.cn/ReadNews.asp?NewsID=2289", + "http://www.ycit.cn/ReadNews.asp?NewsID=2285", + "http://www.ycit.cn/Type.asp?typeid=10", + "http://www.ycit.cn/ReadNews.asp?newsid=350", + "http://www.ycit.cn/ReadNews.asp?newsid=242", + "http://www.ycit.cn/ReadNews.asp?NewsID=2363", + "http://www.ycit.cn/ReadNews.asp?NewsID=2288", + "http://www.ycit.cn/ReadNews.asp?NewsID=2286", + "http://www.ycit.cn/ReadNews.asp?NewsID=2281", + "http://www.ycit.cn/ReadNews.asp?NewsID=2265", + "http://www.ycit.cn/ReadNews.asp?NewsID=2263", + "http://www.ycit.cn/ReadNews.asp?NewsID=2262", + "http://www.ycit.cn/ReadNews.asp?NewsID=2182", + "http://www.ycit.cn/Type.asp?typeid=4", + "http://www.ycit.cn/ReadNews.asp?newsid=1860", + "http://www.ycit.cn/ReadNews.asp?newsid=958", + "http://www.ycit.cn/ReadNews.asp?NewsID=2362", + "http://www.ycit.cn/ReadNews.asp?NewsID=2361", + "http://www.ycit.cn/ReadNews.asp?NewsID=2359", + "http://www.ycit.cn/ReadNews.asp?NewsID=2358", + "http://www.ycit.cn/ReadNews.asp?NewsID=2357", + "http://www.ycit.cn/ReadNews.asp?NewsID=2356", + "http://www.ycit.cn/ReadNews.asp?NewsID=2355", + "http://www.ycit.cn/ReadNews.asp?NewsID=2352", + "http://www.ycit.cn/Type.asp?typeid=12", + "http://www.ycit.cn/ReadNews.asp?newsid=959", + "http://www.ycit.cn/ReadNews.asp?newsid=949", + "http://www.ycit.cn/ReadNews.asp?NewsID=2360", + "http://www.ycit.cn/ReadNews.asp?NewsID=2346", + "http://www.ycit.cn/ReadNews.asp?NewsID=2345", + "http://www.ycit.cn/ReadNews.asp?NewsID=2344", + "http://www.ycit.cn/ReadNews.asp?NewsID=2341", + "http://www.ycit.cn/ReadNews.asp?NewsID=2340", + "http://www.ycit.cn/ReadNews.asp?NewsID=2332", + "http://www.ycit.cn/ReadNews.asp?NewsID=2329", + "http://www.ycit.cn/Type.asp?typeid=7", + "http://www.ycit.cn/ReadNews.asp?newsid=548", + "http://www.ycit.cn/ReadNews.asp?NewsID=2118", + "http://www.ycit.cn/ReadNews.asp?NewsID=1800", + "http://www.ycit.cn/ReadNews.asp?NewsID=1761", + "http://www.ycit.cn/ReadNews.asp?NewsID=1760", + "http://www.ycit.cn/ReadNews.asp?NewsID=1758", + "http://www.ycit.cn/ReadNews.asp?NewsID=1757", + "http://www.ycit.cn/ReadNews.asp?NewsID=1755", + "http://www.ycit.cn/ReadNews.asp?NewsID=1860", + "http://www.ycit.cn/ReadNews.asp?NewsID=959", + "http://www.ycit.cn/ReadNews.asp?NewsID=958", + "http://www.ycit.cn/ReadNews.asp?NewsID=949", + "http://www.ycit.cn/ReadNews.asp?NewsID=634", + "http://www.ycit.cn/ReadNews.asp?NewsID=633", + "http://www.ycit.cn/ReadNews.asp?NewsID=610", + "http://www.ycit.cn/ReadNews.asp?NewsID=567", + "http://www.ycit.cn/ReadNews.asp?NewsID=550", + "http://www.ycit.cn/ReadNews.asp?NewsID=548", + "http://www.ycit.cn/ycitzs/ShowArticle.asp?ArticleID=75", + "http://www.ycit.cn/51job/index.asp", + "http://www.ycit.cn/./ReadNews.asp?NewsID=1", + "http://www.ycit.cn/./map.asp", + "http://www.ycit.cn/mailto:zjb@163.com", + "http://www.ycit.cn/jwc/index.asp", + "http://www.ycit.cn/listnews.asp?classid=1", + "http://www.ycit.cn/listnews.asp?classid=2", + "http://www.ycit.cn/listnews.asp?classid=18,19,20,21", + "http://www.ycit.cn/listnews.asp?classid=22,23,24,25", + "http://www.ycit.cn/listnews.asp?classid=26,27,28", + "http://www.ycit.cn/listnews.asp?classid=29,30", + "http://www.ycit.cn/listnews.asp?classid=8", + "http://www.ycit.cn/listnews.asp?classid=9", + "http://www.ycit.cn/news.asp?newsid=621&classid=2", + "http://www.ycit.cn/news.asp?newsid=651&classid=2", + "http://www.ycit.cn/news.asp?newsid=650&classid=34", + "http://www.ycit.cn/news.asp?newsid=649&classid=34", + "http://www.ycit.cn/news.asp?newsid=648&classid=2", + "http://www.ycit.cn/news.asp?newsid=647&classid=34", + "http://www.ycit.cn/news.asp?newsid=646&classid=34", + "http://www.ycit.cn/news.asp?newsid=645&classid=24", + "http://select.ycit.cn", + "http://www.ycit.cn/listnews.asp?classid=10", + "http://www.ycit.cn/listnews.asp?classid=11", + "http://kcjs.ycit.cn/sc8", + "http://www.ycit.cn/listnews.asp?classid=31,32", + "http://www.ycit.cn/listnews.asp?classid=12", + "http://www.ycit.cn/listnews.asp?classid=13", + "http://www.ycit.cn/listnews.asp?classid=14", + "http://spzx.ycit.cn", + "http://zyxy.ycit.cn/index.asp", + "http://www.ycit.cn/listnews.asp?classid=17", + "http://www.ycit.cn/news.asp?newsid=643&classid=34", + "http://www.ycit.cn/news.asp?newsid=638&classid=34", + "http://www.ycit.cn/news.asp?newsid=636&classid=34", + "http://www.ycit.cn/news.asp?newsid=635&classid=34", + "http://www.ycit.cn/news.asp?newsid=634&classid=34", + "http://www.ycit.cn/news.asp?newsid=631&classid=34", + "http://www.ycit.cn/news.asp?newsid=641&classid=19", + "http://www.ycit.cn/news.asp?newsid=640&classid=20", + "http://www.ycit.cn/news.asp?newsid=600&classid=20", + "http://www.ycit.cn/news.asp?newsid=599&classid=19", + "http://www.ycit.cn/news.asp?newsid=535&classid=20", + "http://www.ycit.cn/news.asp?newsid=469&classid=20", + "http://www.ycit.cn/news.asp?newsid=458&classid=19", + "http://www.ycit.cn/news.asp?newsid=442&classid=20", + "http://www.ycit.cn/news.asp?newsid=409&classid=20", + "http://www.ycit.cn/news.asp?newsid=404&classid=20", + "http://www.ycit.cn/news.asp?newsid=627&classid=25", + "http://www.ycit.cn/news.asp?newsid=626&classid=25", + "http://www.ycit.cn/news.asp?newsid=624&classid=23", + "http://www.ycit.cn/news.asp?newsid=614&classid=25", + "http://www.ycit.cn/news.asp?newsid=611&classid=25", + "http://www.ycit.cn/news.asp?newsid=609&classid=25", + "http://www.ycit.cn/news.asp?newsid=608&classid=24", + "http://www.ycit.cn/news.asp?newsid=602&classid=23", + "http://www.ycit.cn/news.asp?newsid=590&classid=25", + "http://www.ycit.cn/MessageList.asp?page=1", + "http://www.ycit.cn/jgjj/Index.html", + "http://www.ycit.cn/yjspy/Index.html", + "http://www.ycit.cn/gzzd/Index.html", + "http://www.ycit.cn/xkjs/Index.html", + "http://www.ycit.cn/zcwj/Index.html", + "http://www.ycit.cn/tpxw/Index.html", + "http://www.ycit.cn/ggtz/Index.html", + "http://www.ycit.cn/xzzq/Index.html", + "http://www.ycit.cn/xglj/Index.html", + "http://www.ycit.cn/tpxw/index.html", + "http://www.ycit.cn/tpxw/tpxw/201411/585.html", + "http://www.ycit.cn/tpxw/tpxw/201411/583.html", + "http://www.ycit.cn/tpxw/tpxw/201409/578.html", + "http://www.ycit.cn/tpxw/tpxw/201406/566.html", + "http://www.ycit.cn/tpxw/tpxw/201405/554.html", + "http://www.ycit.cn/tpxw/tpxw/201401/541.html", + "http://www.ycit.cn/tpxw/tpxw/201312/538.html", + "http://www.ycit.cn/tpxw/tpxw/201311/534.html", + "http://www.ycit.cn/tpxw/tpxw/201306/500.html", + "http://www.ycit.cn/tpxw/tpxw/201212/474.html", + "http://www.ycit.cn/gzzd/index.html", + "http://www.ycit.cn/gzzd/pydt/201505/603.html", + "http://www.ycit.cn/gzzd/pydt/201505/601.html", + "http://www.ycit.cn/gzzd/pydt/201501/592.html", + "http://www.ycit.cn/gzzd/pydt/201501/589.html", + "http://www.ycit.cn/gzzd/pydt/201412/586.html", + "http://www.ycit.cn/gzzd/pydt/201411/581.html", + "http://www.ycit.cn/gzzd/pydt/201410/579.html", + "http://www.ycit.cn/gzzd/pydt/201409/573.html", + "http://www.ycit.cn/gzzd/pydt/201409/572.html", + "http://www.ycit.cn/gzzd/pydt/201409/569.html", + "http://www.ycit.cn/zcwj/index.html", + "http://www.ycit.cn/zcwj/gzdt/201505/600.html", + "http://www.ycit.cn/zcwj/gzdt/201503/596.html", + "http://www.ycit.cn/zcwj/gzdt/201409/577.html", + "http://www.ycit.cn/zcwj/gzdt/201409/575.html", + "http://www.ycit.cn/zcwj/gzdt/201401/540.html", + "http://www.ycit.cn/zcwj/gzdt/201312/539.html", + "http://www.ycit.cn/zcwj/gzdt/201309/528.html", + "http://www.ycit.cn/zcwj/gzdt/201309/525.html", + "http://www.ycit.cn/zcwj/gzdt/201309/522.html", + "http://www.ycit.cn/zcwj/gzdt/201309/521.html", + "http://www.ycit.cn/ggtz/index.html", + "http://www.ycit.cn/ggtz/ggtz/201504/599.html", + "http://www.ycit.cn/ggtz/ggtz/201504/598.html", + "http://www.ycit.cn/ggtz/ggtz/201503/597.html", + "http://www.ycit.cn/ggtz/ggtz/201503/595.html", + "http://www.ycit.cn/ggtz/ggtz/201503/594.html", + "http://www.ycit.cn/ggtz/ggtz/201501/593.html", + "http://www.ycit.cn/ggtz/ggtz/201501/591.html", + "http://www.ycit.cn/ggtz/ggtz/201501/590.html", + "http://www.ycit.cn/ggtz/ggtz/201412/587.html", + "http://www.ycit.cn/ggtz/ggtz/201410/580.html", + "http://www.ycit.cn/xglj/index.html", + "http://www.ycit.cn/Article/Index.html", + "http://www.ycit.cn/xwdt/Index.html", + "http://www.ycit.cn/zsgz/Index.html", + "http://www.ycit.cn/hsjy/Index.html", + "http://www.ycit.cn/zkzx/Index.html", + "http://www.ycit.cn/kfjy/Index.html", + "http://www.ycit.cn/jxjy/Index.html", + "http://www.ycit.cn/wljy/Index.html", + "http://www.ycit.cn/yjsjy/Index.html", + "http://www.ycit.cn/sqjy/Index.html", + "http://www.ycit.cn/pxgz/Index.html", + "http://www.ycit.cn/xwdt/index.html", + "http://www.ycit.cn/xwdt/xwdt/201506/556.html", + "http://www.ycit.cn/xwdt/xwdt/201506/555.html", + "http://www.ycit.cn/xwdt/xwdt/201505/548.html", + "http://www.ycit.cn/xwdt/xwdt/201502/511.html", + "http://www.ycit.cn/xwdt/xwdt/201502/510.html", + "http://www.ycit.cn/xwdt/xwdt/201411/506.html", + "http://www.ycit.cn/xwdt/xwdt/201410/495.html", + "http://www.ycit.cn/xwdt/djgz/201410/494.html", + "http://www.ycit.cn/xwdt/xwdt/201410/491.html", + "http://www.ycit.cn/xwdt/xwdt/201409/485.html", + "http://www.ycit.cn/Article/xrld/201207/91.html", + "http://www.ycit.cn/ggtz/ggtz/201503/519.html", + "http://www.ycit.cn/ggtz/ggtz/201501/509.html", + "http://www.ycit.cn/ggtz/ggtz/201501/508.html", + "http://www.ycit.cn/ggtz/ggtz/201501/507.html", + "http://www.ycit.cn/ggtz/ggtz/201409/487.html", + "http://www.ycit.cn/ggtz/ggtz/201409/484.html", + "http://www.ycit.cn/ggtz/ggtz/201409/483.html", + "http://www.ycit.cn/ggtz/ggtz/201409/482.html", + "http://www.ycit.cn/ggtz/ggtz/201407/476.html", + "http://www.ycit.cn/ggtz/ggtz/201406/466.html", + "http://www.ycit.cn/hsjy/index.html", + "http://www.ycit.cn/kfjy/jxjw/201506/554.html", + "http://www.ycit.cn/kfjy/jxjw/201506/553.html", + "http://www.ycit.cn/kfjy/jxjw/201506/552.html", + "http://www.ycit.cn/wljy/kwap/201505/551.html", + "http://www.ycit.cn/wljy/kwap/201505/550.html", + "http://www.ycit.cn/yjsjy/yjsjy/201505/549.html", + "http://www.ycit.cn/wljy/xwgl/201505/546.html", + "http://www.ycit.cn/wljy/xwgl/201505/545.html", + "http://www.ycit.cn/zkzx/201505/544.html", + "http://www.ycit.cn/hsjy/jxgl/201505/547.html", + "http://www.ycit.cn/wljy/rxxz/201505/540.html", + "http://www.ycit.cn/wljy/rxxz/201505/539.html", + "http://www.ycit.cn/wljy/wljy/201505/536.html", + "http://www.ycit.cn/wljy/cjfb/201505/535.html", + "http://www.ycit.cn/kfjy/jxjw/201504/534.html", + "http://www.ycit.cn/yjsjy/yjsjy/201504/533.html", + "http://www.ycit.cn/kfjy/jxjw/201504/532.html", + "http://www.ycit.cn/kfjy/jxjw/201504/529.html", + "http://www.ycit.cn/kfjy/jxjw/201503/528.html", + "http://www.ycit.cn/kfjy/kfjy/201503/525.html", + "http://www.ycit.cn/yqlj/Index.html", + "http://www.ycit.cn/yqlj/qgdd/201305/249.html", + "http://www.ycit.cn/yqlj/qsdd/201305/246.html", + "http://www.ycit.cn/yqlj/qgdd/201305/247.html", + "http://www.ycit.cn/yqlj/zdtj/201405/434.html", + "http://www.ycit.cn/yqlj/sndd/201305/211.html", + "http://www.ycit.cn/yqlj/sndd/201305/210.html", + "http://www.ycit.cn/yqlj/sndd/201305/209.html", + "http://www.ycit.cn/yqlj/sndd/201305/208.html", + "http://www.ycit.cn/yqlj/sndd/201305/207.html", + "http://www.ycit.cn/yqlj/sndd/201305/206.html", + "http://www.ycit.cn/yqlj/sndd/201305/205.html", + "http://www.ycit.cn/yqlj/sndd/201305/204.html", + "http://paper.ycit.cn/111", + "http://xxgk.ycit.cn", + "http://zjb.ycit.cn", + "http://yjsc.ycit.cn/Index.html", + "http://yctvu.ycit.cn", + "http://www.ycit.cn/ShowDevelopment.jsp?SmallID=25", + "http://gjjl.ycit.cn", + "http://zyzx.ycit.cn", + "http://gjs.ycit.cn", + "http://ae.ycit.cn", + "http://emlab.ycit.cn", + "http://kjcx.ycit.cn", + "http://analysis.ycit.cn", + "http://www.ycit.cn/mailto:yanqj@ycit.cn ", + "http://www.ycit.cn/english", + "http://www.ycit.cn/aboutus_list_people.asp", + "http://www.ycit.cn/aboutus_list_zhize.asp", + "http://www.ycit.cn/aboutus_list_plan.asp", + "http://www.ycit.cn/aboutus_list_service.asp", + "http://www.ycit.cn/aboutus_list_dsj.asp", + "http://www.ycit.cn/hzjj_list_xjjl.asp", + "http://www.ycit.cn/hzbx_list_America.asp", + "http://www.ycit.cn/hzbx_list_England.asp", + "http://www.ycit.cn/outin_list_policy.asp", + "http://www.ycit.cn/outin_list_program.asp", + "http://www.ycit.cn/outin_list_service.asp", + "http://www.ycit.cn/wzwj_list_vistor.asp", + "http://www.ycit.cn/wzwj_list_wjfc.asp", + "http://www.ycit.cn/wzwj_list_zhaop.asp", + "http://www.ycit.cn/lxxm_list_lxxm.asp", + "http://www.ycit.cn/lxxm_list_zhishi.asp", + "http://www.ycit.cn/lhlx_list_manage.asp", + "http://www.ycit.cn/lhlx_list_fengcai.asp", + "http://www.ycit.cn/hzjj_list_zcfg.asp", + "http://www.ycit.cn/morenews.asp?Classid=27", + "http://www.ycit.cn/viewnews.asp?id=317", + "http://www.ycit.cn/viewnews.asp?id=305", + "http://www.ycit.cn/viewnews.asp?id=302", + "http://www.ycit.cn/viewnews.asp?id=300", + "http://www.ycit.cn/viewnews.asp?id=301", + "http://www.ycit.cn/viewnews.asp?id=312", + "http://www.ycit.cn/viewnews.asp?id=306", + "http://www.ycit.cn/viewnews.asp?id=307", + "http://www.ycit.cn/viewnews.asp?id=311", + "http://www.ycit.cn/morenews.asp?Classid=30", + "http://www.ycit.cn/viewnews.asp?id=314", + "http://www.ycit.cn/viewnews.asp?id=313", + "http://www.ycit.cn/viewnews.asp?id=316", + "http://www.ycit.cn/viewnews.asp?id=295", + "http://www.ycit.cn/viewnews.asp?id=294", + "http://www.ycit.cn/viewnews.asp?id=297", + "http://www.ycit.cn/viewnews.asp?id=298", + "http://www.ycit.cn/viewnews.asp?id=299", + "http://www.ycit.cn/viewnews.asp?id=315", + "http://www.ycit.cn", + "http://www.ycit.cn/viewnews.asp?id=287", + "http://www.ycit.cn/viewnews.asp?id=272", + "http://www.ycit.cn/viewnews.asp?id=268", + "http://www.ycit.cn/viewnews.asp?id=267", + "http://www.ycit.cn/viewnews.asp?id=266", + "http://www.ycit.cn/viewnews.asp?id=253", + "http://www.ycit.cn/liuxue_list_all.asp?id=1", + "http://www.ycit.cn/liuxue_list_all.asp?id=2", + "http://www.ycit.cn/liuxue_list_all.asp?id=6", + "http://www.ycit.cn/liuxue_list_all.asp?id=3", + "http://www.ycit.cn/liuxue_list_all.asp?id=4", + "http://www.ycit.cn/liuxue_list_all.asp?id=5", + "http://www.ycit.cn/liuxue_list_all.asp?id=7", + "http://www.ycit.cn/liuxue_list_all.asp?id=9", + "http://www.ycit.cn/liuxue_list_all.asp?id=8", + "http://www.ycit.cn/resource_show.asp?id=230", + "http://www.ycit.cn/resource_show.asp?id=231", + "http://www.ycit.cn/resource_show.asp?id=229", + "http://www.ycit.cn/biaoge_show.asp?id=36", + "http://www.ycit.cn/biaoge_show.asp?id=37", + "http://www.ycit.cn/biaoge_show.asp?id=38", + "http://gjjl.ycit.cn/old", + "http://www.ycit.cn/default.aspx", + "http://www.ycit.cn/main.aspx?Column=01", + "http://www.ycit.cn/main.aspx?Column=03", + "http://www.ycit.cn/main.aspx?Column=04", + "http://www.ycit.cn/main.aspx?Column=05", + "http://www.ycit.cn/main.aspx?Column=06", + "http://www.ycit.cn/main.aspx?Column=07", + "http://www.ycit.cn/main.aspx?Column=0701", + "http://www.ycit.cn/main.aspx?Column=0702", + "http://www.ycit.cn/main.aspx?Column=0703", + "http://www.ycit.cn/main.aspx?Column=0704", + "http://www.ycit.cn/main.aspx?Column=0705", + "http://www.ycit.cn/ArticleView.aspx?ArticleId=13&columnid=0704", + "http://www.ycit.cn/ArticleView.aspx?ArticleId=216&columnid=0701", + "http://www.ycit.cn/ArticleView.aspx?ArticleId=197&columnid=0702", + "http://www.ycit.cn/ArticleView.aspx?ArticleId=154&columnid=0705", + "http://www.ycit.cn/ArticleView.aspx?ArticleId=14&columnid=0703", + "http://www.ycit.cn/mailto:rsc@ycit.cn", + "http://www.ycit.cn/home.asp", + "http://www.ycit.cn/javascript: alert('·Ç³£±§Ç¸!\\n\\nÄú±ØÐëÏȵǼ»ò×¢²á²Å¿ÉÒÔʹÓô˹¦ÄÜ!\\n\\n');", + "http://www.ycit.cn/Article/Index.asp", + "http://www.ycit.cn/Article/ShowArticle.asp?ArticleID=2340", + "http://www.ycit.cn/Article/ShowArticle.asp?ArticleID=22", + "http://www.ycit.cn/getpassword.asp", + "http://xyml.ycit.cn/xycx.asp", + "http://www.ycit.cn/shownews.asp?id=2014136", + "http://www.ycit.cn/shownews.asp?id=20131238", + "http://www.ycit.cn/shownews.asp?id=2013120", + "http://www.ycit.cn/shownews.asp?id=201377", + "http://www.ycit.cn/shownews.asp?id=2013759", + "http://www.ycit.cn/shownews.asp?id=2013729", + "http://www.ycit.cn/shownews.asp?id=2013531", + "http://www.ycit.cn/shownews.asp?id=2013459", + "http://www.ycit.cn/shownews.asp?id=2013425", + "http://www.ycit.cn/shownews.asp?id=2013441", + "http://www.ycit.cn/shownews.asp?id=2013430", + "http://www.ycit.cn/javascript: gonggao('575');", + "http://www.ycit.cn/javascript: gonggao('33');", + "http://www.ycit.cn/javascript:alert('·Ç³£±§Ç¸,ÄúÉÐδµÇ¼!\\nûÓз¢±íÐÅÏ¢µÄȨÏÞ!');", + "http://www.ycit.cn/javascript:gopic('UploadFile/2008312143515739.jpg');", + "http://www.ycit.cn/javascript:gopic('UploadFile/2008312142957956.jpg');", + "http://www.ycit.cn/javascript:gopic('UploadFile/20071120111535791.jpg');", + "http://www.ycit.cn/javascript:gopic('UploadFile/2007112011213931.jpg');", + "http://www.ycit.cn/javascript:gopic('UploadFile/20071120105830110.jpg');", + "http://www.ycit.cn/javascript:gopic('UploadFile/20071120105327525.jpg');", + "http://www.ycit.cn/javascript:gopic('UploadFile/20071120105124835.jpg');", + "http://www.ycit.cn/javascript:gopic('UploadFile/20071120105010382.jpg');", + "http://www.ycit.cn/javascript:gopic('UploadFile/20071114172328483.jpg');", + "http://www.ycit.cn/javascript:gopic('UploadFile/2007111417204347.jpg');", + "http://www.ycit.cn/javascript:gopic('UploadFile/20071114171721308.jpg');", + "http://www.ycit.cn/javascript:gopic('UploadFile/20071114171812853.jpg');", + "http://www.ycit.cn/javascript:gopic('UploadFile/2007118153125989.gif');", + "http://www.ycit.cn/javascript:gopic('UploadFile/2007118152943233.jpg');", + "http://www.ycit.cn/javascript:gopic('UploadFile/2007118152511841.jpg');", + "http://paper.ycit.cn/111", + "http://xxgk.ycit.cn", + "http://zjb.ycit.cn", + "http://yctvu.ycit.cn", + "http://gjjl.ycit.cn", + "http://rsc.ycit.cn/main.aspx?Column=07", + "http://xyh.ycit.cn/xyh/index.asp", + "http://paper.ycit.cn/111", + "http://xxgk.ycit.cn", + "http://zjb.ycit.cn", + "http://yctvu.ycit.cn", + "http://gjjl.ycit.cn", + "http://paper.ycit.cn/111", + "http://xxgk.ycit.cn", + "http://zjb.ycit.cn", + "http://yctvu.ycit.cn", + "http://gjjl.ycit.cn", + "http://www.ycit.cn/mailto:lt@ycit.edu.cn", + "http://paper.ycit.cn/111", + "http://xxgk.ycit.cn", + "http://zjb.ycit.cn", + "http://yctvu.ycit.cn", + "http://gjjl.ycit.cn", + "http://paper.ycit.cn/111", + "http://xxgk.ycit.cn", + "http://zjb.ycit.cn", + "http://yctvu.ycit.cn", + "http://gjjl.ycit.cn", + "http://paper.ycit.cn/111", + "http://xxgk.ycit.cn", + "http://zjb.ycit.cn", + "http://yctvu.ycit.cn", + "http://gjjl.ycit.cn", + "http://paper.ycit.cn/111", + "http://xxgk.ycit.cn", + "http://zjb.ycit.cn", + "http://yctvu.ycit.cn", + "http://gjjl.ycit.cn", + "http://www.ycit.cn/ShowNews.jsp?id=2443&smallid=39", + "http://paper.ycit.cn/111", + "http://xxgk.ycit.cn", + "http://zjb.ycit.cn", + "http://yctvu.ycit.cn", + "http://gjjl.ycit.cn", + "http://paper.ycit.cn/111", + "http://xxgk.ycit.cn", + "http://zjb.ycit.cn", + "http://yctvu.ycit.cn", + "http://gjjl.ycit.cn", + "http://ae.ycit.cn/news.asp?newsid=157&classid=53", + "http://paper.ycit.cn/111", + "http://xxgk.ycit.cn", + "http://zjb.ycit.cn", + "http://yctvu.ycit.cn", + "http://gjjl.ycit.cn", + "http://paper.ycit.cn/111", + "http://xxgk.ycit.cn", + "http://zjb.ycit.cn", + "http://yctvu.ycit.cn", + "http://gjjl.ycit.cn", + "http://paper.ycit.cn/111", + "http://xxgk.ycit.cn", + "http://zjb.ycit.cn", + "http://yctvu.ycit.cn", + "http://gjjl.ycit.cn", + "http://paper.ycit.cn/111", + "http://xxgk.ycit.cn", + "http://zjb.ycit.cn", + "http://yctvu.ycit.cn", + "http://gjjl.ycit.cn", + "http://paper.ycit.cn/111", + "http://xxgk.ycit.cn", + "http://zjb.ycit.cn", + "http://yctvu.ycit.cn", + "http://gjjl.ycit.cn", + "http://paper.ycit.cn/111", + "http://xxgk.ycit.cn", + "http://zjb.ycit.cn", + "http://yctvu.ycit.cn", + "http://gjjl.ycit.cn", + "http://paper.ycit.cn/111", + "http://xxgk.ycit.cn", + "http://zjb.ycit.cn", + "http://yctvu.ycit.cn", + "http://gjjl.ycit.cn", + "http://paper.ycit.cn/111", + "http://xxgk.ycit.cn", + "http://zjb.ycit.cn", + "http://yctvu.ycit.cn", + "http://gjjl.ycit.cn", + "http://paper.ycit.cn/111", + "http://xxgk.ycit.cn", + "http://zjb.ycit.cn", + "http://yctvu.ycit.cn", + "http://gjjl.ycit.cn", + "http://paper.ycit.cn/111", + "http://xxgk.ycit.cn", + "http://zjb.ycit.cn", + "http://yctvu.ycit.cn", + "http://gjjl.ycit.cn", + "http://paper.ycit.cn/111", + "http://xxgk.ycit.cn", + "http://zjb.ycit.cn", + "http://yctvu.ycit.cn", + "http://gjjl.ycit.cn", + "http://paper.ycit.cn/111", + "http://xxgk.ycit.cn", + "http://zjb.ycit.cn", + "http://yctvu.ycit.cn", + "http://gjjl.ycit.cn", + "http://paper.ycit.cn/111", + "http://xxgk.ycit.cn", + "http://zjb.ycit.cn", + "http://yctvu.ycit.cn", + "http://gjjl.ycit.cn", + "http://paper.ycit.cn/111", + "http://xxgk.ycit.cn", + "http://zjb.ycit.cn", + "http://yctvu.ycit.cn", + "http://gjjl.ycit.cn", + "http://paper.ycit.cn/111", + "http://xxgk.ycit.cn", + "http://zjb.ycit.cn", + "http://yctvu.ycit.cn", + "http://gjjl.ycit.cn", + "http://www.ycit.cn/uploads/201565/20150605155108.doc", + "http://www.ycit.cn/uploads/201565/20150605155128.doc", + "http://www.ycit.cn/uploads/201565/20150605155142.doc", + "http://paper.ycit.cn/111", + "http://xxgk.ycit.cn", + "http://zjb.ycit.cn", + "http://yctvu.ycit.cn", + "http://gjjl.ycit.cn", + "http://www.ycit.cn/mailto:zzb@ycit.cn", + "http://www.ycit.cn/uploads/201564/20150604104732.doc", + "http://www.ycit.cn/uploads/201564/20150604104750.doc", + "http://paper.ycit.cn/111", + "http://xxgk.ycit.cn", + "http://zjb.ycit.cn", + "http://yctvu.ycit.cn", + "http://gjjl.ycit.cn", + "http://www.ycit.cn/uploads/201563/20150603110223.docx", + "http://www.ycit.cn/uploads/201563/20150603110242.docx", + "http://www.ycit.cn/uploads/201563/20150603110258.docx", + "http://paper.ycit.cn/111", + "http://xxgk.ycit.cn", + "http://zjb.ycit.cn", + "http://yctvu.ycit.cn", + "http://gjjl.ycit.cn", + "http://www.ycit.cn/uploads/201561/20150601161547.zip", + "http://paper.ycit.cn/111", + "http://xxgk.ycit.cn", + "http://zjb.ycit.cn", + "http://yctvu.ycit.cn", + "http://gjjl.ycit.cn", + "http://paper.ycit.cn/111", + "http://xxgk.ycit.cn", + "http://zjb.ycit.cn", + "http://yctvu.ycit.cn", + "http://gjjl.ycit.cn", + "http://www.ycit.cn/uploads/2015525/20150525164056.docx", + "http://www.ycit.cn/uploads/2015525/20150525164110.doc", + "http://paper.ycit.cn/111", + "http://xxgk.ycit.cn", + "http://zjb.ycit.cn", + "http://yctvu.ycit.cn", + "http://gjjl.ycit.cn", + "http://paper.ycit.cn/111", + "http://xxgk.ycit.cn", + "http://zjb.ycit.cn", + "http://yctvu.ycit.cn", + "http://gjjl.ycit.cn", + "http://paper.ycit.cn/111", + "http://xxgk.ycit.cn", + "http://zjb.ycit.cn", + "http://yctvu.ycit.cn", + "http://gjjl.ycit.cn", + "http://paper.ycit.cn/111", + "http://xxgk.ycit.cn", + "http://zjb.ycit.cn", + "http://yctvu.ycit.cn", + "http://gjjl.ycit.cn", + "http://paper.ycit.cn/111", + "http://xxgk.ycit.cn", + "http://zjb.ycit.cn", + "http://yctvu.ycit.cn", + "http://gjjl.ycit.cn", + "http://paper.ycit.cn/111", + "http://xxgk.ycit.cn", + "http://zjb.ycit.cn", + "http://yctvu.ycit.cn", + "http://gjjl.ycit.cn", + "http://paper.ycit.cn/111", + "http://xxgk.ycit.cn", + "http://zjb.ycit.cn", + "http://yctvu.ycit.cn", + "http://gjjl.ycit.cn", + "http://paper.ycit.cn/111", + "http://xxgk.ycit.cn", + "http://zjb.ycit.cn", + "http://yctvu.ycit.cn", + "http://gjjl.ycit.cn", + "http://paper.ycit.cn/111", + "http://xxgk.ycit.cn", + "http://zjb.ycit.cn", + "http://yctvu.ycit.cn", + "http://gjjl.ycit.cn", + "http://paper.ycit.cn/111", + "http://xxgk.ycit.cn", + "http://zjb.ycit.cn", + "http://yctvu.ycit.cn", + "http://gjjl.ycit.cn", + "http://paper.ycit.cn/111", + "http://xxgk.ycit.cn", + "http://zjb.ycit.cn", + "http://yctvu.ycit.cn", + "http://gjjl.ycit.cn", + "http://www.ycit.cn/ShowScrool.jsp?id=2603&smallid=28", + "http://www.ycit.cn/ShowScrool.jsp?id=2597&smallid=28", + "http://www.ycit.cn/ShowScrool.jsp?id=2576&smallid=30", + "http://www.ycit.cn/ShowScrool.jsp?id=2519&smallid=28", + "http://www.ycit.cn/ShowScrool.jsp?id=2481&smallid=28", + "http://www.ycit.cn/ShowScrool.jsp?id=2432&smallid=28", + "http://www.ycit.cn/ShowScrool.jsp?id=2427&smallid=28", + "http://www.ycit.cn/ShowScrool.jsp?id=2342&smallid=35", + "http://www.ycit.cn/ShowScrool.jsp?id=2330&smallid=28", + "http://www.ycit.cn/ShowScrool.jsp?id=2265&smallid=28", + "http://www.ycit.cn/ShowScrool.jsp?id=2239&smallid=37", + "http://www.ycit.cn/ShowNews.jsp?id=2608&smallid=28", + "http://www.ycit.cn/ShowNews.jsp?id=2603&smallid=28", + "http://www.ycit.cn/ShowNews.jsp?id=2602&smallid=28", + "http://www.ycit.cn/ShowNews.jsp?id=2599&smallid=28", + "http://www.ycit.cn/ShowNews.jsp?id=2597&smallid=28", + "http://www.ycit.cn/ShowNews.jsp?id=2592&smallid=28", + "http://www.ycit.cn/ShowNews.jsp?id=2598&smallid=30", + "http://www.ycit.cn/ShowNews.jsp?id=2591&smallid=30", + "http://www.ycit.cn/ShowNews.jsp?id=2587&smallid=30", + "http://www.ycit.cn/ShowNews.jsp?id=2586&smallid=30", + "http://www.ycit.cn/ShowNews.jsp?id=2585&smallid=30", + "http://www.ycit.cn/ShowNews.jsp?id=2582&smallid=30", + "http://www.ycit.cn/ShowNotice.jsp?id=2601&smallid=35", + "http://www.ycit.cn/ShowNotice.jsp?id=2589&smallid=35", + "http://www.ycit.cn/ShowNotice.jsp?id=2584&smallid=35", + "http://www.ycit.cn/ShowNotice.jsp?id=2558&smallid=35", + "http://www.ycit.cn/ShowNotice.jsp?id=2518&smallid=35", + "http://www.ycit.cn/ShowNotice.jsp?id=2497&smallid=35", + "http://www.ycit.cn/ShowNews.jsp?id=2579&smallid=27", + "http://www.ycit.cn/ShowNews.jsp?id=2572&smallid=27", + "http://www.ycit.cn/ShowNews.jsp?id=2583&smallid=27", + "http://www.ycit.cn/ShowNews.jsp?id=2580&smallid=27", + "http://www.ycit.cn/ShowNews.jsp?id=2556&smallid=27", + "http://www.ycit.cn/ShowNews.jsp?id=2581&smallid=27", + "http://www.ycit.cn/ShowScience.jsp?id=2538&smallid=34", + "http://www.ycit.cn/ShowScience.jsp?id=2534&smallid=34", + "http://www.ycit.cn/ShowHighedu.jsp?id=2596&smallid=36", + "http://www.ycit.cn/ShowHighedu.jsp?id=2595&smallid=36", + "http://newoa.ycit.cn", + "http://www.ycit.cn/javascript:jump213MCl7781080200url();", + "http://paper.ycit.cn", + "http://xxgk.ycit.cn", + "http://xxgk.ycit.cn", + "http://www.ycit.cn", + "http://www.ycit.cn/Uproduce.jsp?SmallID=11", + "http://paper.ycit.cn/111", + "http://xxgk.ycit.cn", + "http://zjb.ycit.cn", + "http://yctvu.ycit.cn", + "http://gjjl.ycit.cn", + "http://www.ycit.cn/javascript:jump2tZcCl7781080200url();", + "http://paper.ycit.cn", + "http://xxgk.ycit.cn", + "http://xxgk.ycit.cn", + "http://www.ycit.cn", + "http://www.ycit.cn/Uleader.jsp?SmallID=12", + "http://paper.ycit.cn/111", + "http://xxgk.ycit.cn", + "http://zjb.ycit.cn", + "http://yctvu.ycit.cn", + "http://gjjl.ycit.cn", + "http://www.ycit.cn/javascript:jump2Z2HCl7781080200url();", + "http://paper.ycit.cn", + "http://xxgk.ycit.cn", + "http://xxgk.ycit.cn", + "http://www.ycit.cn", + "http://paper.ycit.cn/111", + "http://xxgk.ycit.cn", + "http://zjb.ycit.cn", + "http://yctvu.ycit.cn", + "http://gjjl.ycit.cn", + "http://paper.ycit.cn/111", + "http://xxgk.ycit.cn", + "http://zjb.ycit.cn", + "http://yctvu.ycit.cn", + "http://gjjl.ycit.cn", + "http://paper.ycit.cn/111", + "http://xxgk.ycit.cn", + "http://zjb.ycit.cn", + "http://yctvu.ycit.cn", + "http://gjjl.ycit.cn", + "http://paper.ycit.cn/111", + "http://xxgk.ycit.cn", + "http://zjb.ycit.cn", + "http://yctvu.ycit.cn", + "http://gjjl.ycit.cn", + "http://gjjl.ycit.cn/english", + "http://www.ycit.cn/ycitgk/Index.asp", + "http://www.ycit.cn/ycityb/Index.asp", + "http://www.ycit.cn/ycitjg/Index.asp", + "http://www.ycit.cn/ycitzs/Index.asp", + "http://www.ycit.cn/ycitky/Index.asp", + "http://gjjl.ycit.cn", + "http://rsc.ycit.cn/zp/zp/201202/3.html", + "http://gjjl.ycit.cn/english", + "http://www.ycit.cn/javascript:fontZoomA();", + "http://www.ycit.cn/javascript:fontZoomB();", + "http://www.ycit.cn/ShowAuthor.asp?ChannelID=1001&AuthorName=Ñγǹ¤Ñ§Ôº", + "http://www.ycit.cn/ShowCopyFrom.asp?ChannelID=1001&SourceName=Ñγǹ¤Ñ§Ôº", + "http://www.ycit.cn/ShowArticle.asp?ArticleID=19&Page=6", + "http://www.ycit.cn/ShowArticle.asp?ArticleID=19&Page=1", + "http://www.ycit.cn/ShowArticle.asp?ArticleID=19&Page=2", + "http://www.ycit.cn/ShowArticle.asp?ArticleID=19&Page=3", + "http://www.ycit.cn/ShowArticle.asp?ArticleID=19&Page=4", + "http://www.ycit.cn/ShowArticle.asp?ArticleID=19&Page=5", + "http://www.ycit.cn/ShowArticle.asp?ArticleID=19&Page=8", + "http://www.ycit.cn/ShowArticle.asp?ArticleID=19&Page=9", + "http://www.ycit.cn/ShowArticle.asp?ArticleID=19&Page=10", + "http://www.ycit.cn/ycitgk/ShowArticle.asp?ArticleID=18", + "http://www.ycit.cn/ycitgk/ShowArticle.asp?ArticleID=1018", + "http://www.ycit.cn/javascript:window.external.addFavorite('http://gjjl.ycit.cn/english/','Ñγǹ¤Ñ§Ôº');", + "http://www.ycit.cn/mailto:ycitmaster@163.com", + "http://www.ycit.cn/FriendSite/Index.asp", + "http://www.ycit.cn/Copyright.asp", + "http://paper.ycit.cn/111", + "http://xxgk.ycit.cn", + "http://zjb.ycit.cn", + "http://yctvu.ycit.cn", + "http://gjjl.ycit.cn", + "http://gjjl.ycit.cn/english", + "http://gjjl.ycit.cn", + "http://gjjl.ycit.cn/english", + "http://www.ycit.cn/ShowArticle.asp?ArticleID=19&Page=7", + "http://paper.ycit.cn/111", + "http://xxgk.ycit.cn", + "http://zjb.ycit.cn", + "http://yctvu.ycit.cn", + "http://gjjl.ycit.cn", + "http://gjjl.ycit.cn/english", + "http://gjjl.ycit.cn", + "http://gjjl.ycit.cn/english", + "http://paper.ycit.cn/111", + "http://xxgk.ycit.cn", + "http://zjb.ycit.cn", + "http://yctvu.ycit.cn", + "http://gjjl.ycit.cn", + "http://paper.ycit.cn/111", + "http://xxgk.ycit.cn", + "http://zjb.ycit.cn", + "http://yctvu.ycit.cn", + "http://gjjl.ycit.cn", + "http://paper.ycit.cn/111", + "http://xxgk.ycit.cn", + "http://zjb.ycit.cn", + "http://yctvu.ycit.cn", + "http://gjjl.ycit.cn", + "http://www.ycit.cn/Usong.jsp?SmallID=13", + "http://paper.ycit.cn/111", + "http://xxgk.ycit.cn", + "http://zjb.ycit.cn", + "http://yctvu.ycit.cn", + "http://gjjl.ycit.cn", + "http://www.ycit.cn/javascript:jump202JCl7781080200url();", + "http://paper.ycit.cn", + "http://xxgk.ycit.cn", + "http://xxgk.ycit.cn", + "http://www.ycit.cn", + "http://www.ycit.cn/Uview.jsp?SmallID=14", + "http://paper.ycit.cn/111", + "http://xxgk.ycit.cn", + "http://zjb.ycit.cn", + "http://yctvu.ycit.cn", + "http://gjjl.ycit.cn", + "http://www.ycit.cn/javascript:jump25s7Cl7781080200url();", + "http://paper.ycit.cn", + "http://xxgk.ycit.cn", + "http://xxgk.ycit.cn", + "http://www.ycit.cn", + "http://paper.ycit.cn/111", + "http://xxgk.ycit.cn", + "http://zjb.ycit.cn", + "http://yctvu.ycit.cn", + "http://gjjl.ycit.cn", + "http://paper.ycit.cn/111", + "http://xxgk.ycit.cn", + "http://zjb.ycit.cn", + "http://yctvu.ycit.cn", + "http://gjjl.ycit.cn", + "http://paper.ycit.cn/111", + "http://xxgk.ycit.cn", + "http://zjb.ycit.cn", + "http://yctvu.ycit.cn", + "http://gjjl.ycit.cn", + "http://paper.ycit.cn/111", + "http://xxgk.ycit.cn", + "http://zjb.ycit.cn", + "http://yctvu.ycit.cn", + "http://gjjl.ycit.cn", + "http://paper.ycit.cn/111", + "http://xxgk.ycit.cn", + "http://zjb.ycit.cn", + "http://yctvu.ycit.cn", + "http://gjjl.ycit.cn", + "http://www.ycit.cn/ListVideo.jsp?SmallID=38", + "http://paper.ycit.cn/111", + "http://xxgk.ycit.cn", + "http://zjb.ycit.cn", + "http://yctvu.ycit.cn", + "http://gjjl.ycit.cn", + "http://paper.ycit.cn", + "http://xxgk.ycit.cn", + "http://xxgk.ycit.cn", + "http://www.ycit.cn", + "http://www.ycit.cn/ListNews.jsp?SmallID=27", + "http://paper.ycit.cn/111", + "http://xxgk.ycit.cn", + "http://zjb.ycit.cn", + "http://yctvu.ycit.cn", + "http://gjjl.ycit.cn", + "http://www.ycit.cn/javascript:jump2VBeCl7781080200url();", + "http://paper.ycit.cn", + "http://xxgk.ycit.cn", + "http://xxgk.ycit.cn", + "http://www.ycit.cn", + "http://www.ycit.cn/ListNews.jsp?SmallID=28", + "http://paper.ycit.cn/111", + "http://xxgk.ycit.cn", + "http://zjb.ycit.cn", + "http://yctvu.ycit.cn", + "http://gjjl.ycit.cn", + "http://www.ycit.cn/javascript:jump2rW9Cl7781080200url();", + "http://paper.ycit.cn", + "http://xxgk.ycit.cn", + "http://xxgk.ycit.cn", + "http://www.ycit.cn", + "http://www.ycit.cn/ListNews.jsp?SmallID=30", + "http://paper.ycit.cn/111", + "http://xxgk.ycit.cn", + "http://zjb.ycit.cn", + "http://yctvu.ycit.cn", + "http://gjjl.ycit.cn", + "http://www.ycit.cn/javascript:jump2W1fCl7781080200url();", + "http://paper.ycit.cn", + "http://xxgk.ycit.cn", + "http://xxgk.ycit.cn", + "http://www.ycit.cn", + "http://www.ycit.cn/ListNews.jsp?SmallID=39", + "http://paper.ycit.cn/111", + "http://xxgk.ycit.cn", + "http://zjb.ycit.cn", + "http://yctvu.ycit.cn", + "http://gjjl.ycit.cn", + "http://www.ycit.cn/javascript:jump2sX0Cl7781080200url();", + "http://paper.ycit.cn", + "http://xxgk.ycit.cn", + "http://xxgk.ycit.cn", + "http://www.ycit.cn", + "http://www.ycit.cn/Index.asp", + "http://www.ycit.cn/Article/ShowClass.asp?ClassID=9", + "http://www.ycit.cn/mailto:ybbj@ycit.cn", + "http://paper.ycit.cn/User/Login.Asp", + "http://www.ycit.cn/Announce.asp?ChannelID=0&ID=9", + "http://www.ycit.cn/Reg.asp", + "http://www.ycit.cn/LostPass.asp", + "http://paper.ycit.cn", + "http://www.ycit.cn/Help.asp?Action=TimeZone", + "http://www.ycit.cn/Article_List.asp?Cid=2", + "http://www.ycit.cn/Article_List.asp?Cid=3", + "http://www.ycit.cn/Article_List.asp?Cid=4", + "http://www.ycit.cn/Article_List.asp?Cid=5", + "http://www.ycit.cn/Article_List.asp?Cid=6", + "http://www.ycit.cn/Article_List.asp?Cid=7", + "http://www.ycit.cn/Article_List.asp?Cid=8", + "http://www.ycit.cn/Article_List.asp?Cid=9", + "http://www.ycit.cn/Article_List.asp?Cid=10", + "http://www.ycit.cn/Article_List.asp?Cid=14", + "http://www.ycit.cn/Article_List.asp?Cid=15", + "http://www.ycit.cn/Http://gbz.ycit.cn/index.asp", + "http://paper.ycit.cn", + "http://www.ycit.cn/Article_List.asp?Action=1", + "http://www.ycit.cn/Article_Show.asp?ID=1303", + "http://www.ycit.cn/Article_Show.asp?ID=1301", + "http://www.ycit.cn/Article_Show.asp?ID=1300", + "http://www.ycit.cn/Article_Show.asp?ID=1299", + "http://www.ycit.cn/Article_Show.asp?ID=1298", + "http://www.ycit.cn/Article_Show.asp?ID=1297", + "http://www.ycit.cn/Article_Show.asp?ID=1296", + "http://www.ycit.cn/Article_Show.asp?ID=1295", + "http://www.ycit.cn/Article_Show.asp?ID=1294", + "http://www.ycit.cn/Article_Show.asp?ID=1293", + "http://www.ycit.cn/Article_Show.asp?ID=1292", + "http://www.ycit.cn/Article_Show.asp?ID=1291", + "http://www.ycit.cn/Affiche_List.asp", + "http://www.ycit.cn/Article_Show.asp?ID=99", + "http://www.ycit.cn/Article_Show.asp?ID=63", + "http://www.ycit.cn/Article_Show.asp?ID=73", + "http://www.ycit.cn/Article_Show.asp?ID=448", + "http://www.ycit.cn/Article_Show.asp?ID=121", + "http://www.ycit.cn/Article_Show.asp?ID=139", + "http://www.ycit.cn/Article_Show.asp?ID=816", + "http://www.ycit.cn/Article_Show.asp?ID=529", + "http://www.ycit.cn/Article_Show.asp?ID=196", + "http://www.ycit.cn/Article_Show.asp?ID=1026", + "http://www.ycit.cn/UpFile_List.asp?Action=1", + "http://www.ycit.cn/Article_Show.asp?ID=1278", + "http://www.ycit.cn/Article_Show.asp?ID=1071", + "http://www.ycit.cn/Article_Show.asp?ID=766", + "http://www.ycit.cn/Article_Show.asp?ID=620", + "http://www.ycit.cn/UserReg.asp", + "http://www.ycit.cn/UserLostPW.asp", + "http://www.ycit.cn/Article_List.asp?Action=2", + "http://www.ycit.cn/Article_List.asp?Action=3", + "http://www.ycit.cn/Article_Show.asp?ID=16", + "http://www.ycit.cn/Article_Show.asp?ID=15", + "http://www.ycit.cn/Article_Show.asp?ID=13", + "http://www.ycit.cn/Article_Show.asp?ID=12", + "http://www.ycit.cn/Article_Show.asp?ID=11", + "http://www.ycit.cn/FriendSite.asp", + "http://www.ycit.cn/AboutUs.asp", + "http://www.ycit.cn/Contact.asp", + "http://www.ycit.cn/Article/ycitnew04/z04", + "http://www.ycit.cn/Help.asp", + "http://xcb.ycit.cn", + "http://xxgk.ycit.cn", + "http://xxgk.ycit.cn" +] \ No newline at end of file diff --git a/static/url_list/url_visited_list.json b/static/url_list/url_visited_list.json new file mode 100644 index 0000000..b495645 --- /dev/null +++ b/static/url_list/url_visited_list.json @@ -0,0 +1,236 @@ +[ + "http://www.ycit.cn/", + "http://www.ycit.cn", + "http://www.ycit.cn/Uproduce.jsp?SmallID=11", + "http://www.ycit.cn/Uleader.jsp?SmallID=12", + "http://www.ycit.cn/Usong.jsp?SmallID=13", + "http://www.ycit.cn/Uview.jsp?SmallID=14", + "http://www.ycit.cn/ListVideo.jsp?SmallID=38", + "http://www.ycit.cn/ListNews.jsp?SmallID=27", + "http://www.ycit.cn/ListNews.jsp?SmallID=28", + "http://www.ycit.cn/ListNews.jsp?SmallID=30", + "http://www.ycit.cn/ListNews.jsp?SmallID=39", + "http://paper.ycit.cn/111", + "http://gbt.ycit.cn/main/index.asp", + "http://xxgk.ycit.cn", + "http://www.ycit.cn/SchoolSet.jsp?SmallID=15", + "http://www.ycit.cn/SchoolSet.jsp?SmallID=16", + "http://zjb.ycit.cn", + "http://jwc.ycit.cn", + "http://yjsc.ycit.cn/Index.html", + "http://yctvu.ycit.cn", + "http://www.ycit.cn/ShowDevelopment.jsp?SmallID=25", + "http://gjjl.ycit.cn", + "http://rsc.ycit.cn/main.aspx?Column=07", + "http://xyh.ycit.cn/xyh/index.asp", + "http://www.ycit.cn/ShowScrool.jsp?id=2603&smallid=28", + "http://www.ycit.cn/ShowScrool.jsp?id=2597&smallid=28", + "http://www.ycit.cn/ShowScrool.jsp?id=2576&smallid=30", + "http://www.ycit.cn/ShowScrool.jsp?id=2519&smallid=28", + "http://www.ycit.cn/ShowScrool.jsp?id=2481&smallid=28", + "http://www.ycit.cn/ShowScrool.jsp?id=2432&smallid=28", + "http://www.ycit.cn/ShowScrool.jsp?id=2427&smallid=28", + "http://www.ycit.cn/ShowScrool.jsp?id=2342&smallid=35", + "http://www.ycit.cn/ShowScrool.jsp?id=2330&smallid=28", + "http://www.ycit.cn/ShowScrool.jsp?id=2265&smallid=28", + "http://www.ycit.cn/ShowScrool.jsp?id=2239&smallid=37", + "http://www.ycit.cn/ShowNews.jsp?id=2608&smallid=28", + "http://www.ycit.cn/ShowNews.jsp?id=2603&smallid=28", + "http://www.ycit.cn/ShowNews.jsp?id=2602&smallid=28", + "http://www.ycit.cn/ShowNews.jsp?id=2599&smallid=28", + "http://www.ycit.cn/ShowNews.jsp?id=2597&smallid=28", + "http://www.ycit.cn/ShowNews.jsp?id=2592&smallid=28", + "http://www.ycit.cn/ShowNews.jsp?id=2598&smallid=30", + "http://www.ycit.cn/ShowNews.jsp?id=2591&smallid=30", + "http://www.ycit.cn/ShowNews.jsp?id=2587&smallid=30", + "http://www.ycit.cn/ShowNews.jsp?id=2586&smallid=30", + "http://www.ycit.cn/ShowNews.jsp?id=2585&smallid=30", + "http://www.ycit.cn/ShowNews.jsp?id=2582&smallid=30", + "http://www.ycit.cn/ShowNotice.jsp?id=2601&smallid=35", + "http://www.ycit.cn/ShowNotice.jsp?id=2589&smallid=35", + "http://www.ycit.cn/ShowNotice.jsp?id=2584&smallid=35", + "http://www.ycit.cn/ShowNotice.jsp?id=2558&smallid=35", + "http://www.ycit.cn/ShowNotice.jsp?id=2518&smallid=35", + "http://www.ycit.cn/ShowNotice.jsp?id=2497&smallid=35", + "http://www.ycit.cn/ShowNews.jsp?id=2579&smallid=27", + "http://www.ycit.cn/ShowNews.jsp?id=2572&smallid=27", + "http://www.ycit.cn/ShowNews.jsp?id=2583&smallid=27", + "http://www.ycit.cn/ShowNews.jsp?id=2580&smallid=27", + "http://www.ycit.cn/ShowNews.jsp?id=2556&smallid=27", + "http://www.ycit.cn/ShowNews.jsp?id=2581&smallid=27", + "http://www.ycit.cn/ShowScience.jsp?id=2538&smallid=34", + "http://www.ycit.cn/ShowScience.jsp?id=2534&smallid=34", + "http://www.ycit.cn/ShowHighedu.jsp?id=2596&smallid=36", + "http://www.ycit.cn/ShowHighedu.jsp?id=2595&smallid=36", + "http://newoa.ycit.cn", + "http://www.ycit.cn", + "http://paper.ycit.cn/111", + "http://xxgk.ycit.cn", + "http://zjb.ycit.cn", + "http://yctvu.ycit.cn", + "http://gjjl.ycit.cn", + "http://newoa.ycit.cn", + "http://www.ycit.cn/Uproduce.jsp?SmallID=11", + "http://paper.ycit.cn/111", + "http://xxgk.ycit.cn", + "http://zjb.ycit.cn", + "http://yctvu.ycit.cn", + "http://gjjl.ycit.cn", + "http://www.ycit.cn/Uleader.jsp?SmallID=12", + "http://paper.ycit.cn/111", + "http://xxgk.ycit.cn", + "http://zjb.ycit.cn", + "http://yctvu.ycit.cn", + "http://gjjl.ycit.cn", + "http://www.ycit.cn/UleaderNews.jsp?SmallID=12&id=625", + "http://www.ycit.cn/UleaderNews.jsp?SmallID=12&id=626", + "http://www.ycit.cn/UleaderNews.jsp?SmallID=12&id=633", + "http://www.ycit.cn/UleaderNews.jsp?SmallID=12&id=627", + "http://wwwold.ycit.cn/ycitgk/ShowArticle.asp?ArticleID=19&Page=7", + "http://www.ycit.cn/UleaderNews.jsp?SmallID=12&id=628", + "http://wwwold.ycit.cn/ycitgk/ShowArticle.asp?ArticleID=19&Page=8", + "http://www.ycit.cn/UleaderNews.jsp?SmallID=12&id=629", + "http://wwwold.ycit.cn/ycitgk/ShowArticle.asp?ArticleID=19&Page=9", + "http://www.ycit.cn/UleaderNews.jsp?SmallID=12&id=630", + "http://www.ycit.cn/UleaderNews.jsp?SmallID=12&id=631", + "http://www.ycit.cn/UleaderNews.jsp?SmallID=12&id=632", + "http://www.ycit.cn/Usong.jsp?SmallID=13", + "http://paper.ycit.cn/111", + "http://xxgk.ycit.cn", + "http://zjb.ycit.cn", + "http://yctvu.ycit.cn", + "http://gjjl.ycit.cn", + "http://www.ycit.cn/Uview.jsp?SmallID=14", + "http://paper.ycit.cn/111", + "http://xxgk.ycit.cn", + "http://zjb.ycit.cn", + "http://yctvu.ycit.cn", + "http://gjjl.ycit.cn", + "http://www.ycit.cn/showpicture.jsp?id=65&smallid=14", + "http://www.ycit.cn/showpicture.jsp?id=64&smallid=14", + "http://www.ycit.cn/showpicture.jsp?id=63&smallid=14", + "http://www.ycit.cn/showpicture.jsp?id=62&smallid=14", + "http://www.ycit.cn/showpicture.jsp?id=61&smallid=14", + "http://www.ycit.cn/ListVideo.jsp?SmallID=38", + "http://paper.ycit.cn/111", + "http://xxgk.ycit.cn", + "http://zjb.ycit.cn", + "http://yctvu.ycit.cn", + "http://gjjl.ycit.cn", + "http://www.ycit.cn/ListNews.jsp?SmallID=27", + "http://paper.ycit.cn/111", + "http://xxgk.ycit.cn", + "http://zjb.ycit.cn", + "http://yctvu.ycit.cn", + "http://gjjl.ycit.cn", + "http://www.ycit.cn/ListNews.jsp?SmallID=28", + "http://paper.ycit.cn/111", + "http://xxgk.ycit.cn", + "http://zjb.ycit.cn", + "http://yctvu.ycit.cn", + "http://gjjl.ycit.cn", + "http://www.ycit.cn/ListNews.jsp?SmallID=30", + "http://paper.ycit.cn/111", + "http://xxgk.ycit.cn", + "http://zjb.ycit.cn", + "http://yctvu.ycit.cn", + "http://gjjl.ycit.cn", + "http://www.ycit.cn/ListNews.jsp?SmallID=39", + "http://paper.ycit.cn/111", + "http://xxgk.ycit.cn", + "http://zjb.ycit.cn", + "http://yctvu.ycit.cn", + "http://gjjl.ycit.cn", + "http://www.ycit.cn/Index.asp", + "http://www.ycit.cn/Article/ShowClass.asp?ClassID=9", + "http://www.ycit.cn/mailto:ybbj@ycit.cn", + "http://paper.ycit.cn/User/Login.Asp", + "http://paper.ycit.cn", + "http://www.ycit.cn/111", + "http://www.ycit.cn/Announce.asp?ChannelID=101&ID=9", + "http://www.ycit.cn/javascript:jump2355Cl7781080200url();", + "http://www.ycit.cn/LinkSite.asp?Action=Reg", + "http://www.ycit.cn/LinkSite.asp", + "http://www.ycit.cn/Editor.asp?id=EditorTemp&style=Template&cid=0&CssID=0#", + "http://www.ycit.cn/javascript:window.external.addFavorite('http://paper.ycit.cn','Ñγǹ¤Ñ§Ôº±¨')", + "http://www.ycit.cn/Help.asp?Action=aboutweb", + "http://www.ycit.cn/Help.asp?Action=Copyright", + "http://www.ycit.cn/guestbook/Index.asp", + "http://www.ycit.cn/OnlineList.asp", + "http://paper.ycit.cn", + "http://www.ycit.cn/index.asp", + "http://www.ycit.cn/Article.asp?ArtClassID=8", + "http://www.ycit.cn/Article.asp?ArtClassID=5", + "http://www.ycit.cn/Article.asp?ArtClassID=6", + "http://www.ycit.cn/Article.asp?ArtClassID=4", + "http://www.ycit.cn/Article.asp?ArtClassID=3", + "http://www.ycit.cn/Article.asp?ArtClassID=2", + "http://www.ycit.cn/Article.asp?ArtClassID=7", + "http://www.ycit.cn/Article.asp?ArtClassID=9", + "http://www.ycit.cn/Picture.asp", + "http://www.ycit.cn/Announce.asp?AnnID=19", + "http://www.ycit.cn/ArticleShow.asp?ArtID=661&ArtClassID=16", + "http://www.ycit.cn/ArticleShow.asp?ArtID=660&ArtClassID=16", + "http://www.ycit.cn/ArticleShow.asp?ArtID=629&ArtClassID=14", + "http://www.ycit.cn/ArticleShow.asp?ArtID=548&ArtClassID=24", + "http://www.ycit.cn/ArticleShow.asp?ArtID=467&ArtClassID=14", + "http://www.ycit.cn/ArticleShow.asp?ArtID=494&ArtClassID=14", + "http://www.ycit.cn/ArticleShow.asp?ArtID=493&ArtClassID=14", + "http://www.ycit.cn/ArticleShow.asp?ArtID=565&ArtClassID=18", + "http://www.ycit.cn/ArticleShow.asp?ArtID=388&ArtClassID=14", + "http://www.ycit.cn/ArticleShow.asp?ArtID=554&ArtClassID=24", + "http://www.ycit.cn/ArticleShow.asp?ArtID=687", + "http://www.ycit.cn/ArticleShow.asp?ArtID=665", + "http://www.ycit.cn/ArticleShow.asp?ArtID=661", + "http://www.ycit.cn/ArticleShow.asp?ArtID=660", + "http://www.ycit.cn/ArticleShow.asp?ArtID=585", + "http://www.ycit.cn/ArticleShow.asp?ArtID=565", + "http://www.ycit.cn/ArticleShow.asp?ArtID=564", + "http://www.ycit.cn/ArticleShow.asp?ArtID=563", + "http://www.ycit.cn/ArticleShow.asp?ArtID=529", + "http://www.ycit.cn/ArticleShow.asp?ArtID=526", + "http://www.ycit.cn/ArticleShow.asp?ArtID=692", + "http://www.ycit.cn/ArticleShow.asp?ArtID=686", + "http://www.ycit.cn/ArticleShow.asp?ArtID=684", + "http://www.ycit.cn/ArticleShow.asp?ArtID=666", + "http://www.ycit.cn/ArticleShow.asp?ArtID=658", + "http://www.ycit.cn/ArticleShow.asp?ArtID=654", + "http://www.ycit.cn/ArticleShow.asp?ArtID=633", + "http://www.ycit.cn/ArticleShow.asp?ArtID=632", + "http://www.ycit.cn/ArticleShow.asp?ArtID=597", + "http://www.ycit.cn/ArticleShow.asp?ArtID=596", + "http://www.ycit.cn/ArticleShow.asp?ArtID=704", + "http://www.ycit.cn/ArticleShow.asp?ArtID=703", + "http://www.ycit.cn/ArticleShow.asp?ArtID=702", + "http://www.ycit.cn/ArticleShow.asp?ArtID=701", + "http://www.ycit.cn/ArticleShow.asp?ArtID=700", + "http://www.ycit.cn/ArticleShow.asp?ArtID=711", + "http://www.ycit.cn/ArticleShow.asp?ArtID=710", + "http://www.ycit.cn/ArticleShow.asp?ArtID=709", + "http://www.ycit.cn/ArticleShow.asp?ArtID=708", + "http://www.ycit.cn/ArticleShow.asp?ArtID=691", + "http://www.ycit.cn/ArticleShow.asp?ArtID=669", + "http://www.ycit.cn/ArticleShow.asp?ArtID=479", + "http://www.ycit.cn/ArticleShow.asp?ArtID=478", + "http://www.ycit.cn/ArticleShow.asp?ArtID=477", + "http://www.ycit.cn/ArticleShow.asp?ArtID=476", + "http://www.ycit.cn/ArticleShow.asp?ArtID=707", + "http://www.ycit.cn/ArticleShow.asp?ArtID=705", + "http://www.ycit.cn/ArticleShow.asp?ArtID=699", + "http://www.ycit.cn/ArticleShow.asp?ArtID=697", + "http://www.ycit.cn/ArticleShow.asp?ArtID=696", + "http://www.ycit.cn/PictureShow.asp?PicID=53", + "http://www.ycit.cn/PictureShow.asp?PicID=52", + "http://www.ycit.cn/PictureShow.asp?PicID=51", + "http://www.ycit.cn/PictureShow.asp?PicID=50", + "http://xcb.ycit.cn", + "http://www.ycit.cn/javascript:window.external.addFavorite('gbt.ycit.cn','Ñγǹ¤Ñ§Ôº¹ã²¥Ì¨')", + "http://www.ycit.cn/mailto:yggbt@ycit.cn", + "http://xxgk.ycit.cn", + "http://www.ycit.cn/Index.html", + "http://www.ycit.cn/ycitxsdt/Index.asp", + "http://www.ycit.cn/ycitpy/Index.asp", + "http://www.ycit.cn/xxgk2/Index.asp", + "http://www.ycit.cn/xxgk3/Index.asp", + "http://www.ycit.cn/xxgk4/Index.asp" +] \ No newline at end of file diff --git a/test_01.py b/test_01.py new file mode 100644 index 0000000..916ecbd --- /dev/null +++ b/test_01.py @@ -0,0 +1,19 @@ +# coding=utf-8 +__author__ = 'zhanghe' + +import re +import json + + +test_html = '''苏州北塔 ''' + + +def re_html(html): + reg_a = '(.+?)' + aa_list = re.compile(reg_a, re.S).findall(html) + return json.dumps(aa_list, ensure_ascii=False, indent=4) + + +if __name__ == '__main__': + print re_html(test_html) diff --git a/tools/graph.py b/tools/graph.py new file mode 100644 index 0000000..2ab5ebf --- /dev/null +++ b/tools/graph.py @@ -0,0 +1,70 @@ +# encoding: utf-8 +__author__ = 'zhanghe' + + +class Graph(object): + def __init__(self, *args, **kwargs): + self.node_neighbors = {} + self.visited = {} + + def add_nodes(self, nodelist): + for node in nodelist: + self.add_node(node) + + def add_node(self, node): + if node not in self.nodes(): + self.node_neighbors[node] = [] + + def add_edge(self, edge): + u, v = edge + if (v not in self.node_neighbors[u]) and (u not in self.node_neighbors[v]): + self.node_neighbors[u].append(v) + if (u != v): + self.node_neighbors[v].append(u) + + def nodes(self): + return self.node_neighbors.keys() + + def breadth_first_search(self, root=None): + queue = [] + order = [] + + def bfs(): + while len(queue) > 0: + node = queue.pop(0) + + self.visited[node] = True + for n in self.node_neighbors[node]: + if (n not in self.visited) and (n not in queue): + queue.append(n) + order.append(n) + + if root: + queue.append(root) + order.append(root) + bfs() + + for node in self.nodes(): + if not node in self.visited: + queue.append(node) + order.append(node) + bfs() + print order + + return order + + +if __name__ == '__main__': + g = Graph() + g.add_nodes([i + 1 for i in range(8)]) + g.add_edge((1, 2)) + g.add_edge((1, 3)) + g.add_edge((2, 4)) + g.add_edge((2, 5)) + g.add_edge((4, 8)) + g.add_edge((5, 8)) + g.add_edge((3, 6)) + g.add_edge((3, 7)) + g.add_edge((6, 7)) + print "nodes:", g.nodes() + g.breadth_first_search(1) \ No newline at end of file diff --git a/www_ycit_cn.py b/www_ycit_cn.py new file mode 100644 index 0000000..e7e5ab3 --- /dev/null +++ b/www_ycit_cn.py @@ -0,0 +1,92 @@ +# encoding: utf-8 +__author__ = 'zhanghe' + + +import requests +from pyquery import PyQuery as Pq +import json + + +root_url = 'http://www.ycit.cn/' # 爬虫入口 +web_host = 'http://www.ycit.cn/' +web_domain = 'ycit.cn' +url_list = [root_url] # 爬虫待访问url列表 +url_visited_list = [] # 爬虫已访问url列表 + + +def url_join(url_str, host): + """ + url拼接 + :param url_str: + :param host: + :return: + """ + if url_str is not None: + if url_str.startswith(host) or url_str.startswith('http://'): + return url_str + return host.rstrip('/') + '/' + url_str.lstrip('/') + + +def url_filter(url_str, domain): + """ + 过滤其它域名 + :param url_str: + :param domain: + :return: + """ + if url_str is not None: + if domain in url_str: + return url_str + + +def save(result_list, file_name): + # 保存json至服务器 + import os + filepath = 'static/url_list/' + if not os.path.isdir(filepath): + os.mkdir(filepath) + filename = filepath + file_name + result_json = json.dumps(result_list, indent=4, ensure_ascii=False) + with open(filename, 'wb') as f: + f.write(result_json.encode('utf-8')) + + +def web_crawler(url_node=None): + if url_node is None: + url_node = root_url + response = requests.get(url_node) + text_pq = Pq(response.text) + tags = text_pq('html').find('a') + for tag in tags: + url_pre = Pq(tag).attr('href') + if url_pre != '#' and url_pre is not None: # 过滤掉错误地址 + url = url_filter(url_join(url_pre, web_host), web_domain) + if url is not None and url not in url_list and url not in url_visited_list: # 去重 + url_list.append(url.rstrip('/')) + print json.dumps(url_list, indent=4, ensure_ascii=False) + print len(url_list) + url_visited_list.append(url_node) + save(url_list, 'url_list.json') + save(url_visited_list, 'url_visited_list.json') + + + +if __name__ == "__main__": + while len(url_list) > 0: + web_crawler(url_list.pop(0)) + # for url_item in url_list: + # web_crawler(url_item) + +# 中心主进程 +# 分配url(待访问列表减少) + +# 工作进程 +# 请求url(已访问列表增加) +# 补充url(增加待访问列表) +# +# url_list = [] # 爬虫待访问url列表 +# url_visited_list = [] # 爬虫已访问url列表 + + + +