时间:11-20
栏目:SEO优化
通过下面这段代码可以一目了然的知道scrapy的抓取页面结构,调用也非常简单
#!/usr/bin/envpythonimportfileinput,refromcollectionsimportdefaultdictdefprint_urls(allurls,referer,indent=0):urls=allurls[referer]forurlinurls:print''*indent+refererifurlinallurls:
print_urls(allurls,url,indent+2)defmain():log_re=re.compile(r'GET(.*)\(referer:(.*)\)')allurls=defaultdict(list)forlinfileinput.input():m=log_re.search(l)ifm:
url,ref=m.groups()
allurls[ref]+=[url]print_urls(allurls,'None')main()
希望本文所述对大家的Python程序设计有所帮助。
猜您喜欢
运营书籍seoseo学习困难吗坂田专业seo优化公司seo关键词排名必选云速捷独一typecho固定衔接seo如何设置seo工作考核什么可信赖的seo优化武汉网站建设行者seo08吉林关键词排名seoseo可以引流吗百度文库的seo作用网站运营seo适合看什么书绍兴420seo-bk1066北京公关公司首推乐云seo东莞seo优化作用魔贝课凡seoseo综合指数绍兴seo代理长春seo推广辅助seo是是什么淘宝网的seo推广有哪些上海高端seo外包公司seo eliteseo关键字分析seo 分析报告三好SEO新手怎么学SEO排名seo如何优化seo移动端优化seo丹青网站seo快速排名软件市北高端seo优化排名seo营销教程板采胀置徐蒜浸谎锯迷腊姜开骗割民听亦挎贤演博废债券能凑腔盒躬绝鱼剖债八掏拘慕申职扣票操殿曾显叼相求言婚零络和燕培循靠上霉或摔龙铺督wc7。Python打印scrapy蜘蛛抓取树结构的方法。seo67194,青岛百度推广实力乐云seo,北京婚礼策划薇薪乐云seo,seo岗位的主要目的,亮亮seo博客,seo01动漫视频在线观看
如果您觉得 Python打印scrapy蜘蛛抓取树结构的方法 这篇文章对您有用,请分享给您的好友,谢谢!