请问为什么这个爬虫没有爬出内容啊

item.py

python-*- coding: utf-8 -*
import scrapy
class BokeItem(scrapy.Item):
    url=scrapy.Field()
    title=scrapy.Field()
    content=scrapy.Field()

boke_spider.py

python-*- coding: utf-8 -*-
from scrapy.contrib.spiders import CrawlSpider ,Rule
from scrapy.contrib.linkextractors import LinkExtractor
from boke.items import BokeItem

class BokeItem(CrawlSpider):
    name = 'blog'
    start_urls =['http://blog.sina.com.cn/s/blog_4701280b0102eo83.html']

    def parse_torrent(self,response):
        torrent=BokeItem()
        torrent['url']=response.url
        torrent['title']=response.xpath("//h2[@class='titName SG_txta']/text()").extract()[0]
        torrent['content']=response.xpath("//div[@style='min-height:22px']/text()").extract()[0]
        return  torrent
BIG阳
浏览 818回答 3
3回答

摇曳的蔷薇

from scrapy.contrib.spiders import CrawlSpider ,Rule 你调用的是CrawlSpider类,但是显然没有写任何的规则 建议改为Spider类,并将parse_torrent改名为parse,如下: from scrapy.contrib.spiders import Spider from boke.items import BokeItem class BokeItem(Spider):

慕后森

试试去看看官方doc

忽然笑

试试看看这个博客,专门针对scrapy的
打开App,查看更多内容
随时随地看视频慕课网APP

相关分类

Python