深圳高端网站设计公司_南京网站建设_中小企业网站建设_设计网站建设

from ScrapyProject.items import ScrapyprojectItemclass MainSpider(scrapy.Spider):name = "main"# allowed_domains = ["www.gushiwen.cn"]start_urls = ["https://www.gushiwen.cn/"]# 发送请求后会自动调用该函数# parse函数用于对数据进行解析# response参数表示，当请求成功后返回的响应数据def parse(self, response):# xpath返回的是列表，而scrapy会将xpath封装为一个Selector对象再返回# extract_first() 使用该方法可以将Selector对象转为原始xpath数据，并取出列表中的第一个元素# extract() 使用该方法可以将Selector对象转为原始xpath数据title = response.xpath('//div[@id="zhengwen85b7fe68d321"]//b/text()').extract()content = response.xpath('//div[@id="contson85b7fe68d321"]//text()').extract()# 实例化一个item对象item = ScrapyprojectItem()# 通过中括号的形式获得Item类中自定义里面的属性# 将处理好的数据赋值给item对象item['title'] = titleitem['content'] = content# 使用yield关键字将item对象提交到管道类的 Pipeline 方法中# 让其对数据进行持久化存储for i in range(3):yield item 深圳西乡网站建设免费网站制作平台长治网站制作诸城网站制作软件外包开发佛山网站建设网站建设案例内蒙古网站建设php网站设计小程序开发公司小程序开发公司旅游网站模板网页制作要多少钱宁波网站设计互动网站建设北京微信小程序开发网站建设开发外贸网站建设网站建设开发公司网站开发多少钱微信公众小程序开发asp网站建设网站建设哪个公司好网站设计制作工艺品网站模板营销网站设计公司北京网站制作公司公司网站建设费用天津网页制作企业网站建设公司网站设计建设公司贵州网站建设