小白教程

 找回密码
 立即注册
查看: 5791|回复: 2

scrapy新手请教,parse函数没有被执行

[复制链接]

1

主题

2

帖子

5

积分

新手上路

Rank: 1

积分
5
发表于 2021-2-24 17:16:05 | 显示全部楼层 |阅读模式
  1. mport scrapy

  2. class getdata(scrapy.Spider):
  3.     name = "baidu"
  4.     start_urls=["www.baidu.com"]

  5.     def parse(self, response):
  6.         print(1)
  7. mport scrapy

  8. class getdata(scrapy.Spider):
  9.     name = "baidu"
  10.     start_urls=["www.baidu.com"]

  11.     def parse(self, response):
  12.         print(1)
复制代码
我不能打印1。
。程序执行也不会报告错误。是否缺少插件或配置问题?百度一次也没有解决这个问题。

回复

使用道具 举报

0

主题

2

帖子

4

积分

新手上路

Rank: 1

积分
4
发表于 2021-3-9 04:39:26 | 显示全部楼层
ROBOTSTXT_OBEY = False  setting中设置试试
回复

使用道具 举报

1

主题

2

帖子

5

积分

新手上路

Rank: 1

积分
5
发表于 2021-3-17 12:04:56 | 显示全部楼层
scrapy 的启动方式为在爬虫项目目录下cmd执行 scrapy crawl xxx      XXX-为你的爬虫名     
直接run是不行的
上面的方法是定义了一个方法来执行CMD中启动语句 比较方便
回复

使用道具 举报

您需要登录后才可以回帖 登录 | 立即注册

本版积分规则

Archiver|手机版|小黑屋|小白教程 ( 粤ICP备20019910号 )

GMT+8, 2024-11-24 15:33 , Processed in 0.023571 second(s), 25 queries .

Powered by Discuz! X3.4

© 2001-2017 Comsenz Inc. Template By 【未来科技】【 www.wekei.cn 】

快速回复 返回顶部 返回列表