如果我在 Python 中安装 Scrapy 时出现以下错误怎么办

scapy 安装有几种类型的错误。

由于版本冲突，安装scapy时无法完成安装，或者安装无法正确使用。

该问题是由 64 位和 32 位编译的位数不同引起的。

解决办法：简单的解决办法。 如果瘙痒对你很重要。

可以从 pypi 重新安装一套，然后从头开始安装 scrapy。 也可以从非官方**安装一个好的软件包，一口气。 洞穴准备。

耐心解决纳武毁坏问题。 拿orange scrapy的源码，执行python install，遇到不好用的包就替换它。 解决方法是获取包的源**，先删除site-packages中对应的包，然后手动执行python install。

请做好准备，因为您很可能需要 vc++ 2010 的编译器。

最简单的方法是使用 pip install scrapy。 如果你在 ubuntu apt-get install python-scrapy 下，你就完成了。

这个错误可以通过上面的解决方案来解决。

这个问题已经困扰了我好几天了...... 大哥后来是怎么解决这个问题的？

1.在抓取数据时，有时候我们会遇到被**IP屏蔽等情况，响应状态码是403，所以我们希望这个时候能够抛出。

关闭蜘蛛。

2. 但是，正如 Scrapy 官网上提到的，Scrapy 的默认设置是过滤掉有问题的 HTTP 响应（即响应状态码不在 200-300 之间）。 因此，403的情况将被忽略，这意味着我们不处理这个url请求的响应，而直接忽略它，即我们用==400来判断它没有效果，因为只有状态在200-300的请求才会被处理。

3.如果我们想捕获或处理 403 或其他请求，例如 404 或 500，我们将 403 放在 spider 类的 Handle HttpStatus List 中。 只需执行以下操作即可。

class myspider(crawlspider):

或者在 httperror 允许代码设置中输入 403。

也就是说，在设置中添加 httperror 允许的代码 = [403]，httperror 允许的代码是默认的。

4.设置句柄 httpstatus list 或 httperror 允许代码后，可以通过判断 == 403 来抛出 closespider 异常来结束抓取。