扩展框架提供了一种将自己的自定义功能插入Scrapy的机制。 扩展只是在Scrapy启动时实… 继续阅读 爬虫蜘蛛Scrapy加载和激活扩展Extensions详细介绍(62)python Scrapy教程1.51以上版本

注意 scrapy.log已被弃用于其函数,支持显式调用Python标准日志记录。继续阅读以… 继续阅读 爬虫蜘蛛使用python内置日志记录系统Logging(38)python Scrapy教程1.51以上版本

内置异常参考 以下列出了Scrapy中包含的所有例外情况及其用法。 CloseSpider … 继续阅读 爬虫蜘蛛内置异常详解(37)python Scrapy教程1.51以上版本

在深入研究命令行工具及其子命令之前,让我们先了解一下Scrapy项目的目录结构。 虽然可以修… 继续阅读 (命令行工具)Scrapy项目的默认结构(9)python SCRAPY最新教程1.51以上版本

您可以-a 在运行蜘蛛时使用该选项为您的蜘蛛提供命令行参数: scrapy crawl qu… 继续阅读 运行爬虫蜘蛛crawl参数(6)python SCRAPY最新教程1.51以上版本

runpy– 找到并执行Python模块 源代码: Lib / runpy.py… 继续阅读 – 定位和执行Python模块 – 导入模块(Python教程)(参考资料)

modulefinder– 查找脚本使用的模块 源代码: Lib / modul… 继续阅读 – 查找脚本使用的模块 – 导入模块(Python教程)(参考资料)

codeop– 编译Python代码 源代码: Lib / codeop.py … 继续阅读 – 编译Python代码 – 自定义Python解释器(Python教程)(参考资料)

code– 解释器基类 源代码: Lib / code.py codemodul… 继续阅读 – 解释器基类 – 自定义Python解释器(Python教程)(参考资料)