Python 爬虫框架Scrapy 2.0.0

是一套基于 Twisted 的异步处理框架,纯 Python 实现的爬虫框架,用户只需要定制开发几个模块就可以轻松的实现一个爬虫,用来抓取网页内容以及各种图片。

此版本主要更新亮点包括:

  • 不再支持 Python 2
  • 部分协程语法支持和实验性异步支持
  • 新的 Response.follow_all 方法
  • FTP 对媒体管道的支持
  • 新的 Response.certificate 属性
  • 通过 DNS_RESOLVER 的 IPv6 支持

更新说明: https://github.com/scrapy/scrapy/releases/tag/2.0.0

下载地址:

https://scrapy.org/download/

人已赞赏
企业应用博客

项目管理工具Masterlab 2.0

2020-3-4 16:13:09

博客

微软开发的免费实用工具集PowerToys 0.15.0

2020-3-5 10:05:55

0 条回复 A文章作者 M管理员
    暂无讨论,说说你的看法吧
个人中心
购物车
优惠劵
今日签到
有新私信 私信列表
搜索