scrapy
2016-05-25 03:06:58 0 举报
登录查看完整内容
Scrapy是一个为了爬取网站数据,提取结构性数据而编写的应用框架。它使用Python语言编写,可以处理整个网页的请求和响应过程,并且提供了丰富的中间件来方便用户完成各种定制化需求。Scrapy具有高效、灵活的特性,支持分布式爬取,可用于数据挖掘、监测、自动化测试等领域。同时,Scrapy还提供了多种选择器来解析HTML和XML文档,使得用户可以更加方便地获取所需的数据。总之,Scrapy是一个功能强大、易于使用的Python爬虫框架,可以帮助用户快速地从互联网中获取有价值的信息。