分类
计算机

Scrapy

Scrapy怎么读

Scrapy怎么发音

[‘skreipi]

Scrapy是什么意思

Scrapy是一个用Python编写的免费开放源代码网络爬网框架。它最初是为Web抓取而设计的,也可以用于使用API提取数据或用作通用的Web搜寻器。目前由Zyte维护,该公司以前是Scrapinghub(一家网络抓取开发和服务公司)。

Scrapy项目体系结构是围绕“蜘蛛”构建的,“蜘蛛”是独立的爬虫,并提供了一组指令。遵循诸如Django之类的其他不重复框架的精神,它允许开发人员重用其代码,从而使构建和扩展大型爬网项目变得更加容易。Scrapy还提供了一个网络爬网外壳,开发人员可以使用它来测试他们对网站行为的假设。一些使用Scrapy的知名公司和产品包括:Lyst,Parse.ly,Sayone Technologies,Sciences Po Medialab,Data.gov.uk的世界政府数据站点。

发表评论

您的电子邮箱地址不会被公开。 必填项已用*标注