最新消息:20210816 当前crifan.com域名已被污染,为防止失联,请关注(页面右下角的)公众号

标签:Scrapy

【记录】用Scrapy抓取manta.com
Python

【记录】用Scrapy抓取manta.com

crifan 11年前 (2013-05-24) 3804浏览 0评论

【问题】 手上有个Scrapy的项目,是要抓取和 http://www.manta.com/ 相关的站点的内容。 已有源码为:   bs.py: import requests from bs4 import BeautifulSoup ...

【记录】折腾Scrapy的Tutorial
Scrapy

【记录】折腾Scrapy的Tutorial

crifan 12年前 (2012-11-11) 5696浏览 2评论

安装了Scrapy之后,就去按照官网教程: Scrapy Tutorial 去试试。 1.通过 scrapy startproject tutorial 创建了一个新项目。 2.参考其代码,把items.py改为其所说的值。 3.新建了dm...

【记录】安装Scrapy
Scrapy

【记录】安装Scrapy

crifan 12年前 (2012-11-11) 4692浏览 5评论

1.参考: http://scrapy.org/download/ 去cmd中通过pip安装,结果出错: E:\Dev_Tools\python\Scrapy>pip install Scrapy Downloading/unpacking S...

61 queries in 0.168 seconds, using 21.90MB memory