pyspider

crifan 2年前 (2018-07-11) 2844浏览 0评论

折腾： 【已解决】pipenv虚拟环境中用pip安装pyspider出错：__main__.ConfigurationError: Curl is configured to use SSL, but we have not been able to...

crifan 2年前 (2018-07-11) 1356浏览 0评论

折腾： 【已解决】使用PySpider去爬取某网站中的视频 期间，去在pipenv中用pip去安装pyspider出错： <code>➜  xx pip install pyspider Collecting pyspider Colle...

crifan 2年前 (2018-07-11) 1198浏览 0评论

需要去爬取： xxxxxxxx大赛 http://xxx/index.php?m=Home&c=MatchNew&a=audition&act_id=3 《老鼠xx》xxx大赛开始了！ http:/...

crifan 3年前 (2018-05-17) 1326浏览 0评论

折腾： 【未解决】pyspider运行出错：FETCH_ERROR HTTP 599 Connection timed out after milliseconds 期间，看到： Command Line Interface | PhantomJS ...

crifan 3年前 (2018-05-17) 1384浏览 0评论

折腾： 【未解决】pyspider运行出错：FETCH_ERROR HTTP 599 Connection timed out after milliseconds 期间，想要搞清楚，pyspider中的phantomjs，很多帖子提到了proxy，...

crifan 3年前 (2018-05-12) 1273浏览 0评论

折腾： 【未解决】pyspider运行出错：FETCH_ERROR HTTP 599 Connection timed out after milliseconds 期间，发现个问题： insert没有按照期望去把数据插入到mysql数据库中 且即使...

crifan 3年前 (2018-05-12) 2699浏览 0评论

折腾： 【已解决】PySpider中保存数据到mysql 期间，运行了很长时间之后回来发现： 运行状态是PAUSED -》难道是屏幕锁屏了导致的？ 主要是看到错误信息了： <code>1. FETCH_ERROR autohomeBra...

crifan 3年前 (2018-05-05) 2415浏览 0评论

折腾： 【已解决】PySpider中保存数据到mysql 期间，解决了之前的错误，又出现别的错误： <code>➜  AutocarData pyspider -c config.json result_worker Traceback ...

crifan 3年前 (2018-05-05) 2614浏览 0评论

折腾： 【已解决】PySpider中保存数据到mysql 期间，pyspider中去运行result_worker但是出错： <code>➜  AutocarData pyspider -c config.json result_work...

crifan 3年前 (2018-05-03) 2655浏览 0评论

之前已经弄完了基本的PySpider的项目，把数据直接return返回，在运行后，点击results，导出csv了： 【已解决】写Python爬虫爬取汽车之家品牌车系车型数据 现在想要去把数据保存到mysql中。 先去看官网教程： Working w...