crifan 6年前 (2018-10-12) 1605浏览 0评论

折腾： 【记录】重新用PySpider下载xxx的数据 期间，本来之前PySpider项目，都是直接不用任何参数： pyspider 即可运行，默认5000端口的。 但是现在有2个项目要运行，所以会有端口冲突的问题。 所以要去改端口。 想要找到最简单...

crifan 6年前 (2018-10-12) 13438浏览 0评论

最新 Parallels Desktop 14.0.1 (45154) TNT 中文破解版（百度网盘+BT种子） – Mac OSX 软件游戏分享区 – 威锋论坛 – 威锋网 -》 2018-10-5 00:13 ...

crifan 6年前 (2018-10-11) 1060浏览 0评论

折腾： 【已解决】PySpider用json.loads字符串出错：json.decoder.JSONDecodeError: Invalid \escape: line 5 column 179 (char 269) 期间，需要把字符串： Chry...

crifan 6年前 (2018-10-11) 1340浏览 0评论

折腾： 【记录】用PySpider去爬取scholastic的绘本书籍数据 期间，代码：         productMatch = re.search("^\s*product:\s*(?P<productJson>\{.+...

crifan 6年前 (2018-10-11) 931浏览 0评论

折腾： 【记录】用PySpider去爬取scholastic的绘本书籍数据 期间，突然发现需要爬取的页面中，其实js的代码中包含了更多我想要的信息： var DumbleData = {}; DumbleData.data = {     omn...

crifan 6年前 (2018-10-11) 2583浏览 0评论

折腾： 【未解决】PySpider中PyQuery中把得到的html的text转换为纯文本字符串 期间，用代码： import xml def htmlToString(htmlText):     return ''.join...

crifan 6年前 (2018-10-11) 1410浏览 0评论

折腾： 【记录】用PySpider去爬取scholastic的绘本书籍数据 期间，现在对于： Riff Raff Sails the High Cheese by Susan Schade | Scholastic 已经用代码： （注意 html...

crifan 6年前 (2018-10-11) 1039浏览 0评论

折腾： 【记录】用PySpider去爬取scholastic的绘本书籍数据 期间，遇到一个稍微特殊一点的内容的提取： https://www.scholastic.com/teachers/books/lord-of-the-fleas-by-dav...

crifan 6年前 (2018-10-10) 1108浏览 0评论

折腾： 【暂时解决】给PySpider中用科学上网的代理打开需要翻墙的页面 期间，调试PySpider发现打开页面，出现很多错误，其中有304： console: AT: [getOffer()] request failed [object Obj...

crifan 6年前 (2018-10-10) 1196浏览 0评论

折腾： 【记录】用PySpider去爬取scholastic的绘本书籍数据 期间，加载页面偶尔异常不返回数据： [I 181010 15:45:25 scheduler:586] in 5m: new:0,success:0,retry:0,fail...