前情提要：Python爬虫初体验（2）：多线程的应用及爬取中的实际问题从来没想过，写一个功能较为完备的爬虫代码，要花好几天的时间……这次算是增长了许多编程经验。好的废话不多说，进入正题上次的代码中，由于部分XKCD漫画有特殊格式（还有404彩蛋），而我的代码中try-except结构只处理了连接超时的问题，没有对漫画本身的格式变化进行处理，导致线程意外中断。虽然最后写了重试下载，但是它和上面的一样，有个致命问题：如果是漫画格式的问题，它会陷入无限死循环。所
系统 2019-09-27 17:53:24 2541
urllib.request.Request('URL',headers=headers)User-Agent是爬虫和反爬虫斗争的第一步，发送请求必须带User—Agent使用流程：1、创建请求对象request=urlllib.request.Request('url'......)2、发送请求获取响应对象response=urllib.request.urlopen(request)3、获取响应内容html=response.read().decond
系统 2019-09-27 17:49:37 2541
目的获得一个首尾不含多余空格的字符串方法可以使用字符串的以下方法处理：string.lstrip(s[,chars])Returnacopyofthestringwithleadingcharactersremoved.IfcharsisomittedorNone,whitespacecharactersareremoved.IfgivenandnotNone,charsmustbeastring;thecharactersinthestringwillb
系统 2019-09-27 17:46:58 2541
