在爬取的过程中难免发生ip被封和403错误等等，这都是网站检测出你是爬虫而进行反爬措施，在这里为大家总结一下怎么用IP代理防止被封首先，设置等待时间：常见的设置等待时间有两种，一种是显性等待时间（强制停几秒），一种是隐性等待时间（看具体情况，比如根据元素加载完成需要时间而等待）图1是显性等待时间设置，图2是隐性第二步，修改请求头：识别你是机器人还是人类浏览器浏览的重要依据就是User-Agent，比如人类用浏览器浏览就会使这个样子的User-Agent：'
系统 2019-09-27 17:46:26 2337
解决这个错误为大家提供了两个版本，一个简单的操作版，一个细致的解释版（自取所需）目录简洁版细致版简洁版1、安装scipy，win+r打开命令行窗口，输入cmd，在命令行输入pipinstallscipy最后几行有Successfully...就表示安装成功了2、安装imageio，win+r打开命令行窗口，输入cmd，在命令行输入pipinstallimageio如下使用：importimageioimageio.imread()细致版先看错误1、没安装s
系统 2019-09-27 17:46:19 2337
Tqdm是一个易用性强、扩展性高的Python进度条库，可以在Python长循环中添加一个进度提示信息，我们只需要封装任意的迭代器tqdm(iterator)即可。安装学习交流群：243771258安装过程如下：自动控制进度更新学习交流群：243771258传入可迭代对象输出结果为：使用方法trangetrange(i)是tqdm(range(i))的简单写法。学习交流群：243771258输出结果为：学习交流群：243771258为进度条设置描述在for
系统 2019-09-27 17:46:11 2337
字符串就是一个话题中心。给字符串编号在很多很多情况下，我们都要对字符串中的每个字符进行操作（具体看后面的内容），要准确进行操作，必须做的一个工作就是把字符进行编号。比如一个班里面有50名学生，如果这些学生都有学号，老师操作他们将简化很多。比如不用专门找每个人名字，直接通过学号知道谁有没有交作业。在python中按照这样的顺序对字符串进行编号：从左边第一个开始是0号，向下依次按照整数增加，为1、2...，直到最后一个，在这个过程中，所有字符，包括空格，都进行
系统 2019-09-27 17:38:21 2337
S.replace(/(^s*)|(s*$)/g,"");首先是把/(^/s*)|(/s*$)/g替换为""然后,/.../g里面的,是表示放置通配符的地方,g代表全局参数(^/s*)或者(/s*$)都将被替换为""匹配首尾空白字符的正则表达式：^/s*|/s*$可以用来删除行首行尾的空白字符(包括空格、制表符、换页符等等)，正则表达式零拾
系统 2019-08-29 23:51:47 2337
