阅读更多初学Python爬虫时都会从最简单的方法开始，以下为几种常见的基础做法。"""简单的循环处理"""importrequestsurl_list=["https://www.baidu.com","https://www.cnblogs.com/"]forurlinurl_list:result=requests.get(url)print(result.text)"""线程池处理"""importrequestsfromconcurrent.fut
系统 2019-09-27 17:49:32 2064
1动机greenlet包是Stackless的副产品，其将微线程称为“tasklet”。tasklet运行在伪并发中，使用channel进行同步数据交换。一个”greenlet”，是一个更加原始的微线程的概念，但是没有调度，或者叫做协程。这在你需要控制你的代码时很有用。你可以自己构造微线程的调度器；也可以使用”greenlet”实现高级的控制流。例如可以重新创建构造器；不同于Python的构造器，我们的构造器可以嵌套的调用函数，而被嵌套的函数也可以yiel
系统 2019-09-27 17:49:28 2064
ProtocolBuffers（类似XML的一种数据描述语言）最新版本2.3里，protoc―py_out命令只生成原生的Python代码。尽管PB（ProtocolBuffers）可以为C++语言生成快速解析和序列化代码，但是这种方式对于Python不适用，并且手动生成的已包装的代码需要非常大的维护工作。在讨论组里，这是一个常见的功能要求，由于一个必备的客户端组件―AppEngine（根据团队介绍名称为AppEngine），生成原生的Python代码有更
系统 2019-09-27 17:49:21 2064
占位符，顾名思义就是插在输出里站位的符号。占位符是绝大部分编程语言都存在的语法，而且大部分都是相通的，它是一种非常常用的字符串格式化的方式。1、常用占位符的含义s:获取传入对象的__str__方法的返回值，并将其格式化到指定位置r:获取传入对象的__repr__方法的返回值，并将其格式化到指定位置c:整数：将数字转换成其unicode对应的值，10进制范围为0<=i<=1114111（py27则只支持0-255）；字符：将字符添加到指定位置o:将整数转换成
系统 2019-09-27 17:49:18 2064
一、字符串基本操作索引、切片、乘法、成员资格检查、长度、长度、最小值、最大值字符串不可变，因此元素赋值和切片赋值是非法的、二、设置字符串的格式>>>"{3}{0}{2}{1}{3}{0}".format("be","not","or","to")'tobeornottobe'三设置字符串长度>>>"{foo}{}{bar}{}".format(1,2,bar=4,foo=3)'3142'>>>"{foo}{1}{bar}{0}".format(1,2,ba
系统 2019-09-27 17:49:14 2064
目录一、Python基础1.数据类型和变量2.字符串和编码3.list和tuplelisttuple4.条件判断5.循环6.dict和setdictset二、函数1.调用函数2.定义函数3.函数的参数位置参数默认参数可变参数关键字参数命名关键字参数参数组合4.递归函数三、高级特性1.切片2.迭代3.列表生成式4.生成器5.迭代器四、函数式编程1.高阶函数map/reducefiltersorted2.返回函数3.匿名函数4.装饰器5.偏函数五、模块六、面向
系统 2019-09-27 17:49:08 2064
目录Python并发编程04/多线程1.生产消费者模型2.线程的理论知识2.1什么是线程2.2线程vs进程2.3线程的应用3.开启进程的两种方式3.1第一种方式3.2第一种方式4.线程vs进程的代码对比4.1开启速度对比4.2对比pid4.3同一个进程内线程共享内部数据5.线程的其他方法6.join与守护线程6.1join6.2守护线程7.互斥锁Python并发编程04/多线程1.生产消费者模型#编程思想,模型,设计模式,理论等等,都是交给你一种编程的方法
系统 2019-09-27 17:49:07 2064
译：seleniumwebdriver(python)2013-06-1601:24虫师阅读(...)评论(...)编辑收藏如果翻译的很烂，原文档地址：http://docs.seleniumhq.org/docs/03_webdriver.jsp#firefox-driverseleniumwebdriver注:我们不断的更新这份文档，使这份文档更加正确和完善；这份文档相对来讲也是比较准确的。webdriver的简介硒2.0的主要新功能是集成的webdr
系统 2019-09-27 17:48:51 2064
1、Python的数组可分为三种类型：(1)list普通的链表，初始化后可以通过特定方法动态增加元素。定义方式：arr=[元素](2)Tuple固定的数组，一旦定义后，其元素个数是不能再改变的。定义方式：arr=(元素)(2)Dictionary词典类型，即是Hash数组。定义方式：arr={元素k:v}2、下面具体说明这些数组的使用方法和技巧：(1)list链表数组a、定义时初始化复制代码代码如下:a=[1,2,[1,2,3]]b、定义时不初始化一维数组
系统 2019-09-27 17:48:23 2064
因为GAE在国内访问不便，所以平时有一些小应用，我都会放在SAE上面，虽然SAE还有很多缺陷，但算是上手比较容易的一个了，最起码文档写的不错。开发SAE上的应用，我一般都用Flask，SAE预装了Flask，所以你可以直接用，但我们难免会用一些没有预装的库。如果是在以前，可能需要自己将package挨个copy到应用目录中，然后手动加载，现在嘛，不需要那么麻烦了，SAE有个非常不错的解决方案，见《安装依赖的第三方包》你可以使用saecloud来代替pip安
系统 2019-09-27 17:48:13 2064
