最近博主手上有一个爬虫项目，开始深入研究python爬虫开发，这是我篇博客也相当于是我的学习笔记，我认为学习爬虫第一步，先学习python多线程与多进程，熟悉网络编程，接下来会陆续以博客的方式跟大家做分享。多进程Python实现多进程的方式主要有两种，一种方法是使用os模块中的fork方法，另一种方法是使用multiprocessing模块。这两种方法的区别在于前者仅适用于Unix/Linux操作系统，对Windows不支持，后者则是跨平台的实现方式，目前
系统 2019-09-27 17:53:30 2181
运行多进程每个子进程的内存空间是互相隔离的进程之间数据不能共享的互斥锁但是进程之间都是运行在一个操作系统上，进程之间数据不共享,但是共享同一套文件系统,所以访问同一个文件,或同一个打印终端,是可以的，而共享带来的是竞争，竞争带来的结果就是错乱#并发运行,效率高,但竞争同一打印终端,带来了打印错乱frommultiprocessingimportProcessimporttimedeftask(name):print("%s1"%name)time.slee
系统 2019-09-27 17:52:42 2181
Python3快速入门（六）——Python3面向对象一、面向对象技术简介1、面向对象简介面向对象编程（ObjectOrientedPrograming，OOP）是一种编程思想，OOP把对象当成程序的一个基本单元，一个对象包含数据和操作数据的方法。面向对象编程的三大特性如下：A、封装，可以隐藏实现细节，使代码模块化。B、继承，可以通过扩展已存在的类来实现代码重用，避免重复编写相同的代码。C、多态，封装和继承的目的都是为了实现代码重用，而多态是为了实现接口重
系统 2019-09-27 17:52:41 2181
概述如今我也是使用Python写代码好多年了，但是我却很少关心GIL的内部机制，导致在写Python多线程程序的时候。今天我们就来看看CPython的源代码，探索一下GIL的源码，了解为什么Python里要存在这个GIL，过程中我会给出一些示例来帮助大家更好的理解GIL。GIL概览有如下代码：staticPyThread_type_lockinterpreter_lock=0;/*ThisistheGIL*/这行代码位于Python2.7源码ceval.c
系统 2019-09-27 17:52:39 2181
技术要点：把sklearn中模型的训练结果保存为文件，然后再从文件中加载训练结果直接使用，不需要反复进行训练。查看原文
系统 2019-09-27 17:52:15 2181
Python装饰器是一个消除冗余的强大工具。随着将功能模块化为大小合适的方法，即使是最复杂的工作流，装饰器也能使它变成简洁的功能。例如让我们看看Djangoweb框架，该框架处理请求的方法接收一个方法对象，返回一个响应对象：defhandle_request(request):returnHttpResponse("Hello,World")我最近遇到一个案例，需要编写几个满足下述条件的api方法：返回json响应如果是GET请求，那么返回错误码做为一个注
系统 2019-09-27 17:52:01 2181
简介在实际自动化项目运行过程中，很多时候App可以会出现各种异常，为了更好的定位问题，除了捕捉日志我们还需要对运行时的设备状态来进行截屏。从而达到一种“有图有真相”的效果。截图方法方法1save_screenshot()该方法直接保存当前屏幕截图到当前脚本所在文件位置。driver.save_screenshot('login.png')查看方法1源码：方法2get_screenshot_as_file(self,filename)将截图保留到指定文件路径
系统 2019-09-27 17:51:40 2181
首先安装一个需要用到的模块pipinstallsocial-auth-app-django安装完后在终端输入piplist会看到social-auth-app-django3.1.0social-auth-core3.0.0然后可以来我的github，下载关于滑动验证码的这个demo：https://github.com/Edward66/slide_auth_code下载完后启动项目pythonmanage.pyrunserver启动这个项目后，在主页就
系统 2019-09-27 17:50:45 2181
python批量添加的button使用同一点击事件根据传递的参数进行区分。defclear_text():print'我只是个清空而已'defclear_text(index):print'我只是个清空而已'+str(index)button=Button(framet_title,text='清空',command=clear_text)这样去设置，单个按钮对应单个点击事件没有问题的如果你是foriinRange(10):button=Button(fr
系统 2019-09-27 17:50:34 2181
本文在上文的基础上重新实现支持多线程的服务器。以下为TCP客户端的程序代码：#!/usr/bin/envpython3importsysfromPyQt5.QtCoreimport(QByteArray,QDataStream,QDate,QIODevice,QRegExp,Qt)fromPyQt5.QtWidgetsimport(QApplication,QDateEdit,QFrame,QGridLayout,QHBoxLayout,QLabel,QL
系统 2019-09-27 17:49:39 2181
