Python

python网络爬虫——正则解析

-re.I#忽略大小写-re.M#多行匹配,将正则作用到源数据的每一行-re.S#单行匹配,将正则作用到整个源数据,输出一个整体字符串(包括换行符也打印)string='''fallinlovewithyouiloveyouverymuchilovesheiloveher'''#去除以i开头的每一行数据re.findall('^i.*',string,re.M)['iloveyouverymuch','iloveshe','iloveher']#匹配全部行

系统 2019-09-27 17:51:20 2081

Python

杜凯杰教学数据分析:python 图片爬取 爬取各校校花图片

python图片爬取爬取各校校花图片—杜凯杰爬取十页校花图片(可按需求更改页数,爬取更多图片)—杜凯杰importrequestsfromlxmlimportetreestartUrl='http://www.xiaohuar.com/list-1-'headers={'User-Agent':'Mozilla/5.0(WindowsNT6.1;Win64;x64)AppleWebKit/537.36(KHTML,likeGecko)Chrome/74.0

系统 2019-09-27 17:50:47 2081

Python

python多进程,进程池,数据共享,进程通信,分布式进程

一、操作系统中相关进程的知识Unix/Linux操作系统提供了一个fork()系统调用,它非常特殊。普通的函数调用,调用一次,返回一次,但是fork()调用一次,返回两次,因为操作系统自动把当前进程(称为父进程)复制了一份(称为子进程),然后,分别在父进程和子进程内返回。子进程永远返回0,而父进程返回子进程的ID。这样做的理由是,一个父进程可以fork出很多子进程,所以,父进程要记下每个子进程的ID,而子进程只需要调用getppid()就可以拿到父进程的I

系统 2019-09-27 17:50:08 2081

Python

120 Python程序中的线程操作-队列

[TOC]一、队列queue队列:使用importqueue,用法与进程Queue一样实际上这里就是Python解释器中的一种数据结构中的类型——队列这里直接使用队列也可以。如果还要类似计数器的功能可以加上task_done和joinFIFO先进先出LIFO后进先出优先级队列二、先进先出(FIFO)classqueue.Queue(maxsize=0)###普通队列q=queue.Queue()###没有计数器进行阻塞FIFOq.put("first")q

系统 2019-09-27 17:49:51 2081

Python

Python应用领域和就业形势分析总结

简单的说,Python是一个“优雅”、“明确”、“简单”的编程语言。学习曲线低,非专业人士也能上手开源系统,拥有强大的生态圈解释型语言,完美的平台可移植性支持面向对象和函数式编程能够通过调用C/C++代码扩展功能代码规范程度高,可读性强目前几个比较流行的领域,Python都有用武之地。云基础设施-Python/Java/GoDevOps-Python/Shell/Ruby/Go网络爬虫-Python/PHP/C++数据分析挖掘-Python/R/Scala

系统 2019-09-27 17:49:25 2081

Python

使用python获取(宜宾市地震信息)地震信息

6月17日22分25分,四川省宜宾市长宁县发生了6.0级地震,成都高新减灾研究所与应急管理部门联合建设的大陆地震预警网成功预警本次地震,提前10秒向宜宾市预警,提前61秒向成都预警。虽然自己还不能写出这么牛逼的系统,但是今天我想结合自己学到的Python知识,用Python获取地震信息,然后微信实时推送给你的群组或你的朋友。1.前期准备1.爬虫基本知识,比如requests库,以及lxml库;2.利用Xpath进行HTML的解析;之前写的一些简单项目,提取

系统 2019-09-27 17:47:21 2081

Python

Python学习:面向对象之多态、多态性

多态多态指的是一类事物有多种形态importabcclassAnimal(metaclass=abc.ABCMeta):#同一类事物:动物@abc.abstractmethoddeftalk(self):passclassPeople(Animal):#动物的形态之一:人deftalk(self):print('sayhello')classDog(Animal):#动物的形态之二:狗deftalk(self):print('saywangwang')cl

系统 2019-09-27 17:46:13 2081

Python

Appium+python自动化(三十六)- 士兵突击许三多 - 多个

简介前面课程只是启动了单个appium服务,只能控制单台设备。如果需要针对多台设备测试那么该如何处理?而且发现群里的小伙伴们也在时不时地在讨论这个问题,想知道怎么实现的,于是宏哥就决定写一片这样的文章来给小伙伴们,答答疑,解解惑。希望对各位小伙伴或者童鞋们有所帮助,可以是你们豁然开朗。启动多个appium服务首先看下面两个启动appium服务案例。启动appium服务1启动appium服务2上面案例我们启动了2个不同的appium服务器,他们通过不同的端口

系统 2019-09-27 17:45:35 2081

Python

分析python请求数据

本节讲解了flask的请求,如果想在没有请求的情况下获取上下文,可以使用test_request_context()或者request_context(),从request对象的form中可以获取表单的数据,args中可以获取URL中的参数,files可以获取上传的文件,cookies可以操作cookie。首先你需要从flask模块中导入request:fromflaskimportrequest当前请求的方法可以用method属性来访问。你可以用form

系统 2019-09-27 17:38:46 2081

Python

python实现SMTP邮件发送功能

一直想着给框架添加邮件发送功能、所以整理下python下邮件发送功能首先python是支持邮件的发送、内置smtp库、支持发送纯文本、HTML及添加附件的邮件。之后是邮箱、像163、qq、新浪等邮箱默认关闭SMTP服务,需要我们手动打开,打开后通过发件人邮箱、授权密码通过发件人的SMTP服务发送代码如下:#!/usr/bin/envpython#-*-coding:utf_8-*-fromemail.mime.textimportMIMETextfrome

系统 2019-09-27 17:38:43 2081

Python

浅析Python四种数据类型

首先,我们了解下什么是数据类型计算机顾名思义就是可以做数学计算的机器,因此,计算机程序理所当然地可以处理各种数值。但是,计算机能处理的远不止数值,还可以处理文本、图形、音频、视频、网页等各种各样的数据,不同的数据,需要定义不同的数据类型。在Python中,能够直接处理的数据类型有以下几种:整数Python可以处理任意大小的整数,当然包括负整数,在程序中的表示方法和数学上的写法一模一样,例如:1,100,-8080,0,等等。计算机由于使用二进制,所以,有时

系统 2019-09-27 17:38:39 2081

Python

Python缩进和冒号详解

对于Python而言代码缩进是一种语法,Python没有像其他语言一样采用{}或者begin...end分隔代码块,而是采用代码缩进和冒号来区分代码之间的层次。缩进的空白数量是可变的,但是所有代码块语句必须包含相同的缩进空白数量,这个必须严格执行。例如:ifTrue:print("Hellogirl!")#缩进一个tab的占位else:#与if对齐print("Helloboy!")#缩进一个tab的占位Python对代码的缩进要求非常严格,如果不采用合理

系统 2019-09-27 17:38:32 2081

Python

Python递归函数实例讲解

Python递归函数实例1、打开Python开发工具IDLE,新建‘递归.py'文件,并写代码如下:defdigui(n):ifn==0:print('')returnprint('*'*n)digui(n-1)if__name__=='__main__':digui(5)这里递归打印*号,先打印后递归2、F5运行程序,打印内容如下;***************3、更改一下打印和递归的顺序,先递归后打印,代码如下:defdigui(n):ifn==0:p

系统 2019-09-27 17:38:16 2081

Python

python函数与方法的区别总结

(1)函数的分类:内置函数:python内嵌的一些函数。匿名函数:一行代码实现一个函数功能。递归函数自定义函数:根据自己的需求,来进行定义函数。(2)方法的分类:普通方法:直接用self调用的方法。私有方法:__函数名,只能在类中被调用的方法。属性方法:@property,将方法伪装成为属性,让代码看起来更合理。特殊方法(双下划线方法):以__init__为例,是用来封装实例化对象的属性,只要是实例化对象就一定会执行__init方法,如果对象子类中没有则会

系统 2019-09-27 17:38:13 2081