拥有Python标签的文章
Python

学习Python爬虫,抓取美女图片它不香嘛?

学习编程语言是很枯燥的,尤其是对一个编程零基础的人来说,更为枯燥!所以我们要从枯燥的学习中找点乐趣和动力!比如,抓点小姐姐的图片在这里插入图片描述完整代码importosimporttimeimportrequestsfromlxmlimportetree'''遇到不懂的问题?Python学习交流群:821460695满足你的需求,资料都已经上传群文件,可以自行下载!'''defget_img_url(url):''':paramurl:图集url:ret

系统 2019-09-27 17:49:24 2303

Python

使用Python设置tmpfs来加速项目的教程

对我当前工程进行全部测试需要花费不少时间。既然有26GB空闲内存,为何不让其发挥余热呢?tmpfs可以通过把文件系统保存在大内存中来加速测试的执行效率。但优点也是缺点,tmpfs只把结果保存在内存中,所以你必须自己编写脚本来把结果回写到磁盘上进行保留。而且这些脚本必须良好书写和执行,否则就要失去部分或全部的工作成果了。一种常见的方法是直接在tmpfs文件夹中工作,然后把工作成果备份到磁盘上的一个文件夹中。当您的机器启动时你从那个备份文件夹恢复tmpfs文件

系统 2019-09-27 17:49:12 2303

Python

python使用tomorrow实现多线程的例子

如下所示:importtime,requestesfromtomorrowimportthreads@threads(10)#使用装饰器,这个函数异步执行defdownload(url):returnrequests.get(url)defmain():start=time.time()urls=['https://pypi.org/project/tomorrow/0.2.0/','https://www.cnblogs.com/pyld/p/47167

系统 2019-09-27 17:48:19 2303

Python

python爬虫小案例_从B站爬取《哪吒之魔童降世》终极预告 的弹幕

1、在Google浏览器输入:https://www.bilibili.com/video/av606041932、右键,查看网页源代码,查找cid:3、在Google浏览器输入:https://comment.bilibili.com/105487088.xml4、弹幕数据所在的标签参数内容解读看完回来告诉你们,一定要去看参数解析138.20700弹幕出现的时间(以秒为单位)4弹幕类型(1-跑马灯,4-底部)25字体16711680颜色564226963

系统 2019-09-27 17:48:14 2303

Python

python利用eval方法提升dataframe运算性能

eval方法可以直接利用c语言的速度,而不用分配中间数组,不需要中间内存的占用.如果包含多个步骤,每个步骤都要分配一块内存importnumpyasnpimportpandasaspdimporttimeitdf=pd.DataFrame({'a':np.random.randn(10000000),'b':np.random.randn(10000000),'c':np.random.randn(10000000),'x':'x'})#printdfst

系统 2019-09-27 17:47:34 2303

Python

python3.7 sys模块的具体使用

Python的sys模块提供访问解释器使用或维护的变量,和与解释器进行交互的函数。通俗来讲,sys模块负责程序与python解释器的交互,提供了一系列的函数和变量,用于操控python运行时的环境。#!/usr/bin/envpython__author__="lrtao2010"#python3.7sys模块#sys模块负责程序与python解释器的交互,提供了一系列的函数和变量,#用于操控python运行时的环境。#sys.argv接收命令行参数,生成

系统 2019-09-27 17:47:24 2303

Python

Python 连续三年夺冠、PHP 受排挤,揭晓 IEEE Spectrum

IEEESpectrum编程语言排行榜一年发布一次,这个排行榜已经连续发布了六年。每个开发者都需要相对流行的网站统计数据,与其他的语言排行榜不同,IEEESpectrum可以让开发者自己选择参数组合时的权重,得到多样的排序结果。而且IEEESpectrum今年进行了重大改革,针对求职者内置了一些预设的权重,改变了一些基础指标,从8个数据源的11个指标中获取数据。程序员还可以应用筛选器,以排除不感兴趣的领域编程语言,这样一来,结果会显得更鲜明。但是,基本的思

系统 2019-09-27 17:47:16 2303

Python

Python中pymysql 模块的使用详解

pymysql模块的使用一、pymysql的下载和使用(1)pymysql模块的下载pip3installpymysql(2)pymysql的使用#实现:使用Python实现用户登录,如果用户存在则登录成功(假设该用户已在数据库中)importpymysqluser=input('请输入用户名:')pwd=input('请输入密码:')#1.连接conn=pymysql.connect(host='127.0.0.1',port=3306,user='ro

系统 2019-09-27 17:46:13 2303

Python

Python中使用PIPE操作Linux管道

Linux中进程的通信方式有信号,管道,共享内存,消息队列socket等。其中管道是*nix系统进程间通信的最古老形式,所有*nix都提供这种通信方式。管道是一种半双工的通信机制,也就是说,它只能一端用来读,另外一端用来写;另外,管道只能用来在具有公共祖先的两个进程之间通信。管道通信遵循先进先出的原理,并且数据只能被读取一次,当此段数据被读取后,马上会从数据中消失,这一点很重要。Linux上,创建管道使用pipe函数,当它执行后,会产生两个文件描述符,分别

系统 2019-09-27 17:45:56 2303

Python

Python+MongoDB自增键值的简单实现

背景最近在写一个测试工具箱,里面有一个bug记录系统,因为后台我是用Django和MongoDB来实现的,就遇到了一个问题,要如何实现一个自增的字段。传统的关系型数据库要实现起来是非常容易,只要直接设置一个自增字段就行了,插入数据时不用管这个键值,只管自己处理的数据就行了,会自动实现自增的功能,但是非关系型数据库好像没有这个功能(或者我不知道)。百度之后发现都是MongoDB的设置方法,并不是我想要的。解决思路百度没有找到好的思路,那就只能自己解决了,我的

系统 2019-09-27 17:37:37 2303

Python

python网络编程 使用UDP、TCP协议收发信息详解

UDPUDP是面向无连接的通讯协议,UDP数据包括目的端口号和源端口号信息,由于通讯不需要连接,所以可以实现广播发送。UDP传输数据时有大小限制,每个被传输的数据报必须限定在64KB之内。UDP是一个不可靠的协议,发送方所发送的数据报并不一定以相同的次序到达接收方。udp通信模型中,在通信开始之前,不需要建立相关的链接,只需要发送数据即可,类似于生活中,"写信"。客户端:fromsocketimportsocket,AF_INET,SOCK_DGRAM#创

系统 2019-09-27 17:57:08 2302

Python

如何使用Python标准库进行性能测试

Profile和cProfile在Python标准库里面有两个模块可以用来做性能测试。1.一个是Profile,它是一个纯Python的实现,所以会慢一些,如果你需要对模块进行拓展,那么这个模块比较合适。2.第二个是cProfile,从名字就可以看出这是一个C语言的实现版,官方推荐在大多数情况下使用。这两者的接口和数据的输出格式是完全一样的,你可以在这两者之间自由的切换,所以下面我们仅以cProfile为例进行介绍。使用cProfile进行性能测试在cPr

系统 2019-09-27 17:56:50 2302

Python

详解程序意外中断自动重启shell脚本(以Python为例)

我们经常需要在后台运行一些python脚本,来监控系统或者做一些其他事情;但是由于各种各样的原因,排除python脚本代码的问题,脚本运行过程中会挂掉。为了不天天耗在上面等重启,可以制作shell脚本对程序予以监控,对于意外中断的程序自动重启。以控制python自动重启的shell脚本为例:cdDesktopvimrun.sh#新建名为run的shell脚本写入(此处以名为run的Python脚本为例)#!/bin/bashwhile[1];dopytho

系统 2019-09-27 17:56:17 2302

Python

Python执行Linux系统命令的4种方法

(1)os.system仅仅在一个子终端运行系统命令,而不能获取命令执行后的返回信息复制代码代码如下:system(command)->exit_statusExecutethecommand(astring)inasubshell.如果再命令行下执行,结果直接打印出来复制代码代码如下:>>>os.system('ls')04101419778.CHMbashdocumentmediapy-djangovideo11.wmvbooksdownloadsPi

系统 2019-09-27 17:55:07 2302

Python

python3使用腾讯企业邮箱发送邮件的实例

1.腾讯企业邮箱SMTP服务器地址:smtp.exmail.qq.com,ssl端口为:4652.确保腾讯企业邮箱中开启了SMTP服务:3.示例代码:#!/usr/bin/envpython3#-*-coding:utf-8-*-importsmtplibfromemail.mime.textimportMIMETextfromemail.utilsimportformataddr#发件人邮箱账号my_sender='xx@xxx.com'#user登录邮

系统 2019-09-27 17:54:14 2302