Python - 军军小站|张军博客
Python

利用Python爬取可用的代理IP

前言就以最近发现的一个免费代理IP网站为例:http://www.xicidaili.com/nn/。在使用的时候发现很多IP都用不了。所以用Python写了个脚本,该脚本可以把能用的代理IP检测出来。脚本如下:#encoding=utf8importurllib2frombs4importBeautifulSoupimporturllibimportsocketUser_Agent='Mozilla/5.0(WindowsNT6.3;WOW64;rv:4

系统 2019-09-27 17:38:43 1954

Python

为什么你还不懂得怎么使用Python协程

前言从语法上来看,协程和生成器类似,都是定义体中包含yield关键字的函数。yield在协程中的用法:在协程中yield通常出现在表达式的右边,例如:datum=yield,可以产出值,也可以不产出--如果yield关键字后面没有表达式,那么生成器产出None.协程可能从调用方接受数据,调用方是通过send(datum)的方式把数据提供给协程使用,而不是next(...)函数,通常调用方会把值推送给协程。协程可以把控制器让给中心调度程序,从而激活其他的协程

系统 2019-09-27 17:56:55 1953

Python

Python:Scrapy爬虫简单使用

创建爬虫目录:scrapystartprojectspiderName调试命令scrapyshell网站名调试命令可直接进行css和xpath的调试;成功执行命令之后可使用:response.xpath(xpath表达式)获取所需的内容。xpath说明:XPath是一门在XML文档中查找信息的语言表达式描述实例nodename选取nodename节点的所有子节点//div/从根节点选取/div//不考虑位置选择节点//div.选取当前节点./div…选取当

系统 2019-09-27 17:56:45 1953

Python

重磅!Google 推出了Python最牛 X 的编辑器......

随着和大数据、人工智能绑定在一起,Python可畏是越来越厉害了!前几天,PYPL(即编程语言流行指数,基于Google搜索频率而定)出炉了6月编程语言排行榜,Python拿下NO.1,成为最流行的编程语言。赢得毫无波澜!随着Python的壮大,一向以技术著称的Google推出了超级强大的在线编辑器Colaboratory,不需要进行任何设置就可以使用,并且完全在云端运行,最重要的是免费!还在等什么!玩Python的最佳利器!下面就来聊聊Colaborat

系统 2019-09-27 17:55:56 1953

Python

Python实现打砖块小游戏代码实例

这次用Python实现的是一个接球打砖块的小游戏,需要导入pygame模块,有以下两条经验总结:1.多父类的继承2.碰撞检测的数学模型知识点稍后再说,我们先看看游戏的效果和实现:一、游戏效果二、游戏代码#导入模块importpygamefrompygame.localsimport*importsys,random,time,mathclassGameWindow(object):'''创建游戏窗口类'''def__init__(self,*args,**

系统 2019-09-27 17:54:09 1953

Python

python多线程操作实例

一、python多线程因为CPython的实现使用了GlobalInterpereterLock(GIL),使得python中同一时刻只有一个线程在执行,从而简化了python解释器的实现,且python对象模型天然地线程安全。如果你想你的应用程序在多核的机器上使用更好的资源,建议使用multiprocessing或concurrent.futures.processpoolexecutor。但是如果你的程序是IO密集型,则使用线程仍然是很好的选择。二、p

系统 2019-09-27 17:54:03 1953

Python

Python 面向对象基础

一、面向对象概述如今主流的软件开发思想有两种:一个是面向过程,另一个是面向对象。面向过程出现得较早,典型代表为C语言,开发中小型项目的效率很高,但是很难适用于如今主流的大中型项目开发场景。面向对象则出现得更晚一些,典型代表为Java或C++等语言,更加适合用于大型开发场景。两种开发思想各有长短。对于面向过程的思想:需要实现一个功能的时候,看重的是开发的步骤和过程,每一个步骤都需要自己亲力亲为,需要自己编写代码(自己来做)对于面向对象的思想:当需要实现一个功

系统 2019-09-27 17:53:52 1953

Python

python中如何对数据进行各种排序?

转载:https://www.cnblogs.com/fujian-code/p/7501795.htmlPython列表具有内置的list.sort()方法,可以在原地修改列表。还有一个sorted()内置的函数从迭代构建一个新的排序列表。在本文中,我们将探讨使用Python排序数据的各种技术。转自http://mp.weixin.qq.com/s?__biz=MzI5NDY1MjQzNA==&mid=2247484360&idx=2&sn=5e0d78

系统 2019-09-27 17:53:24 1953

Python

笨办法学Python-----习题4_变量和命名

上集回顾上一节我们学了一些数字的数学运算,了解了运算优先级PMDAS。变量和命名程序输入和运行结果没问题,不过一开始运行的时候产生了出错消息:这条消息的意思是在第5行的“cars_not_driven=cars-drivers"语句中,变量drivers没有被定义。回到程序中查看,确实是赋值变量drivers的语句中错误拼写了该单词,从而只有drives的变量,而没有我们预期的drivers的变量,用起来自然会产生报错。巩固练习1、使用浮点数作为space

系统 2019-09-27 17:52:36 1953

Python

Python自然语言处理工具小结

作者:伏草惟存来源:http://www.cnblogs.com/baiboy/p/nltk2.htmlPython的几个自然语言处理工具1.NLTK:NLTK在用Python处理自然语言的工具中处于领先的地位。它提供了WordNet这种方便处理词汇资源的借口,还有分类、分词、除茎、标注、语法分析、语义推理等类库。2.Pattern:Pattern的自然语言处理工具有词性标注工具(Part-Of-SpeechTagger),N元搜索(n-gramsearc

系统 2019-09-27 17:51:07 1953

Python

python 第五次作业 叶炜

习题1:读入文件pmi_days.csv,完成以下操作:1.统计质量等级对应的天数,例如:优:5天良:3天中度污染:2天2.找出PMI2.5的最大值和最小值,分别指出是哪一天。importcsva=0b=0c=0d=0lista=[]listb=[]withopen("pmi_days.csv",'r')asf:reader=csv.reader(f)fieldnames=next(reader)#获取数据的第一列,作为后续要转为字典的键名生成器,next

系统 2019-09-27 17:50:54 1953

Python

Python字符串中查找子串小技巧

惭愧啊,今天写了个查找子串的Python程序被BS了…如果让你写一个程序检查字符串s2中是不是包含有s1。也许你会很直观的写下下面的代码:复制代码代码如下:#determinewhethers1isasubstringofs2defisSubstring1(s1,s2):tag=Falselen1=len(s1)len2=len(s2)foriinrange(0,len2):ifs2[i]==s1[0]:forjinrange(0,len1):ifs2[i

系统 2019-09-27 17:50:23 1953

Python

python爬虫小案例_从B站爬取《哪吒之魔童降世》终极预告 的弹幕

1、在Google浏览器输入:https://www.bilibili.com/video/av606041932、右键,查看网页源代码,查找cid:3、在Google浏览器输入:https://comment.bilibili.com/105487088.xml4、弹幕数据所在的标签参数内容解读看完回来告诉你们,一定要去看参数解析138.20700弹幕出现的时间(以秒为单位)4弹幕类型(1-跑马灯,4-底部)25字体16711680颜色564226963

系统 2019-09-27 17:48:14 1953

Python

数据结构-二叉树(1)以及前序、中序、后序遍历(python实现)

上篇文章我们介绍了树的概念,今天我们来介绍一种特殊的树——二叉树,二叉树的应用很广,有很多特性。今天我们一一来为大家介绍。二叉树顾名思义,二叉树就是只有两个节点的树,两个节点分别为左节点和右节点,特别强调,即使只有一个子节点也要区分它是左节点还是右节点。常见的二叉树有一般二叉树、完全二叉树、满二叉树、线索二叉树、霍夫曼树、二叉排序树、平衡二叉树、红黑树、B树这么多种类。我们这篇文章中简单介绍一般二叉树、完全二叉树和满二叉树。一般二叉树很简单,只要满足子节点

系统 2019-09-27 17:47:38 1953

Python

django 利用pillow 进行简单的设置验证码功能(python)

1.导入模块并定义一个验证状态fromPILimportImage,ImageDraw,ImageFontfromdjango.utils.siximportBytesIOdefverify_code(request):#引入随机函数模块importrandom#定义变量,用于画面的背景色、宽、高bgcolor=(random.randrange(20,100),random.randrange(20,100),255)width=100height=25

系统 2019-09-27 17:47:32 1953