- 军军小站|张军博客
拥有Python标签的文章
Python

Python多进程爬取人人单词数据

基于Pythonrequests的人人词典数据爬虫,爬取站点http://www.91dict.com爬取内容包含:单词、单词词性及翻译、单词发音、单词例句剧照、单词例句及翻译、单词例句发音总共数据:单词53189个,例句发音文件及图片文件共10G左右,20M带宽不到一个小时就能爬完,我测试是这样的。。。关于单词发音,可自行添加爬取爬取内容1爬取内容2例句发音例句剧照Python版本Python3+,建议Python3.6requirements.txtr

系统 2019-09-27 17:49:44 2032

Python

python实现五子棋游戏

本文实例为大家分享了python实现五子棋游戏的具体代码,供大家参考,具体内容如下话不多说,直接上代码:全部工程文件,在GitHub:五子棋效果预览:#!/usr/bin/envpython3#-*-coding:utf-8-*-importpygamefrompygame.localsimport*fromsysimportexitimportnumpybackground_image='qipan.png'white_image='white.png'

系统 2019-09-27 17:48:57 2032

Python

什么是pip?Python新手入门指南

什么是pip?pip是Python中的标准库管理器。它允许你安装和管理不属于Python标准库的其它软件包。本教程就是为Python新手介绍pip。通过本教程,你将学到:1.安装Python的标准发行版中未包含的其他软件包2.查找发布于Python包索引(PyPI)的包3.管理脚本和应用程序的安装需求4.卸载包及它的相关依赖如你所见,Python社区非常活跃,并且为pip创建了一些简洁的替代方案,你可以在本教程稍后的部分看到。pip入门那么,什么是pip呢

系统 2019-09-27 17:48:21 2032

Python

在Python中操作文件之read()方法的使用教程

read()方法读取文件size个字节大小。如果读取命中获得EOF大小字节之前,那么它只能读取可用的字节。语法以下是read()方法的语法:fileObject.read(size);参数size--这是可以从文件中读取的字节数。返回值此方法返回读取字符串中的字节数。例子下面的例子显示了read()方法的使用。#!/usr/bin/python#Openafilefo=open("foo.txt","rw+")print"Nameofthefile:",f

系统 2019-09-27 17:46:30 2032

Python

想要爬虫工程师,Python需要学到什么程度?

做爬虫工程师的的薪资为20K起,当然,因为大数据,薪资也将一路上扬。那么,Python需要学到什么程度呢?今天我们来看看3位前辈的回答。前段时间快要毕业,而我又不想找自己的老本行Java开发了,所以面了很多Python爬虫岗位。因为我在南京上学,所以我一开始只是在南京投了简历,我一共面试了十几家企业,其中只有一家没有给我发offer,其他企业都愿意给到10K的薪资,不要拿南京的薪资水平和北上深的薪资水平比较,结合面试常问的问题类型说一说我的心得体会。第一点

系统 2019-09-27 17:46:26 2032

Python

python3.x上post发送json内容的请求 一.摘要做接口自动化测试时,常常需要使用python发送一些json内容的接口...

一.摘要做接口自动化测试时,常常需要使用python发送一些json内容的接口报文,如果使用urlencode对内容进行编码解析并发送请求,会发现服务器返回了200,OK的状态,但响应内容不可读(像是一堆加密报文)。定位问题时发现抓包发现发送报文的内容与我们发送的json内容不符(会去掉”{“与”}“等内容),所以重新采用了json封装后,问题解决。二.解决方法1.先导入json模块,采用json.dumps将json内容进行封装eg:importjson

系统 2019-09-27 17:08:19 2032

Python

第15课 python 项目实操3

到了今日,你已经基本懂得python是什么了,装逼要专业的,就class,def定义类,定义函数去封装一下要做的内容;,然后需要调用的时候,进行调用,这时候代码又条例,看起来方便易懂,也是在日后编码的时候需要注意的,要习惯用类,函数。这样你才更加又逻辑。下面复制了一下人家的例子,里面没有深奥的代码。。。。只是前面的拼凑所以还是要说一下:1.逻辑思路(明确目标,分解需求,一个个代码实现);2.适当使用class函数;3.看人家的代码后,一定要下场敲,哪怕抄袭

系统 2019-09-27 17:57:32 2031

Python

跟老齐学Python之再深点,更懂list

list解析先看下面的例子,这个例子是想得到1到9的每个整数的平方,并且将结果放在list中打印出来>>>power2=[]>>>foriinrange(1,10):...power2.append(i*i)...>>>power2[1,4,9,16,25,36,49,64,81]python有一个非常有意思的功能,就是list解析,就是这样的:>>>squares=[x**2forxinrange(1,10)]>>>squares[1,4,9,16,25

系统 2019-09-27 17:56:44 2031

Python

python 正则整理

python正则符号意思说明re1|re2匹配re1或者re2.匹配除了\n的任意字符^字符串的起始部分$字符串的结尾部分*对前面的表达式匹配0次或多次+对前面的匹配1次或多次?对前面的匹配0次或者一次{N}匹配N次{M,N}匹配M到N次[…],[0-9],[A-Za-z]匹配方括号字符集里的单个字符[^A-Z]不匹配字符集里的任意一个字符(…)匹配封闭的表达式,另存为子组\d数字\w字母数字字符\s空格\b单词边界the匹配的是the这个字符串\bthe

系统 2019-09-27 17:56:29 2031

Python

聊聊 Python 的单元测试框架(二):nose 和它的继任者 nose2

聊聊Python的单元测试框架(二):nose和它的继任者nose2作者:HelloGitHub-ProdesireHelloGitHub的《讲解开源项目》系列,项目地址:https://github.com/HelloGitHub-Team/Article一、nosenose是一个第三方单元测试框架,它完全兼容unittest,并且号称是一个更好用的测试框架。那么nose除了具备unittest的所有功能外,还具有哪些优势呢?1.1用例编写用例的编写方式

系统 2019-09-27 17:54:39 2031

Python

【实战演练】Python+Django网站开发系列08-django门户互访

继续上一篇,我们在继续完成其他页面设置之前,先把老师登录后的页面给创建出来,并且学生与老师不能互访门户,以及实现注销功能。回到【实战演练】Python+Django网站开发系列02-Django完整开发环境部署,对于老师页面,具有以下模块。1、需求分析老师登录后页面包括如下功能:1)个人信息:登录后显示老师个人信息,以及自己需要授课的课程名、上课时间、上课地点。2)成绩录入:可以查看自己授课的课程下面的学生,并且可以录入成绩,成绩仅能为0~100分,超出范

系统 2019-09-27 17:54:04 2031

Python

Python中使用md5sum检查目录中相同文件代码分享

复制代码代码如下:"""ThismodulecontainscodefromThinkPythonbyAllenB.Downeyhttp://thinkpython.comCopyright2012AllenB.DowneyLicense:GNUGPLv3http://www.gnu.org/licenses/gpl.html"""importosdefwalk(dirname):"""Findsthenamesofallfilesindirnameand

系统 2019-09-27 17:52:36 2031

Python

python爬取Ajax动态加载网页过程解析

常见的反爬机制及处理方式1、Headers反爬虫:Cookie、Referer、User-Agent解决方案:通过F12获取headers,传给requests.get()方法2、IP限制:网站根据IP地址访问频率进行反爬,短时间内进制IP访问解决方案:1、构造自己IP代理池,每次访问随机选择代理,经常更新代理池2、购买开放代理或私密代理IP3、降低爬取的速度3、User-Agent限制:类似于IP限制解决方案:构造自己的User-Agent池,每次访问随

系统 2019-09-27 17:51:32 2031

Python

2019python常见的170道面试题解析

语言特性1.谈谈对Python和其他语言的区别2.简述解释型和编译型编程语言3.Python的解释器种类以及相关特点?4.说说你知道的Python3和Python2之间的区别?5.Python3和Python2中int和long区别?6.xrange和range的区别?编码规范7.什么是PEP8?8.了解Python之禅么?9.了解docstring么?10.了解类型注解么?11.例举你知道Python对象的命名规范,例如方法或者类等12.Python中的

系统 2019-09-27 17:49:45 2031

Python

在GPU上运行python代码出错:ValueError: Object

错误提示:File"*****.py",line23,indata=np.load('path')File"/home/***/.conda/envs/***/lib/python3.7/site-packages/numpy/lib/npyio.py",line447,inloadpickle_kwargs=pickle_kwargs)File"/home/***/.conda/envs/***/lib/python3.7/site-packages/n

系统 2019-09-27 17:46:50 2031