Python

python爬虫小案例_中国大学排名爬虫

一、中国大学排名爬虫案例的步骤如下:步骤1:从网络上获取大学排名网页内容getHTMLText()步骤2:提取网页内容中信息到合适的数据结构fillUnivList()步骤3:利用数据结构展示并输出结果printUnivList()查看http://www.zuihaodaxue.cn/zuihaodaxuepaiming2019.html的源码,部分如下:实现本案例的参考代码如下:importrequestsimportbs4frombs4importB

系统 2019-09-27 17:45:37 2403

Python

python3使用request来post文件请求

阅读更多最近尝试使用request来发送上传文件的post请求,网上找了很多直接post文件的例子,借鉴发现这个方法行不通,于是尝试了另外一种方式:通过第三方包requests_toolbelt讲文件转为数据流来发送请求,尝试成功。第一类,单个文件,包含在消息体#-*-coding:utf-8-*-importrequests#引入requests_toolbelt包,直接使用数据流来发送上传文件的post请求fromrequests_toolbelt.m

系统 2019-09-27 17:45:24 2403

Python

python Django模板的使用方法

模板是一个文本,用于分离文档的表现形式和内容。模板定义了占位符以及各种用于规范文档该如何显示的各部分基本逻辑(模板标签)。模板通常用于产生HTML,但是Django的模板也能产生任何基于文本格式的文档。来一个项目说明1、建立MyDjangoSite项目具体不多说,参考前面。2、在MyDjangoSite(包含四个文件的)文件夹目录下新建templates文件夹存放模版。3、在刚建立的模版下建模版文件user_info.html用户信息:姓名:{{name}

系统 2019-09-27 17:38:38 2403

Python

Python os.access()用法实例

概述os.access()方法使用当前的uid/gid尝试访问路径。大部分操作使用有效的uid/gid,因此运行环境可以在suid/sgid环境尝试。语法access()方法语法格式如下:os.access(path,mode);参数path--要用来检测是否有访问权限的路径。mode--mode为F_OK,测试存在的路径,或者它可以是包含R_OK,W_OK和X_OK或者R_OK,W_OK和X_OK其中之一或者更多。os.F_OK:作为access()的m

系统 2019-09-27 17:38:28 2403

Python

Python 输出详细的异常信息(traceback)

问题描述为了程序的正常运行,进行异常处理是有必要的,甚至于有时候,我们会主动的抛出异常,然后让程序进行异常捕获,再进行进一步的处理。但是,在开发的程序相对较大的过程中,我们不能一昧的进行try....except。而是要弄清楚到底抛出的是什么异常,同时,对于某些未知的异常,我们应该清楚的定位到到底是哪一行程序抛出的异常,针对这种情况,traceback库能极大的帮助我们。解决方法代码只需一行,即print(traceback.format_exc())即可

系统 2019-09-27 17:57:48 2402

Python

Python利用sqlacodegen自动生成ORM实体类示例

本文实例讲述了Python利用sqlacodegen自动生成ORM实体类。分享给大家供大家参考,具体如下:在前面一篇《Python流行ORM框架sqlalchemy安装与使用》我们是手动创建了一个名叫Infos.py的文件,然后定义了一个News类,把这个类作为和我们news数据表的映射。fromsqlalchemy.ext.declarativeimportdeclarative_baseBase=declarative_base()fromsqlalc

系统 2019-09-27 17:57:27 2402

Python

python学习笔记(一)

这里主要是总结学习过程中遇到的一些问题和注意事项文章目录关于函数参数问题默认参数可变参数关键参数关于函数作为返回值关于Function和Method理解关于函数参数问题默认参数函数参数可以有默认参数,而默认参数使用不当很容易掉坑里。defpersonInfo(name,age=22,city='BeiJing'):print(name,age,city)personInfo('allen')#==>allen22BeiJingpersonInfo('all

系统 2019-09-27 17:56:22 2402

Python

Python 实现数据结构中的的栈队列

栈(stack)又名堆栈,它是一种运算受限的线性表。其限制是仅允许在表的一端进行插入和删除运算。这一端被称为栈顶,相对地,把另一端称为栈底。向一个栈插入新元素又称作进栈、入栈或压栈,它是把新元素放到栈顶元素的上面,使之成为新的栈顶元素;从一个栈删除元素又称作出栈或退栈,它是把栈顶元素删除掉,使其相邻的元素成为新的栈顶元素。栈可以用顺序表实现,也可以用链表实现,这里为了方便就用顺序表实现。#-*-coding:utf-8-*-classStack(objec

系统 2019-09-27 17:55:26 2402

Python

Python:线程为什么搞个setDaemon

前言使用Python都不会错过线程这个知识,但是每次谈到线程,大家都下意识说GIL全局锁,但其实除了这个老生常谈的话题,还有很多有价值的东西可以探索的,譬如:setDaemon()。线程的使用与存在的问题我们会写这样的代码来启动多线程:importtimeimportthreadingdeftest():whileTrue:printthreading.currentThread()time.sleep(1)if__name__=='__main__':t

系统 2019-09-27 17:54:09 2402

Python

Python中解析JSON并同时进行自定义编码处理实例

在对文件内容或字符串进行JSON反序列化(deserialize)时,由于原始内容编码问题,可能需要对反序列化后的内容进行编码处理(如将unicode对象转换为str)。在Python中,一种方式是先使用json.load或json.loads反序列化得到dict对象,然后对这个dict对象进行编码处理。但其实在json.load与json.loads中,有可选参数object_hook。通过使用此参数,可以对反序列化得到的dict直接进行处理,并使用处理

系统 2019-09-27 17:52:23 2402

Python

python 回溯初级练习代码

#回溯练习#给你两个整数n和k,从1-n中选择k个数字的组合。比如n=4,那么从1,2,3,4中选取两个数字的组合,包括图上所述的四种[1,2],[1,3],[2,3],[2,4]。defcombine(n,k):#globalres_listres_list=[]defbacktrack(n,k,start,list_one):ifk==0:res_list.append(list_one[:])#注意,这里必须要[:],为什么,不然都是记录引用,每次L

系统 2019-09-27 17:51:02 2402

Python

基于python的scrapy环境搭建

0.1安装python软件32位机的电脑安装python-3.6.3.exe64位机的电脑安装python-3.6.3-amd64.exe0.1.1python环境搭建执行安装程序选择AddPython3.6toPATH,然后点击Customizeinstallation确保所有的选项都被选中,然后点击Next选择Installforallusers,然后定制自己的安装路径。点击Install按钮安装完成后,启动cmd命令行(需要在管理员界面进入)。输入p

系统 2019-09-27 17:50:00 2402

Python

python命令行参数解析OptionParser类用法实例

本文实例讲述了python命令行参数解析OptionParser类的用法,分享给大家供大家参考。具体代码如下:fromoptparseimportOptionParserparser=OptionParser(usage="usage:%prog[optinos]filepath")parser.add_option("-t","--timeout",action="store",type='int',dest="timeout",default=None

系统 2019-09-27 17:38:14 2402

Python

解决python xx.py文件点击完之后一闪而过的问题

1.问题复现:有时候我们去点击.py文件文件里明明有打印信息,却一闪而过,没有任何显示比如以下内容#!/usr/local/bin/pythonimportsysprint(sys.platform)print(2**100)x='Spam'print(x*8)print'helloworld'2.具体原因:其实程序是运行了,运行完之后就把显示的窗口关掉了除非你机器运行很卡,不然正常情况下你是看不见任何输出3.解决方法:在程序末尾加“input()”函数(

系统 2019-09-27 17:57:29 2401

Python

python在OpenCV里实现投影变换效果

前面学习了仿射变换,是经常使用到的变换,也很容易理解。在日常生活中,经常会遇到下面这种的情况:仔细地观察比亚迪秦这台汽车的车牌,发现它拍照的角度不是垂直的方向,而是有一个角度,当要进行车牌识别的时候,发现字符是变形的,与电脑里比较的图片肯定有区别,因此识别不出来。这时怎么办呢?就需要经过一个投影变换才可以把车牌号纠正过来,才能进入识别过程。好吧,到这里认识到投影变换的感性认识了,那么你又会继续考虑下一个问题,在软件里怎么样计算呢,难道还是使用仿射变换的矩阵

系统 2019-09-27 17:56:19 2401