- 军军小站|张军博客
拥有Python标签的文章
Python

python爬虫---从零开始(二)Urllib库

接上文再继续我们的爬虫,这次我们来述说Urllib库1,什么是Urllib库Urllib库是python内置的HTTP请求库urllib.request请求模块urllib.error异常处理模块urllib.parseurl解析模块urllib.robotparserobots.txt解析模块不需要额外安装,python自带的库。注意:python2importurllib2response=urllib2.urlopen('http://baidu.c

系统 2019-09-27 17:50:06 2073

Python

Python3 中的循环语句有 for 和 while。

while循环Python中while语句的一般形式while判断条件:语句while有限循环n=100sum=0counter=1whilecounter<=n:sum=sum+countercounter+=1print("1到%d之和为:%d"%(n,sum))while无限循环我们可以通过设置条件表达式永远不为false来实现无限循环,实例如下:var=1whilevar==1:#表达式永远为truenum=int(input("输入一个数字:")

系统 2019-09-27 17:49:30 2073

Python

Python篇:文件操作

文件操作文件操作介绍打开打开方式File对象的属性文件的读写File对象的常用方法读写定位关闭os模块详解os简介常用功能关于操作系统关于文件与目录路径操作json和pickle模块详解json简介python类型数据和JSON数据格式互相转换规则jsontopythonpythontojson数据类型编解码序列化及反序列化常用参数pickle简介JSON和pickle模块的区别文件操作介绍打开默认数据是加载到内存中,结果也是保存到内存中,程序执行结束,所

系统 2019-09-27 17:49:28 2073

Python

python访问纯真IP数据库的代码

核心代码:#!/usr/bin/envpython#-*-coding:utf-8-*-frombisectimportbisect_LIST1,_LIST2=[],[]_INIT=Falseip2int=lambdaip_str:reduce(lambdaa,b:(a<<8)+b,[int(i)foriinip_str.split('.')])def_init():global_LIST,_INITifnot_INIT:forlinopen('ipdat

系统 2019-09-27 17:48:36 2073

Python

几个方法帮你加快Python运行速度

Python运行的慢是历来被诟病的,一方面和语言有关,另一方面可能就是你代码的问题。语言方面的问题我们解决不了,所以只能在编程技巧上来提高程序的运行效率。下面就给大家分享几个提高运行效率的编程方法。首先,我们需要来衡量代码的时间和空间的复杂性,不然仅仅用我们的肉眼很难感受代码时间长短的变化。python中的profiler可以帮助我们测量程序的时间和空间复杂度。使用时通过-o参数传入可选输出文件以保留性能日志。具体使用方法如下:python-mcProfi

系统 2019-09-27 17:48:32 2073

Python

python从list列表中选出一个数和其对应的坐标方法

例1:给一个列表如下,里面每个元素对应的是x和y的值a=[[5,2],[6,3],[8,8],[1,3]]现在要挑出y的值为3对应的x的值,即6和1importnumpyasnpa=[[5,2],[6,3],[8,8],[1,3]]#c=np.mat(a),因为只有矩阵(也可以用array)才能用a[0,0]这样的调用#表示第一个数的用法而list没有,故在最后append需要用到#注意:array也没有index这样的用法(只有list有,此题a已经是l

系统 2019-09-27 17:48:10 2073

Python

Python3 文章标题关键字提取的例子

思路:1.读取所有文章标题;2.用“结巴分词”的工具包进行文章标题的词语分割;3.用“sklearn”的工具包计算Tf-idf(词频-逆文档率);4.得到满足关键词权重阈值的词结巴分词详见:结巴分词Githubsklearn详见:文本特征提取――4.2.3.4Tf-idf项加权importosimportjiebaimportsysfromsklearn.feature_extraction.textimportTfidfVectorizersys.pat

系统 2019-09-27 17:48:06 2073

Python

Python第六次作业

Python作为本学期新学的一门语言,和以前学的C,Java有着很大的不同,不仅环境安装简单,它的语言用法更加的简单,也更加的随意。Pycharm的使用因为有引申输入的存在,也更加方便快捷,jupyternotebook的使用有着保存历史的程序功能,也很方便,不仅可以当课件也可以看以前写过的代码,方便我们的学习和复习。通过python的学习,也养成了缩进的习惯,这样可以不仅能让python的语法正确,也可以使程序看起来更加的美观整洁。边讲边练的形式和以前上

系统 2019-09-27 17:47:01 2073

Python

第一个 Python 程序 - Email Manager Demo

看了一些基础的Python新手教程后,深深感觉到Python的简洁与强大,这是我的第一个PythonDemo。下面是完整代码与执行截图。代码:#encoding:utf-8'''@author:Techzero@email:techzero@163.com@time:2014-4-30下午1:31:04'''importosimportsysimportcPickleaspclassPerson:def__init__(self,name,email):'

系统 2019-08-12 01:52:12 2073

Python

详解Python下载图片并保存本地的两种方式

一:使用Python中的urllib类中的urlretrieve()函数,直接从网上下载资源到本地,具体代码:importos,statimporturllib.requestimg_url="https://timgsa.baidu.com/timg?image&quality=80&size=b9999_10000&sec=1516371301&di=d99af0828bb301fea27c2149a7070"\"d44&imgtype=jpg&er=

系统 2019-09-27 17:55:44 2072

Python

阿里云ubuntu安装python3,pip3,gensim,jieba

一、安装python31.下载python安装包(python3.6)wgethttps://www.python.org/ftp/python/3.6.5/Python-3.6.5.tgz2.将安装包移动到/usr/local文件夹下mvPython-3.6.5.tgz/usr/local/3.在local目录下创建python3目录mkdir/usr/local/python34.进入到Python-3.6.5.tgz所在的目录下cd/usr/loca

系统 2019-09-27 17:55:20 2072

Python

FastDFS分布式系统在Docker和Python中的应用

fastdfs分布式系统在docker和python中的应用一、什么是FastDFS:1.文件上传交互过程:2.文件下载交互过程:二、Docker安装FastDFS1.通过镜像下载2.将容器上的文件夹映射到本地路径,启动tracker和storage服务器3.查看tracker和storage服务器是否开启三、FastDFS的Python客户端1.下载环境包2.定义自己的配置文件3.上传文件例子四、自定义django文件存储并且保存到FDFS服务器上1.在

系统 2019-09-27 17:54:32 2072

Python

Python 爬虫面试题 170 道:2019 版

最近在刷面试题,所以需要看大量的Python相关的面试题,从大量的题目中总结了很多的知识,同时也对一些题目进行拓展了,但是在看了网上的大部分面试题不是很满意,一个是有些部分还是Python2的代码,另一个就是回答的很简单,有些关键的题目,也没有点出为什么,最重要的是还有一些复制粘贴根本就跑不通,这种相信大家深有体会吧,这样就导致我们可能需要去找其他人发的类似的教程。难受啊,所以我决定针对市面上大多的Python题目做一个分析,同时也希望大家尽可能的做到举一

系统 2019-09-27 17:54:18 2072

Python

python字典的setdefault的巧妙用法

现在有一个员工字典,类似这样的结构staff_dic={"name":"灭霸","age":10000,"hobbies":["打响指","扣脚"]}假设我们要给员工添加爱好信息,但是我们不知道hobby这个键存不存在,我们通常的做法是分为三步:1)从字典中取到hobbies对应的值,如果没有hobbies这个键,则设置这个值为空列表2)对这个值进行更新操作3)将更新后的值赋值回字典hobbies=staff_dic.get("hobby",[])hobb

系统 2019-09-27 17:49:13 2072

Python

【Python】matplotlib基本绘图总结

importmatplotlib.pyplotasplt1.plt.plot()#绘图函数参数:color:线条颜色(例如color='b'设置为蓝色,‘g'、'r'、‘y'、'b'、'w'分别为绿红黄黑白)label:线条标签,若要显示需要加plt.legend()linestyle:线条风格(’-‘、’--‘、’:‘、'-.'分别为实线、破折线、虚线、点划线)linewidth:线条宽度marker:标记字符样式(可设置为'.'、'o'等)makers

系统 2019-09-27 17:48:41 2072