拥有Python标签的文章
Python

python爬虫小案例_从豆瓣爬取《哪吒之魔童降世》的剧照

一、在豆瓣电影网爬取以下剧照保存到本地:本次案例只爬取前5页的剧照,先获取前五页的链接:foriinrange(5):url='https://movie.douban.com/subject/26794435/photos?type=S&start='+str(i*30)+'&sortby=like&size=a&subtype=a'print(url)由下图可知这些剧照是在ul标签下二、爬取和保存到本地的参考代码如下:#导入相应的模块importosi

系统 2019-09-27 17:49:06 2232

Python

Web应用程序学习——《Python编程:从人门到实践》

前言在Python越来越火的当下,感觉作为一个计算机专业的学生还是需要掌握一些Python的编程技能。《Python编程:从入门到实践》是一本好书,我主要学习书里最后的项目部分,因为有C/C++的学习基础,所以对Python的学习我是想通过实践,从项目中学习。这段时间打算学习书上这个Web应用程序的项目,Web的相关知识是我没接触到的,第一次看到这个项目我并没有很大的兴趣去做,因为怕现在做了之后等到工作的时候其实完全不需要用到,也早忘了。但这段时间,体验了

系统 2019-09-27 17:47:17 2232

Python

分析运行中的 Python 进程详细解析

在Java中打印当前线程的方法栈,可以用kill-3命令向JVM发送一个OS信号,JVM捕捉以后会自动dump出来;当然,也可以直接使用jstack工具完成,这些方法好几年前我在这篇性能分析的文章中介绍过。这样的需求可以说很常见,比如定位死锁,定位一个不工作的线程到底卡在哪里,或者定位为什么CPU居高不下等等问题。现在工作中我用的是Python,需要线上问题定位的缘故,也有了类似的需求――想要知道当前的Python进程“在干什么”。但是没有了JVM的加持,

系统 2019-09-27 17:46:00 2232

Python

利用Python画ROC曲线和AUC值计算

前言ROC(ReceiverOperatingCharacteristic)曲线和AUC常被用来评价一个二值分类器(binaryclassifier)的优劣。这篇文章将先简单的介绍ROC和AUC,而后用实例演示如何python作出ROC曲线图以及计算AUC。AUC介绍AUC(AreaUnderCurve)是机器学习二分类模型中非常常用的评估指标,相比于F1-Score对项目的不平衡有更大的容忍性,目前常见的机器学习库中(比如scikit-learn)一般也

系统 2019-09-27 17:45:41 2232

Python

python 实现红包随机生成算法的简单实例

实例如下:#!/usr/bin/python#-*-coding:utf-8-*-importrandomclassCDispatch:def__init__(self,sum,count):self.sum=sumself.count=count#print'initheresum=',sum,',count=',countdef__del__(self):pass#print'rundeltheclass'defgetListInfo(self):li

系统 2019-09-27 17:45:27 2232

Python

python中常用的九种预处理方法分享

本文总结的是我们大家在python中常见的数据预处理方法,以下通过sklearn的preprocessing模块来介绍;1.标准化(StandardizationorMeanRemovalandVarianceScaling)变换后各维特征有0均值,单位方差。也叫z-score规范化(零均值规范化)。计算方式是将特征值减去均值,除以标准差。sklearn.preprocessing.scale(X)一般会把train和test集放在一起做标准化,或者在tr

系统 2019-09-27 17:38:06 2232

Python

Python+MongoDB自增键值的简单实现

背景最近在写一个测试工具箱,里面有一个bug记录系统,因为后台我是用Django和MongoDB来实现的,就遇到了一个问题,要如何实现一个自增的字段。传统的关系型数据库要实现起来是非常容易,只要直接设置一个自增字段就行了,插入数据时不用管这个键值,只管自己处理的数据就行了,会自动实现自增的功能,但是非关系型数据库好像没有这个功能(或者我不知道)。百度之后发现都是MongoDB的设置方法,并不是我想要的。解决思路百度没有找到好的思路,那就只能自己解决了,我的

系统 2019-09-27 17:37:37 2232

Python

python3基于OpenCV实现证件照背景替换

本文实例为大家分享了python3实现证件照背景替换的具体代码,供大家参考,具体内容如下importcv2importnumpyasnpimg=cv2.imread('zjz.jpg')#缩放rows,cols,channels=img.shapeimg=cv2.resize(img,None,fx=0.5,fy=0.5)rows,cols,channels=img.shapecv2.imshow('img',img)#转换hsvhsv=cv2.cvtCo

系统 2019-09-27 17:37:35 2232

Python

python爬虫(4)——scrapy框架

安装urllib库更适合写爬虫文件,scrapy更适合做爬虫项目。步骤:先更改pip源,国外的太慢了,参考:https://www.jb51.net/article/159167.htm升级pip:python-mpipinstall--upgradepippipinstallwheelpipinstalllxmlpipinstallTwistedpipinstallscrapy常用命令核心目录新建项目:scrapystartprojectmcq运行独立的

系统 2019-09-27 17:55:57 2231

Python

python或C++读取指定文件夹下的所有图片

本文实例为大家分享了python或C++读取指定文件夹下的所有图片,供大家参考,具体内容如下1.python读取指定文件夹下的所有图片路径和图片文件名importcv2fromosimportwalk,pathdefget_fileNames(rootdir):data=[]prefix=[]forroot,dirs,filesinwalk(rootdir,topdown=True):fornameinfiles:pre,ending=path.split

系统 2019-09-27 17:55:49 2231

Python

[python pandas]dataframe添加行/按照原

网上有许多方法提到要用append或者loc直接赋值,但是我运行发现都不行,不知道为啥。我是想把原dataframe中的几行提出来放到新的dataframe中。方法如下:#按照原dataframe的列标题创建新的dataframeNewDataFrame=pd.DataFrame(columns=OriginalDataFrame.columns.values)#i为要提取的行号row=OriginalDataFrame.loc[[i]]frames=[N

系统 2019-09-27 17:54:37 2231

Python

Python实现打砖块小游戏代码实例

这次用Python实现的是一个接球打砖块的小游戏,需要导入pygame模块,有以下两条经验总结:1.多父类的继承2.碰撞检测的数学模型知识点稍后再说,我们先看看游戏的效果和实现:一、游戏效果二、游戏代码#导入模块importpygamefrompygame.localsimport*importsys,random,time,mathclassGameWindow(object):'''创建游戏窗口类'''def__init__(self,*args,**

系统 2019-09-27 17:54:09 2231

Python

python爬虫实例二:地图上的火锅美味

申明:本文出自我自己的微信号python1024,属于个人原创。先看下代码目录结构:有三个.py文件,map_craw.py、stat.py、store.py分别的功能是爬取数据、数据分析、将爬取的数据存储入mysql数据库中,由于stat.py还没写完,这篇文章主要讲数据的爬取与存储。这里的地图就是baidumap,如果是没有爬虫基础的同学先到CSDN里面搜一下,安装个Chrome浏览器,顺便在浏览器的右上角更多中找到更多工具—>扩展程序选项将JSONV

系统 2019-09-27 17:53:30 2231

Python

三十岁了,从零开始学python还有前途吗?

从学习的角度来说,三十岁开始学习Python编程并不算晚,但是如果从就业的角度来说,却并不算早了。Python语言在当下的大数据时代背景下得到了广泛的应用,对于职场人来说,学习Python还是有一定必要的,尤其是对于数据比较敏感的岗位,像咨询类岗位、市场分析类岗位、运营管理类岗位等等。如果想在三十岁的时候通过学习Python来谋求一份程序员工作,则需要有一个系统的计划,毕竟三十岁对于程序员来说,正处在升级转换的重要发展期,而三十岁却刚入行程序员,必然会有一

系统 2019-09-27 17:53:16 2231

Python

Python科学画图代码分享

Python画图主要用到matplotlib这个库。Matplotlib是一个Python的2D绘图库,它以各种硬拷贝格式和跨平台的交互式环境生成出版质量级别的图形。这里有一本电子书供大家参考:《Python图表绘制:matplotlib绘图库入门》具体来说是pylab和pyplot这两个子库。这两个库可以满足基本的画图需求,而条形图,散点图等特殊图,下面再单独具体介绍。首先给出pylab神器镇文:pylab.rcParams.update(params)

系统 2019-09-27 17:53:08 2231