- 军军小站|张军博客
搜索到与相关的文章
Python

python利用urllib实现爬取京东网站商品图片的爬虫实例

本例程使用urlib实现的,基于python2.7版本,采用beautifulsoup进行网页分析,没有第三方库的应该安装上之后才能运行,我用的IDE是pycharm,闲话少说,直接上代码!#-*-coding:utf-8-*importreimportosimporturllibimporturllib2frombs4importBeautifulSoupdefcraw(url,page):html1=urllib2.urlopen(url).read(

系统 2019-09-27 17:53:53 1848

Python

python+selenium实现简历自动刷新的示例代码

本文用到的文件的下载地址百度网盘链接:https://pan.baidu.com/s/1tmpdEfAZKff5TOMAitUXqQ提取码:e6at1安装Python和selenium(1)下载Python官网地址:https://www.python.org/ftp/python/3.6.8/python-3.6.8-amd64.exe百度网盘链接如上所示(2)安装Python等待安装完毕(3)安装seleniumpipinstallselenium�C

系统 2019-09-27 17:53:10 1848

Python

深度学习中的Adversarial Examples(基于Python实现)

随着深度学习研究的深入,相关应用已经在许多领域展现出惊人的表现。一方面,深度学习的强大能力着实吸引着学术界和产业界的眼球。另外一方面,深度学习的安全问题也开始引起广泛地关注。对于一个给定的深度神经网络,经过训练,它可能在具体任务上(例如图像识别)表现出较高的准确率。但是在原本能够被正确分类的图像中引入稍许(人眼不易察觉)扰动,神经网络模型就可能被误导,从而得出错误的分类结果。例如,下图中最左侧的熊猫图片本来可以被正确分类,向其中加入一定的扰动,结果会得到右

系统 2019-09-27 17:52:12 1848

Python

Python实现数据可视化看如何监控你的爬虫状态【推荐】

今天主要是来说一下怎么可视化来监控你的爬虫的状态。相信大家在跑爬虫的过程中,也会好奇自己养的爬虫一分钟可以爬多少页面,多大的数据量,当然查询的方式多种多样。今天我来讲一种可视化的方法。关于爬虫数据在mongodb里的版本我写了一个可以热更新配置的版本,即添加了新的爬虫配置以后,不用重启程序,即可获取刚刚添加的爬虫的状态数据。1.成品图这个是监控服务器网速的最后成果,显示的是下载与上传的网速,单位为M。爬虫的原理都是一样的,只不过将数据存到InfluxDB的

系统 2019-09-27 17:50:52 1848

Python

python基础之函数的返回值(5)

函数的返回值函数执行完毕之后可以得到一个结果,该结果可以被接受或者使用函数划分为两大类:执行过程函数:函数执行之后没有任何结果可以在函数之外接收到(没有return语句的函数)#执行过程函数res=print("你好")print(res)#结果是None-空值具有返回值的函数:函数执行之后可以返回一个结果到函数之外被接收或者使用(具有return语句)#具有返回值的函数res=id(1)print(res)return:返回的意思#自己写具有返回值的函数

系统 2019-09-27 17:49:20 1848

Python

解决Python设置函数调用超时,进程卡住的问题

背景:最近写的Python代码不知为何,总是执行到一半卡住不动,为了使程序能够继续运行,设置了函数调用超时机制。代码:importtimeimportsignaldeftest(i):time.sleep(i%4)print"%dwithintime"%(i)returniif__name__=='__main__':defhandler(signum,frame):raiseAssertionErrorforiinrange(1,10):try:sign

系统 2019-09-27 17:48:29 1848

Python

如何美观地打印 Python 对象?这个标准库可以简单实现

image前不久,我写了一篇文章回顾Python中print的发展历史,提到了两条发展线索:明线:早期的print语句带有C和Shell的影子,是个应用程序级的statement,在最初十几年里,经历过PEP-214和PEP-259的改进;再到2009年的大版本3.0,由语句改成了print()函数,还在3.3版本,做过一次功能增强,最终上升成为一等的内置函数。暗线:介绍了print的竞争对手们,像传统的日志模块logging、调试模块pdb、主流IDE的

系统 2019-09-27 17:48:26 1848

Python

python文件和目录操作函数小结

python中对文件、文件夹(文件操作函数)的操作需要涉及到os模块和shutil模块。得到当前工作目录,即当前Python脚本工作的目录路径:os.getcwd()返回指定目录下的所有文件和目录名:os.listdir()函数用来删除一个文件:os.remove()删除多个目录:os.removedirs(r“c:\python”)检验给出的路径是否是一个文件:os.path.isfile()检验给出的路径是否是一个目录:os.path.isdir()判

系统 2019-09-27 17:47:37 1848

Python

python笔记——os模块

os:操作系统(operatingsystem)os模块中关于文件/目录常用的函数使用方法函数名使用方法getcwd()返回当前工作目录chdir(path)改变工作目录listdir(path=’.’)举指定目录中的文件名(’.‘表示当前目录,’…'表示上一级目录)mkdir(path)创建单层目录,如该目录已存在抛出异常makedirs(path)递归创建多层目录,如该目录已存在抛出异常,注意:'E:\a\b’和’E:\a\c’并不会冲突remove(

系统 2019-09-27 17:46:01 1848

Python

python 实现网上商城,转账,存取款等功能的信用卡系统

一、要求二、思路1.购物类buy接收信用卡类的信用卡可用可用余额,返回消费金额2.信用卡(ATM)类接收上次操作后,信用卡可用余额,总欠款,剩余欠款,存款其中:1.每种交易类型不单独处理金钱,也不单独记录流水账,每种交易类型调用处理金钱的函数(传入交易类型,交易金额)2.处理金钱的函数,调用配置文件中关于每种交易类型的加减钱和利率返回本次操作后信用卡可用余额,总欠款,剩余欠款,存款3.客户端银行管理员注册登陆普通用户注册登陆发送需求:注册、登陆、交易类型、

系统 2019-09-27 17:38:12 1848