搜索到与相关的文章
Python

浅析python实现scrapy定时执行爬虫

项目需要程序能够放在超算中心定时运行,于是针对scrapy写了一个定时爬虫的程序main.py,直接放在scrapy的存储代码的目录中就能设定时间定时多次执行。最简单的方法:直接使用Timer类importtimeimportoswhileTrue:os.system("scrapycrawlNews")time.sleep(86400)#每隔一天运行一次24*60*60=86400s或者,使用标准库的sched模块importsched#初始化sched

系统 2019-09-27 17:52:04 2530

Python

python实现最小二乘法线性拟合

本文python代码实现的是最小二乘法线性拟合,并且包含自己造的轮子与别人造的轮子的结果比较。问题:对直线附近的带有噪声的数据进行线性拟合,最终求出w,b的估计值。最小二乘法基本思想是使得样本方差最小。代码中self_func()函数为自定义拟合函数,skl_func()为调用scikit-learn中线性模块的函数。importnumpyasnpimportmatplotlib.pyplotaspltfromsklearn.linear_modelimp

系统 2019-09-27 17:48:53 2530

Python

python小案例_Python蟒蛇绘制

这里直接上代码,想了解更多turtle库可点击这里importturtle#引用绘图库turtleturtle.setup(800,400,300,300)#设置主窗口的大小和位置,后两个参数可选turtle.penup()#提起笔移动,不绘制图形turtle.fd(-330)#画笔向绘制方向的当前方向移动distance(integerorfloat)的pixels距离turtle.pendown()#落下画笔turtle.pensize(30)#设置画

系统 2019-09-27 17:45:50 2530

Python

Python中MySQLdb和torndb模块对MySQL的断连问题处理

在使用python对wordpresstag进行细化代码处理时,遇到了调用MySQLdb模块时的出错,由于错误提示和问题原因相差甚远,查看了N久代码也未发现代码有问题。后来问了下师傅,被告知MySQLdb里有一个断接的坑,需要进行数据库重连解决。一、报错代码及提示运行出错的代码如下:importMySQLdbdefgetTerm(db,tag):cursor=db.cursor()query="SELECTterm_idFROMwp_termswheren

系统 2019-09-27 17:37:56 2530

Python

python魔法方法-属性访问控制详解

属性访问控制所谓的属性访问控制就是控制点号访问属性的行为,而且不仅是类的外部,连类的内部也受控制,代码见真章,边看代码边解释:•__getattr__(self,item)定义当访问不存在的属性时的行为,注意是不存在的属性。classFoo(object):def__init__(self,value):self.value=valuedef__getattr__(self,item):printitem#查看得到的参数是什么printtype(item)

系统 2019-09-27 17:37:51 2530

Python

简单解决Python文件中文编码问题

读写中文需要读取utf-8编码的中文文件,先利用sublimetext软件将它改成无DOM的编码,然后用以下代码:withcodecs.open(note_path,'r+','utf-8')asf:line=f.readline()printline这样就可以正确地读出文件里面的中文字符了。同样的,如果要在创建的文件中写入中文,最好也和上面差不多:withcodecs.open(st,'a+','utf-8')asbook_note:book_note.

系统 2019-09-27 17:37:45 2530

Python

Python中的下划线详解

这篇文章讨论Python中下划线_的使用。跟Python中很多用法类似,下划线_的不同用法绝大部分(不全是)都是一种惯例约定。一、单个下划线直接做变量名(_)主要有三种情况:1.解释器中_符号是指交互解释器中最后一次执行语句的返回结果。这种用法最初出现在CPython解释器中,其他解释器后来也都跟进了。复制代码代码如下:>>>_Traceback(mostrecentcalllast):File"",line1,inNameError:name'_'isn

系统 2019-09-27 17:37:41 2530

编程技术

ddd quickly 中文版译者序

在去北京参加infoq大会之前,我就开始了对DDDQuickly的翻译工作,如今,在我和泰稳的努力下,它终于可以跟大家见面了。我心甚慰。可以去infoq中文站免费获得此迷你书。======================================序言在2004年之前的某一天,我跟所在部门的一个设计师进行沟通,当时他为自己的一个思路兴奋不已,而我要做的事情就是跟他讨论清楚他头脑中的那个想法,然后写出需求和设计文件来。大家可能会注意到,很多时候,需求是从

系统 2019-08-29 23:43:54 2530

编程技术

版本号含义

所以特意从网络搜集了一些关于这方面的简单介绍。大家可以点击查看详细。1.软件版本阶段说明*Base版:此版本表示该软件仅仅是一个假页面链接,通常包括所有的功能和页面布局,但是页面中的功能都没有做完整的实现,只是做为整体网站的一个基础架构。*Alpha版:此版本表示该软件在此阶段主要是以实现软件功能为主,通常只在软件开发者内部交流,一般而言,该版本软件的Bug较多,需要继续修改。*Beta版:该版本相对于α版已有了很大的改进,消除了严重的错误,但还是存在着一

系统 2019-08-29 23:28:31 2530

编程技术

js压缩

在线js解压缩工具:http://dean.edwards.name/packer/js压缩工具:http://aymoo.cn/js-compressor.html如何正确的在XHTML插入FLASHhttp://www.aspstat.com/2182.刷新:onbeforeunload(){}3.JS判断IE是刷新还是关闭Js代码window.onbeforeunload=function(){varn=window.event.screenX-wi

系统 2019-08-29 22:19:00 2530