项目需要程序能够放在超算中心定时运行，于是针对scrapy写了一个定时爬虫的程序main.py，直接放在scrapy的存储代码的目录中就能设定时间定时多次执行。最简单的方法：直接使用Timer类importtimeimportoswhileTrue:os.system("scrapycrawlNews")time.sleep(86400)#每隔一天运行一次24*60*60=86400s或者，使用标准库的sched模块importsched#初始化sched
系统 2019-09-27 17:52:04 2554
今天想和大家聊聊Python与爬虫python之所以能迅速风靡全国，和大街小巷各种的培训机构脱不开关系。一会pythonAI未来以来，一会儿4个月培养人工智能与机器学习顶尖人才，更有甚者什么一周成就爬虫分析师...我这一把年纪了，胆子小只敢在自己的公众号里说说。至于出去了，你们该实力互吹、生猛造势的，我看看就好不说话。网上经常看到爬虫的文章，什么爬了几十万数据，一把撸下来几千万评论的，听起来高大上又牛逼。但其实爬虫工程师，你看网上有几个招聘的？为什么，因为
系统 2019-09-27 17:48:00 2554
choice()方法从一个列表，元组或字符串返回一个随机项。语法以下是choice()方法的语法：choice(seq)注意：此函数是无法直接访问的，所以我们需要导入random模块，然后我们需要使用random对象来调用这个函数。参数seq--这可能是一个列表，元组或字符串...返回值该方法返回一个随机项。例子下面的例子显示了choice()方法的使用。#!/usr/bin/pythonimportrandomprint"choice([1,2,3,5,
系统 2019-09-27 17:47:37 2554
1.pip的下载和安装https://blog.csdn.net/zhenaoxi1077/article/details/80036182，下载了pip-10.0.1.tar文件，安装中出现Nomodulenamedsetuptools问题。2.Python2之Nomodulenamedsetuptools安装piphttps://blog.csdn.net/L18780079219/article/details/80954271下载了其中的setup
系统 2019-09-27 17:55:19 2553
Python_Openpyxl1.安装pipinstallopenpyxl2.打开文件①创建fromopenpyxlimportWorkbook#实例化wb=Workbook()#激活worksheetws=wb.active②打开已有>>>fromopenpyxlimportload_workbook>>>wb2=load_workbook('文件名称.xlsx')3.储存数据#方式一：数据可以直接分配到单元格中(可以输入公式)ws['A1']=42#方
系统 2019-09-27 17:51:21 2553
字符串遍历>>>a_str="helloitcast">>>forcharina_str:...print(char,end='')...helloitcast列表遍历>>>a_list=[1,2,3,4,5]>>>fornumina_list:...print(num,end='')...12345元组遍历>>>a_turple=(1,2,3,4,5)>>>fornumina_turple:...print(num,end="")12345字典遍历遍历字
系统 2019-09-27 17:46:46 2553
这篇文章讨论Python中下划线_的使用。跟Python中很多用法类似，下划线_的不同用法绝大部分（不全是）都是一种惯例约定。一、单个下划线直接做变量名（_）主要有三种情况：1.解释器中_符号是指交互解释器中最后一次执行语句的返回结果。这种用法最初出现在CPython解释器中，其他解释器后来也都跟进了。复制代码代码如下:>>>_Traceback(mostrecentcalllast):File"",line1,inNameError:name'_'isn
系统 2019-09-27 17:37:41 2553
windows创建虚拟环境在你需要的地方建立一个py3目录微软cmd，cd到这个py3目录创建虚拟环境(最后的英文点不要漏掉，"."表示在当前目录里创建虚拟环境，你也可以指定目录如myenv)python-mvenv.激活虚拟环境继续在windowscmd下操作：进入到Scripts,执行命令：activate.bat，出现(py3)表示激活成功如需退出虚拟环境进入到Scripts，执行命令：deactivateMac或linux创建虚拟环境创建一个py3
系统 2019-09-27 17:52:16 2552
识别快递单号这次跟老师做项目，这项目大概是流水线上识别快递上的快递单号。首先我尝试了解条形码的基本知识百度百科：条形码条形码(barcode)是将宽度不等的多个黑条和空白，按照一定的编码规则排列，用以表达一组信息的图形标识符。常见的条形码是由反射率相差很大的黑条（简称条）和白条（简称空）排成的平行线图案。条形码可以标出物品的生产国、制造厂家、商品名称、生产日期、图书分类号、邮件起止地点、类别、日期等许多信息，因而在商品流通、图书管理、邮政管理、银行系统等许
系统 2019-09-27 17:51:51 2552
下面介绍在Linux上利用python获取本机ip的方法.经过网上调查,发现大致有两种方法,一种是调用shell脚本,另一种是利用python中的socket等模块来得到,下面是这两种方法的源码:#!/usr/bin/envpython#encoding:utf-8#description:getlocalipaddressimportosimportsocket,fcntl,structdefget_ip():#注意外围使用双引号而非单引号,并且假设默认
系统 2019-09-27 17:50:19 2552
前言如果你搜一圈"Fabric"关键字，你会发现90%的资料都是过时的，因为现在Fabric支持Python3，但是它又不兼容旧版Fabric。所以，如果你按照那些教程去操作的话根本跑不通。如果你还没用过Fabric，那么这篇文章就是帮你快速上手Fabric的。不管你现在用不用，先了解了以后也用得着。平时我们的开发流程是这样，经过几个月奋战，项目终于开发完了，测试也没问题了，我们就把代码提交到GitHub那样的托管平台，准备部署到正式环境。你小心翼翼地登录
系统 2019-09-27 17:49:14 2552
我们之前看到了函数和对象。从本质上来说，它们都是为了更好的组织已经有的程序，以方便重复利用。模块(module)也是为了同样的目的。在Python中，一个.py文件就构成一个模块。通过模块，你可以调用其它文件中的程序。引入模块我们先写一个first.py文件，内容如下：复制代码代码如下:deflaugh():print'HaHaHaHa'再写一个second.py，并引入first中的程序：复制代码代码如下:importfirstforiinrange(1
系统 2019-09-27 17:45:51 2552
最近真的感觉到了python生态的强大（倒吸一口凉气）现在介绍一个可以生成动态二维码的库（myqr）效果如图：第一步要安装myqr库在cmd中直接用pip安装pipinstallmyqr第二步fromMyQRimportmyqrimportosversion,level,qr_name=myqr.run(words="https://www.baidu.com",#可以是字符串，也可以是网址(前面要加http(s)://)version=1,#设置容错率为
系统 2019-09-27 17:57:03 2551
python数据处理小记简介：1、DataFram定义：2、DataFrame的append3、DataFrame去除列或行4、DataFrame查看数据基本统计情况5、DataFrame的applymap及apply操作6、DataFrame的元素、列、行的获取7、DataFrame的透视表8、DataFrame空值处理、去重9、DataFrame的数据库查询10、DataFrame插入数据库11、python去除字符串前后指定值简介：目前从事数据版块的
系统 2019-09-27 17:52:04 2551
一、缘起前不久，我在翻译GuidovanRossum（Python之父）的文章时，给他留言，申请非商业用途的翻译授权。过程中起了点小误会，略去不表，最终的结果是：他的文章以CCBY-NC-SA4.0许可协议进行授权。部分对话如下：CC协议是一种授权许可协议，我曾看到过几次，但了解不多，所以便查阅了相关的内容。本文主要是作个记录，既是加深自己的理解，也给有需要的同学一个参考。二、著作权、著佐权与自由版权对于知识产权，通常有如下几种说法：AllRightsRe
系统 2019-09-27 17:50:17 2551
