定时与邮件在这一关,我们希望为一般的爬虫程序新增两个实用性比较强的功能:第一是定时功能,即程序可以根据我们设定的时间自动爬取数据;第二是通知功能,即程序可以把爬取到的数据结果以邮件的形式自动发送到我们的邮箱。这两个功能可以让爬虫程序定时向我们汇报。试想一下,如果你是一位股票(或比特币)的持有者,你希望及时爬取股票(或比特币)每日的价格数据,方便你能及时卖出或买入,那每天都去启动一遍爬虫程序是极其不高效的。而此时,如果你的爬虫程序有定时和发送邮件功能,能自动
系统 2019-09-27 17:50:59 2427
0x01OpenCV安装通过命令pipinstallopencv-python安装pipinstallopencv-python0x02示例importcv2cap=cv2.VideoCapture(0)#打开摄像头while(1):#getaframeret,frame=cap.read()#showaframecv2.imshow("capture",frame)#生成摄像头窗口ifcv2.waitKey(1)&0xFF==ord('q'):#如果按下
系统 2019-09-27 17:50:51 2427
基本的写代码流程:1、创建xxx.py文件注意:文件不要保存在中文的路径下,和文件名不要以中文命名。2、写代码a.注意两行文件头a.注意两行文件头b.写功能代码3、执行代码a.打开终端b.输入python命令,即python代码文件的路径(例:pythond:\test\mytest.py)知识点一:xxx.py文件的文件头部信息#!/usr/bin/envpython#-*-coding:utf-8-*-知识点二:input()用于与用户交互,等待用户输
系统 2019-09-27 17:49:47 2427
贴部分代码#!/usr/bin/envpython#-*-coding:utf-8-*-importcv2importnumpyasnpfromPILimportImagearea=0defostu(img):globalareaimage=cv2.cvtColor(img,cv2.COLOR_BGR2GRAY)#转灰度blur=cv2.GaussianBlur(image,(5,5),0)#阈值一定要设为0!高斯模糊ret3,th3=cv2.thresh
系统 2019-09-27 17:49:22 2427
最近编写自己的rpc小框架,涉及到bytes.这里就想梳理一下编码与python的字符串和字节码(bytes)类型.先上个图,有个印象,随时可以回头看.#前置知识字符:在计算机和电信技术中,一个字符是一个单位的字形、类字形单位或符号的基本信息。即一个字符可以是一个中文汉字、一个英文字母、一个阿拉伯数字、一个标点符号等;字符集:多个字符的集合。例如GB2312是中国国家标准的简体中文字符集;字符编码:将某个字符集中的字符转换成一个唯一编号(码点,二进制数据)
系统 2019-09-27 17:48:25 2427
浏览器的简单操作#导入webdriver模块#创建driver对象,指定Chrome浏览器driver=webdriver.Chrome()#窗口最大化driver.maximize_window()#访问百度driver.get("http://baidu.com")driver.get("http://sina.com")#后退driver.back()#前进driver.forward()#刷新driver.refresh()#关闭窗口driver.
系统 2019-09-27 17:47:25 2427
1.背景有时候,需要统计一段代码运行所用的时长,则可以用到下面的代码。2.代码示例#!/usr/bin/envpythonimportdatetimeimporttimestart_time=datetime.datetime.now()time.sleep(5)end_time=datetime.datetime.now()delta=end_time-start_timedelta_gmtime=time.gmtime(delta.total_seco
系统 2019-09-27 17:45:29 2427
这是我最初学习时自己做的一个python模拟登录webqq的实例代码,具体代码如下importhashlibfromurllibimportrequest,parsefromhttpimportcookiejarimportre,random,timeimportthreadingasthimportjson.encoderasjson_encodeimportjson.decoderasjson_decodeclassQQ:"""LoginQQ"""__
系统 2019-09-27 17:38:15 2427
版权声明:转载请注明作者(独孤尚良dugushangliang)出处:https://blog.csdn.net/dugushangliang/article/details/90021409先说说查看本机ip的方法:可以直接通过搜索引擎搜索ip,得到的是公网ip,你是用这个ip上网的,即和互联网交互的。但奇怪的是,有的是180开头有的是218开头。这个有些奇怪。鄙人水平不足,先存疑待考吧。本机是通过路由器联网的,不是直接通过拨号连接互联网的,所以本机有局
系统 2019-09-27 17:32:52 2427
转自:https://www.cnblogs.com/kaibindirver/p/9436649.htmlhttps://github.com/GoverSky/HTMLTestRunner_cn/blob/master/README.md在原版的基础上进行扩展和改造报告汉化,错误日志selenium/appium截图截图功能根据测试结果,当结果为fail或error时自动截图截图方法在_TestResult的测试结果收集中,报告使用的截图全部保存为ba
系统 2019-09-27 17:57:25 2426
之前介绍过遗传算法,参见:https://www.cnblogs.com/LoganChen/p/7509702.html我们用Python实现同样的问题解答。y=10*sin(5*x)+7*abs(x-5)+10我们来求这个函数在0-10之间的最大值。先来看一下这个函数的图像:importnumpyasnpimportmatplotlib.pyplotasplt"""**Colors**Thefollowingcolorabbreviationsares
系统 2019-09-27 17:57:15 2426
引用文章1:hiddenlayer隐藏层的自我理解https://blog.csdn.net/c45449210/article/details/82957455引用文章2:对隐藏层的简单理解https://blog.csdn.net/sghgcn/article/details/1726709引用文章3:关于神经网络中隐藏层和神经元的深入理解https://blog.csdn.net/chinwuforwork/article/details/84141
系统 2019-09-27 17:56:08 2426
什么是24点我们先来约定下老王和他媳妇玩的24点规则:给定4个任意数字(0-9),然后通过+,-,*,/,将这4个数字计算出24。小时候玩的都是这个规则,长大了才有根号,才有各种莫名其妙的高级算法,不好玩了,因为我不会。可能有人会觉得很简单,但是真的简单吗?比如:8,3,3,37,3,3,3你能一眼看出来答案吗?好像真的可以……大致思路这样想,将四个数字进行全排列,在他们之间添加运算符号。运算符我们需要进行排列组合,因为只有四个数字,所以只需要三个运算符,
系统 2019-09-27 17:55:01 2426
原因1:导入包中没有__init__文件,无法被识别为python包原因2:在main主函数中使用了相对导入,Python是不支持常规相对导入形式(from..importxxx)原因1好解决,原因2解决方式如下:在main主函数中使用sys.path.append()进行导入:importosimportsyssys.path.append(os.path.abspath('../XXX'))importxxuif__name__=='__main__'
系统 2019-09-27 17:54:52 2426
python3.6threading和multiprocessing四核+三星250G-850-SSD自从用多进程和多线程进行编程,一致没搞懂到底谁更快。网上很多都说python多进程更快,因为GIL(全局解释器锁)。但是我在写代码的时候,测试时间却是多线程更快,所以这到底是怎么回事?最近再做分词工作,原来的代码速度太慢,想提速,所以来探求一下有效方法(文末有代码和效果图)这里先来一张程序的结果图,说明线程和进程谁更快一些定义并行是指两个或者多个事件在同一
系统 2019-09-27 17:54:48 2426