原文链接：https://www.jianshu.com/p/70c3994efcd8?utm_source=oschina-app当用Python3做爬虫的时候，一些网站为了防爬虫会设置一些检查机制，这时我们就需要添加请求头，伪装成浏览器正常访问。header的内容在浏览器的开发者工具中便可看到，将这些信息添加到我们的爬虫代码中即可。Accept-Encoding：是浏览器发给服务器,声明浏览器支持的编码类型。一般有gzip,deflate,br等等。P
系统 2019-09-27 17:57:30 2499
前言在数据相关的测试中，我们经常会需要去构造数据，随机生成数据。大部分人的写法会是用random随机生成：比如我们要生成随机的姓名，我们要构造下面的一段代码：defrandom_first_name():name=['赵','钱','孙','李','周','吴','郑','王','冯','陈','褚','卫','蒋','沈','韩','杨','朱','秦','尤','许','何','吕','施']returnrandom.choice(name)defra
系统 2019-09-27 17:56:23 2499
matplotlib简介matplotlib是python最著名的绘图库，它提供了一整套和matlab相似的命令API，十分适合交互式地行制图。而且也可以方便地将它作为绘图控件，嵌入GUI应用程序中。它的文档相当完备，并且Gallery页面中有上百幅缩略图，打开之后都有源程序。因此如果你需要绘制某种类型的图，只需要在这个页面中浏览/复制/粘贴一下，基本上都能搞定。在Linux下比较著名的数据图工具还有gnuplot，这个是免费的，Python有一个包可以调
系统 2019-09-27 17:55:54 2499
使用深度学习进行图像类任务时，通常网络的输入大小是固定的，最近在进行涉及到文字检测的工作中，由于预处理resize缩小了原图，导致字体变模糊，从而检测失败，后来想到使用overlap来对图像进行缩放裁剪，即先将原图缩放到一定尺寸，再裁剪得到网络的输入。好了，来说正题，使用yolov3，网络的输入是352x352x3，而输入图像大小为几百上千不等，因此需对原图进行resize，起初直接进行缩放+填充，检测的map很低，后来分析发现有些352x352的输入图像
系统 2019-09-27 17:55:08 2499
新建一个module，用于根据用户名来获取文章的url#coding=utf-8frombs4importBeautifulSoupimportrequests#获取博客文章数量defget_page_size(user_name):article_list_url='https://blog.csdn.net/'+user_namereq=requests.get(url=article_list_url)article_list_html=req.te
系统 2019-09-27 17:54:34 2499
假设红包金额为money，数量是num，并且红包金额money>=num*0.01原理如下，从1~money*100的数的集合中，随机抽取num-1个数，然后对这些数进行排序，在排序后的集合前后分别插入0和money*100，组成新的集合用新的集合，（后一个数-前一个数）/100得到红包的大小然后使用红包的时候，从num个红包集合中随机拿一个，既是随机红包了defredbags(money,num=10):importrandomchoice=random
系统 2019-09-27 17:54:19 2499
由于psutil已更新到3.0.1版本，最新的代码如下：#!/usr/bin/envpythonimportosimporttimeimportsysimportatexitimportpsutil#print"Welcome,currentsystemis",os.name,"3secondslatestarttogetdata"time.sleep(3)line_num=1#functionofGetcpustatedefgetCPUstate(int
系统 2019-09-27 17:52:16 2499
Python是当今日趋流行的一种脚本语言，它比Java更简单，比php更强大，并且还适用于做桌面应用的开发，在ubuntu中，更加是必须的一种脚本引擎，所以有必要去学习一下，这里的文章只针对有一定编程基础，最好是比较熟悉php或javascript的用户，如果没任何基础的新手建议找更详细的教程去学习。Python的变量是不需要定义的，这方面和php一样，它比javascript还是宽松，不过它是用缩进作为段落标识的，作为习惯了C语言风格语法的人，可能一开始
系统 2019-09-27 17:48:24 2499
urllib库是python内置的http请求库，包含四个模块：函数说明urllib.request请求模块urllib.error异常处理模块urllib.parseURL解析模块urllib.robotparserrobots.txt模块robots.txt是Robots协议（网络爬虫排除协议），是互联网界通行的道德模范，基于以下原则：搜索技术应服务于人类，同时尊重信息提供者的意愿，并维护其隐私权网站有义务保护其使用者的个人信息和隐私不被侵犯爬取白度网
系统 2019-09-27 17:48:19 2499
使用input和raw_input都可以读取控制台的输入，但是input和raw_input在处理数字时是有区别的纯数字输入当输入为纯数字时input返回的是数值类型，如int,floatraw_inpout返回的是字符串类型，string类型输入字符串为表达式input会计算在字符串中的数字表达式，而raw_input不会。如输入“57+3”:input会得到整数60raw_input会得到字符串”57+3”pythoninput的实现看pythonin
系统 2019-09-27 17:37:51 2499
