importrequests,time,csvfrombs4importBeautifulSouphref_list=[]url='https://hz.58.com/lvguanbinguan'headers={'user-agent':}params={'PGTID':'0d306b32-0004-f711-87c6-3e3cb7371c0d','ClickID':'2'}res=requests.get(url,headers=headers,par
系统 2019-09-27 17:49:24 2319
考虑到我手上的服务器逐渐的增多，有时候需要大规模的部署同一个文件，例如因为方便使用systemtap这个工具定位问题，需要把手上几百台服务器同时安装kernel-debuginfo这个包，原有的方式采用一个源服务器，采用rsync或者scp之类的文件传输方式只能做到一个点往下分发这个文件，这个时候下发的速度就会比较的慢，基于以上原因，我写了一个基于bt协议传输文件的小工具，实际测试，传输到10个机房，70多台机器传输一个240M的这个内核文件，到所有的机器
系统 2019-09-27 17:48:31 2319
编码python3.0以上的版本，默认的源文件都是以UTF-8编码，所有的字符串都是unicode字符串，当然也可以为源文件指定不同的编码方式;编码实例：#随机取一个变量str="xiaose"#进行utf-8编码str1=str.encode("utf-8")#将其打印出来print(str1)#结果为：b'xiaose'解码实例:1#将上述结果进行解码2str2=str1.decode("utf-8")3print(str2)4#结果为：xiaose注
系统 2019-09-27 17:47:56 2319
本文实例为大家分享了PythonOpenCV实现视频分帧的具体代码，供大家参考，具体内容如下#coding=utf-8importosimportcv2videos_src_path="/home/wgp/视频/"video_formats=[".MP4",".MOV"]frames_save_path="/home/wgp/视频/"width=320height=240time_interval=50defvideo2frame(video_src_pa
系统 2019-09-27 17:46:31 2319
概述在我们使用内置打印函数print时，打印出的Python数据结构对象总是一行的输出的方式，这样对数据结构较复杂或数据较多的对象的显示并不美观，这时我们可以利用pprint输出美化数据结构对象。pprint方法概览美化输出我们可以利用pprint中的PrettyPrinter控制输出的打印时的缩进，行宽、甚至打印深度等，定义类如下classpprint.PrettyPrinter（indent=1，width=80，depth=None，stream=N
系统 2019-09-27 17:45:58 2319
#coding:utf-8#批量修改文件名importosimportreimportdatetimere_st=r'(\d+)\+\s?\((\d+)\)'#用于匹配旧的文件名,需含分组re_match_old_file_name=re.compile(re_st)#要修改的目录WORKING_PATH=r'F:\Gallery'#--------------------------------------------------------------
系统 2019-09-27 17:45:44 2319
如下所示：Python2.7.7(default,Jun32014,01:46:20)[GCC4.9.020140521(prerelease)]onlinux2Type"help","copyright","credits"or"license"formoreinformation.>>>quitUsequit()orCtrl-D(i.e.EOF)toexit>>>使用quit(),exit(),或者Ctrl-D退出命令行。以上这篇在linux的终端退出
系统 2019-09-27 17:38:30 2319
近几日遇到采集某网页的时候大部分网页OK,少部分网页出现乱码的问题,调试了几日,终于发现了是含有一些非法字符造成的..特此记录1.在正常情况下..可以用importchardetthischarset=chardet.detect(strs)["encoding"]来获取该文件或页面的编码方式或直接抓取页面的charset=xxxx来获取2.遇到内容中有特殊字符时指定的编码一样会造成乱码..即内容中非法字符造成的,可以采用编码忽略非法字符的方式来处理.st
系统 2019-09-27 17:38:01 2319
在网上看到一篇关于隐马尔科夫模型的介绍，觉得简直不能再神奇，又在网上找到大神的一篇关于如何用隐马尔可夫模型实现中文拼音输入的博客，无奈大神没给可以运行的代码，只能纯手动网上找到了结巴分词的词库，根据此训练得出隐马尔科夫模型，用维特比算法实现了一个简单的拼音输入法。githuh地址：https://github.com/LiuRoy/Pinyin_Demo原理简介隐马尔科夫模型抄一段网上的定义：隐马尔可夫模型(HiddenMarkovModel)是一种统计模
系统 2019-09-27 17:37:43 2319
今天想用python的装饰器做一个运算，代码如下>>>defmu(x):def_mu(*args,**kwargs):returnx*xreturn_mu>>>@mudeftest(x,y):print'%s,%s'%(x,y)>>>test(3,5)Traceback(mostrecentcalllast):File"",line1,intest(3,5)File"",line3,in_mureturnx*xTypeError:unsupportedop
系统 2019-09-27 17:37:36 2319
最近想备份网站，但是php下载文件的大小是有大小限制的，而我也懒得装ftp再下载了，就想着暂时弄个二级域名站，然后用python(python3)的requests库直接下载网站根目录下的所有文件以及文件夹。（0-0就是这么任性）1.安装requests库pipinstallrequests2.下载文件夹下所有文件及文件夹这里需要处理的地方主要是文件夹，这里我们判断出该链接是文件夹时，自动创建文件夹，并递归继续进行操作，否则判断该链接是文件，直接使用req
系统 2019-09-27 17:55:48 2318
背景说明感觉微信公众号算得是比较难爬的平台之一，不过一番折腾之后还是小有收获的。没有用Scrapy(估计爬太快也有反爬限制)，但后面会开始整理写一些实战出来。简单介绍下本次的开发环境：python3requestspsycopg2(操作postgres数据库)抓包分析本次实战对抓取的公众号没有限制，但不同公众号每次抓取之前都要进行分析。打开Fiddler，将手机配置好相关代理，为避免干扰过多，这里给Fiddler加个过滤规则，只需要指定微信域名mp.wei
系统 2019-09-27 17:53:47 2318
变量的定义如：>>>width=20>>>height=5*9>>>width*height900>>>string="shouke"注意：1.Python中不能使用未定义的变量2.变量的定义无需进行类型声明，可直接赋值3.交互模式中，‘_’表示表达式最后输出值，如下：>>>tax=12.5/100>>>price=100.5>>>price*tax12.5625>>>price+_#等同于price+12.5625113.0625>>>round(_,2
系统 2019-09-27 17:52:16 2318
关于opencvOpenCV是Intel开源计算机视觉库(ComputerVersion)。它由一系列C函数和少量C++类构成，实现了图像处理和计算机视觉方面的很多通用算法。OpenCV拥有包括300多个C函数的跨平台的中、高层API。它不依赖于其它的外部库――尽管也可以使用某些外部库。OpenCV对非商业应用和商业应用都是免费的。同时OpenCV提供了对硬件的访问，可以直接访问摄像头，并且opencv还提供了一个简单的GUI(graphicsuserin
系统 2019-09-27 17:51:59 2318
前一段去云英面试，技术官很”不厚道“了问了一个非常简单的问题：如何将多维列表转化了一维的？当时虽然想到了使用迭代或者列表生成式可以做到，但是可以没能可行的代码，回来后一顿后悔。对于规范的且嵌套维度较低的多维列表，python中有很多方法可以实现：a=[[1,2],[3,4],[5,6]]print[jforiinliforjini]#orfromitertoolsimportchainprintlist(chain(*a))#orimportitertoo
系统 2019-09-27 17:50:56 2318
