搜索到与相关的文章
Python

python-爬虫初识-采集汽车资讯信息案例(一)

目录一,什么是爬虫二,初识爬虫-采集汽车资讯信息三,requests和BeautifulSoup模块基本使用requests:importrequestsBeautifulSoup:frombs4importBeautifulSoup四,初识爬虫-自动登录购酒网http://order.gjw.com/login/login五,requests模块详细介绍六,一大波"自动登陆"示例一,什么是爬虫很久很久以前,还没有"百度","谷歌",有的还是传说中的"大黄

系统 2019-09-27 17:56:42 2063

Python

Python_垃圾回收机制之GC模块③

一.垃圾回收机制Python中的垃圾回收是以引用计数为主,分代收集为辅。1、导致引用计数+1的情况对象被创建,例如a=23对象被引用,例如b=a对象被作为参数,传入到一个函数中,例如func(a)对象作为一个元素,存储在容器中,例如list1=[a,a]2、导致引用计数-1的情况对象的别名被显式销毁,例如dela对象的别名被赋予新的对象,例如a=24一个对象离开它的作用域,例如f函数执行完毕时,func函数中的局部变量(全局变量不会)对象所在的容器被销毁,

系统 2019-09-27 17:55:03 2063

Python

Python如何爬取微信公众号文章和评论(基于 Fiddler 抓包分析)

背景说明感觉微信公众号算得是比较难爬的平台之一,不过一番折腾之后还是小有收获的。没有用Scrapy(估计爬太快也有反爬限制),但后面会开始整理写一些实战出来。简单介绍下本次的开发环境:python3requestspsycopg2(操作postgres数据库)抓包分析本次实战对抓取的公众号没有限制,但不同公众号每次抓取之前都要进行分析。打开Fiddler,将手机配置好相关代理,为避免干扰过多,这里给Fiddler加个过滤规则,只需要指定微信域名mp.wei

系统 2019-09-27 17:53:47 2063

Python

Python依赖管理那点事

文章目录pipvirtualenv缺点Pipenv总结学Python有段时间了,学的时候会想着拿它和Java对比。在对比的时候,发现Java有很成熟的项目构建工具,有使用xml的Maven,也有使用groovy的Gradle,这样的构建工具能够自动处理项目的依赖,很是方便。对于Python,在依赖管理方面,从一个初学者的角度看,嗯,只能说,贵圈真乱!(本文纯属个人观点,不喜勿喷)好吧,让我们捋一捋。在包管理方面,听说现在在役的包管理工具有distutils

系统 2019-09-27 17:52:49 2063

Python

python获取jenkins服务里的文件及备份

需求是这样的我们使用了jacoco统计应用的代码覆盖率,产生了一些报告,但是清理报告的时候,需要对本轮的报告做一个备份,这个同样适用于类似的情形,比如一些重要的文件,目标是备份到jenkins所在的服务器上如下图比如我要获取或者说是下载右上角的文件,备份到下图中的当前jenkinsjob的工作空间里面url如下http://jenkins-test.yourcompany.com/view/projectName/job/xxx-web-report/HT

系统 2019-09-27 17:52:48 2063

Python

Python 中運算子 + 與 * 的 Overload 方法重載功能

字串String原本不能像數值一樣有加減乘除運算,但有例外。例如:>>>'Good'+'Morning''GoodMorning'運算子+可將2個字串,串接起來。運算子+有字串Concat功能。同樣,運算子*有迭代Iterator的功能,例如:>>>'Good'*3'GoodGoodGood'這寫法讓Python的程式更簡潔易讀。例如:forkinrange(1,6):print(''*(6-k)+'A'*2*k)這樣簡潔幾行程式即能將此圖形畫出,不是很美

系统 2019-09-27 17:52:44 2063

Python

python 3.6.7实现端口扫描器

本文实例为大家分享了python3.6.7端口扫描器的具体代码,供大家参考,具体内容如下环境:python3.6.7#-*-coding:utf-8-*-importsocketimportthreadingimportargparselock=threading.Lock()openNum=0threads=[]defportscan(ip,port):globalopenNumtry:s=socket.socket(socket.AF_INET,soc

系统 2019-09-27 17:52:14 2063

Python

python实现一行输入多个值和一行输出多个值的例子

注:以下内容在python3中操作一.一行输入多个值a,b=input().split()#此时得到的a和b的类型均为字符串,以空格为分隔符a,b=input().split(',')#此时得到的a和b的类型均为字符串,以逗号为分隔符具体操作如下:a,b=map(int,input().split())#此时得到的a和b的类型为整数,以空格为分隔符具体操作如下:补充split():语法:str.split(str='',num)[n]其中str:分隔符,默

系统 2019-09-27 17:51:19 2063

Python

python中执行shell命令的几个方法小结

(现在人工智能非常火爆,很多朋友都想学,但是一般的教程都是为博硕生准备的,太难看懂了。最近发现了一个非常适合小白入门的教程,不仅通俗易懂而且还很风趣幽默。所以忍不住分享一下给大家。点这里https://www.cbedai.net/ialexanderi可以跳转到教程。)最近有个需求就是页面上执行shell命令,第一想到的就是os.system,os.system('cat/proc/cpuinfo')但是发现页面上打印的命令执行结果0或者1,当然不满足需

系统 2019-09-27 17:50:55 2063