- 军军小站|张军博客
搜索到与相关的文章
Python

Python如何爬取微信公众号文章和评论(基于 Fiddler 抓包分析)

背景说明感觉微信公众号算得是比较难爬的平台之一,不过一番折腾之后还是小有收获的。没有用Scrapy(估计爬太快也有反爬限制),但后面会开始整理写一些实战出来。简单介绍下本次的开发环境:python3requestspsycopg2(操作postgres数据库)抓包分析本次实战对抓取的公众号没有限制,但不同公众号每次抓取之前都要进行分析。打开Fiddler,将手机配置好相关代理,为避免干扰过多,这里给Fiddler加个过滤规则,只需要指定微信域名mp.wei

系统 2019-09-27 17:53:47 1992

Python

python不换行之end=与逗号的意思及用途

在python中我们偶尔会用到输出不换行的效果,python2中使用逗号,即可,而python3中使用end=''来实现的,这里简单为大家介绍一下,需要的朋友可以参考下python输出不换行Python2的写法是:print'hello',Python3的写法是:print('hello',end='')对于python2和python3都兼容的写法是:from__future__importprint_functionprint('hello',end=

系统 2019-09-27 17:53:12 1992

Python

来看看Python炫酷的颜色输出与进度条打印

英语单词优化上篇文章写到了Python开发英语单词记忆工具,其中依赖了bootstrap.cssjQuery.js基础html模块以及片段的css样式。有些朋友问,怎么能将这个练习题打包成单独的exe可执行文件,来脱离python环境使用呢?在这里跟大家简单说下思路,有需求的朋友可以自己去扒拉扒拉…依赖的css和js,如果有外网的前提,可以使用bootcdn提供的链接引用:https://cdn.bootcss.com/jquery/3.4.0/jquer

系统 2019-09-27 17:52:27 1992

Python

python 3.6.7实现端口扫描器

本文实例为大家分享了python3.6.7端口扫描器的具体代码,供大家参考,具体内容如下环境:python3.6.7#-*-coding:utf-8-*-importsocketimportthreadingimportargparselock=threading.Lock()openNum=0threads=[]defportscan(ip,port):globalopenNumtry:s=socket.socket(socket.AF_INET,soc

系统 2019-09-27 17:52:14 1992

Python

如何学习Python进行数据分析

前言之前一直做大数据方向的工作,用spark、flink、hive等等处理数据居多,语言方面一般使用scala、java很少用到python,但是不得不说如果想要从事算法方向的工作还是必须得把python用熟练了。下面整理一下学习的流程。Python基础这个很简单,但很重要,推荐看一下这本书的基础部分主要掌握知识点:常用的数据结构及对应方法三种控制流的使用字符串的常用处理方法正则表达式的使用函数的编写Python数值计算工具Numpy尽管在python基础

系统 2019-09-27 17:52:07 1992

Python

如何利用python查找电脑文件

利用python查找电脑里的文件非常方便比如在我的电脑:D:\软件文件夹里有非常非常多的软件。我忘记某个软件叫什么名字了,只记得文件名称里有now,而且后缀名是.zip利用python如何实现查找呢?用python非常简单:代码如下截图:首先是导入模块os然后就是利用os.listdir()打开目录下的所有文件,files其实是一个列表。其实前2行可以合并为一行:files=os.listdir(u'D:\软件')这样写也行。下面就是一个for循环非常简单

系统 2019-09-27 17:51:24 1992

Python

python中pygame安装过程(超级详细)

安装时是需要设置python环境变量的,下载python的时候底下有个小框框(没有默认选中)AddPython3.7toPATH需要选择的,如果没有选择的话,需要自己设置,我一般比较懒,卸载了python重新下载的,让下载器自动设置。然后是python版本问题有人疑问这是64位还是32位,看那个[64bit]是64位,至于后面的on32是在windows上使用的意思,在Linux上使用就显示别的了。然后检查pip的安装如果显示Nomodulenamed-p

系统 2019-09-27 17:51:12 1992

Python

Python批量按比例缩小图片脚本分享

图片太大了,上百张图用photoshop改太慢,就想到用python写个简单的批处理。功能简单就是把原图按比例缩小复制代码代码如下:#-*-coding:cp936-*-importImageimportglob,os#图片批处理deftimage():forfilesinglob.glob('D:\\\\1\\\\*.JPG'):filepath,filename=os.path.split(files)filterame,exts=os.path.sp

系统 2019-09-27 17:46:52 1992

Python

python——ubuntu中 pycharm安装

ubuntu中自带了python,同时也提供了vim神级编辑器,对于python的集成工具pycharm系统并不自动安装,所以用户需要自行安装,本篇介绍ubuntu上安装pycharm编辑器;一、资源下载:地址:https://www.jetbrains.com/pycharm/download/#section=linux选择linux版本即可;社区版还是专业版因需而定;二、安装包解压编译安装:使用命令:tar-szvf加包名解压出安装包;依次切换到bi

系统 2019-09-27 17:46:07 1992

Python

python中使用xlrd、xlwt操作excel表格详解

最近遇到一个情景,就是定期生成并发送服务器使用情况报表,按照不同维度统计,涉及python对excel的操作,上网搜罗了一番,大多大同小异,而且不太能满足需求,不过经过一番对源码的"研究"(用此一词让我觉得颇有成就感)之后,基本解决了日常所需。主要记录使用过程的常见问题及解决。python操作excel主要用到xlrd和xlwt这两个库,即xlrd是读excel,xlwt是写excel的库。可从这里下载https://pypi.python.org/pyp

系统 2019-09-27 17:45:56 1992