拥有Python标签的文章
Python

python3写爬取B站视频弹幕功能

需要准备的环境:一个B站账号,需要先登录,否则不能查看历史弹幕记录联网的电脑和顺手的浏览器,我用的ChromePython3环境以及request模块,安装使用命令,换源比较快:pip3installrequest-ihttp://pypi.douban.com/simple爬取步骤:登录后打开需要爬取的视频页面,打开开发者工具台,Chrome可以使用F12快捷键,选择network监听请求点击查看历史弹幕,获取请求其中rolldate后面的数字表示该视频

系统 2019-09-27 17:52:52 2140

Python

python使用writerows写csv文件产生多余空行的处理方法

初次接触python,学艺不精,第一次实战写一个文本处理的小程序时便遇到了头疼的问题。先看代码:生成的.CSV文件每两行之间都会多出一行空格(如下图),具体原因可参看点击打开链接withopen('E:\\test.csv','wt')asfout:cout=csv.DictWriter(fout,list_attrs_head)#list_attrs_head头属性列表cout.writeheader()cout.writerows(list_words

系统 2019-09-27 17:52:34 2140

Python

python中pylint使用方法(pylint代码检查)

一、Pylint是什么Pylint是一个Python代码分析工具,它分析Python代码中的错误,查找不符合代码风格标准和有潜在问题的代码。Pylint是一个Python工具,除了平常代码分析工具的作用之外,它提供了更多的功能:如检查一行代码的长度,变量名是否符合命名标准,一个声明过的接口是否被真正实现等等。Pylint的一个很大的好处是它的高可配置性,高可定制性,并且可以很容易写小插件来添加功能。如果运行两次Pylint,它会同时显示出当前和上次的运行结

系统 2019-09-27 17:51:43 2140

Python

Python实现时间序列可视化的方法

时间序列数据在数据科学领域无处不在,在量化金融领域也十分常见,可以用于分析价格趋势,预测价格,探索价格行为等。学会对时间序列数据进行可视化,能够帮助我们更加直观地探索时间序列数据,寻找其潜在的规律。本文会利用Python中的matplotlib【1】库,并配合实例进行讲解。matplotlib库是一个用于创建出版质量图表的桌面绘图包(2D绘图库),是Python中最基本的可视化工具。【工具】Python3【数据】Tushare【注】示例注重的是方法的讲解,

系统 2019-09-27 17:50:03 2140

Python

Python,pandas中DataFrame的选取总结

pandas中选取方式有很多种,最常用的是一下几种:直接选取(单维度选取)、iloc();loc();ix()函数选取(区域选区),at();iat()函数选取(单元格选取)。通过以上几种方式可以实现:选取某些行、某些列、某区域(同时选择某些行和某些列)、某个单元格,还可以进行条件选区。具体实现方法如下。首先创建一个DataFrame.importpandasaspdimportnumpyasnpdata={'name':['Joe','Mike','Ja

系统 2019-09-27 17:49:56 2140

Python

Python学习笔记(四)字符串类型及其操作

1.字符串的表示字符串是字符的序列表示,可以由一对单引号(‘)、双引号(“)或三引号(’‘’)构成。其中,单引号、双引号和三引号都可以表示单行字符串,但是只有三引号可以表示多行字符串在使用双引号时,单引号可以作为字符串的以部分。2.对字符串类型进行操作Python提供了5个字符串的基本操作符,对字符串进行基本的操作,如下表所示:(其中x和y均为字符串类型)基本字符串类型操作符操作符描述x+y连接两个字符x*n或n*x(n为整数)复制n次字符串xins如果x

系统 2019-09-27 17:49:13 2140

Python

python-爬虫-网络请求(二)

网络请求urlopen函数用法urllib库urllib库是python中一个最基本的网络请求库。可以模拟浏览器的行为,向指定的服务器发送一个请求,并可以保存服务器返回的数据urlopen函数在python3的urllib库中,所有和网络请求相关的方法都被集成到urllib.request模块下面了,下面先看下urlopen函数基本使用:fromurllibimportrequestresp=request.urlopen('http://www.baid

系统 2019-09-27 17:48:21 2140

Python

windows下vscode 搭建python开发环境

1.vscodehttps://code.visualstudio.com/下载2.python下载https://www.python.org/downloads/windows/executable版3.现在安装Python,选自定义安装,然后加入环境变量,启动cmd输入PATH查看是否添加4.安装vscode,然后再扩展页输出python,点击安装即可,如图我已经安装5.新建一个py文件,写几行测试的代码。然后F5选择python就运行了,也可以自己

系统 2019-09-27 17:45:24 2140

Python

基于Python正则表达式提取搜索结果中的站点地址

正则表达式对于Python来说并不是独有的,最近在把google搜索的结果中所有的站点地址导出,于是想到用python正则表达式提取搜索结果中的站点地址。这其中涉及几个需要解决的问题:1、获取搜索的结果文本为了获得更多的地址,我使用了Google的高级搜索功能,每个页面显示100条结果。获得显示的结果后,可以查看源码,并保持成文本文件就有了搜索的结果文本2、分析如何提取站点信息首先需要分析获取的页面,查看以怎样的方式可以提取出站点信息。我使用IE8自带的开

系统 2019-09-27 17:38:15 2140

Python

python3实现高效的端口扫描

我们通过python-nmap实现一个高效的端口扫描工具,与定时作业crontab及邮件告警结合,可以很好的帮助我们及时发现异常开放的高危端口。当然,该工具也可以作为业务服务端口的可用性探测,例如扫描192.168.209.121-125网段Web服务端口80s是否处于open状态。我们这里所采用的scan方法arguments参数指定为-v-PE-p+端口,-v表示启用细节模式,可以返回非up状态主机清单;-PE表示采用TCP同步扫描(TCPSYN)方式

系统 2019-09-27 17:55:34 2139

Python

使用python的pandas为你的股票绘制趋势图

前言手里有一点点公司的股票,拿不准在什么时机抛售,程序员也没时间天天盯着看,不如动手写个小程序,把股票趋势每天早上发到邮箱里,用python的pandas,matplotlib写起来很容易,几十行代码搞定。准备环境python3-mvenvvenvsource./venv/bin/activatepipinstallpandaspipinstallpandas_datareaderpipinstallmatplotlib代码如下绘制2019年到今天2019

系统 2019-09-27 17:55:24 2139

Python

fastcgi文件读取漏洞之python扫描脚本

PHPFastCGI的远程利用说到FastCGI,大家都知道这是目前最常见的webserver动态脚本执行模型之一。目前基本所有web脚本都基本支持这种模式,甚至有的类型脚本这是唯一的模式(ROR,Python等)。FastCGI的主要目的就是,将webserver和动态语言的执行分开为两个不同的常驻进程,当webserver接收到动态脚本的请求,就通过fcgi协议将请求通过网络转发给fcgi进程,由fcgi进程进行处理之后,再将结果传送给webserve

系统 2019-09-27 17:55:17 2139

Python

Python自动生成代码 - 通过tkinter图形化操作并生成代码框架

Python自动生成代码-通过tkinter图形化操作并生成代码框架背景脚本代码Demo_CodeGenerator.pydisplay.pyFileHandler.py:脚本运行结果:脚本代码目录其它好玩的Python脚本背景在写代码过程中,如果有频繁重复性的编码操作,或者可以Reuse的各类代码,可以通过Python写一个脚本,自动生成这类代码,就不用每次手写、或者copy了。比如新建固定的代码框架、添加一些既定的软件逻辑,通讯协议、消息模板等等,再编

系统 2019-09-27 17:54:25 2139

Python

Python学习笔记(三

一、PyQt5安装:1、国内镜像:pipinstallPyQt5-ihttps://pypi.douban.com/simple安装完成之后还要安装PyQt5的工具包:pipinstallPyQt5-tools-ihttps://pypi.douban.com/simple2、官网的:pipinstallPyQt5pipinstallPyQt5-tools3、也可以在PyCharm中安装:4、安装完毕之后用下面的代码测试如果运行成功表示安装成功:impor

系统 2019-09-27 17:53:46 2139