Python - 军军小站|张军博客
Python

python爬虫猫眼电影TOP100(爬虫入门基础,同步入库)

小编辗转了比较长的一段时间,现在终于提笔于python的运用,这次尝试也是一个开端。本篇文章所爬取的数据网上已经有了很多版本,并不是什么新鲜的数据,仅仅作为个人进阶的参考。python爬虫进阶第S190811期python爬虫将会进一步深入到JavaScript渲染网页(动态渲染)、验证码识别、代理设置、cookies池搭建等,有兴趣的同道中人可以持续关注哈。本次尝试爬取小量电影数据并同步存入数据库作为预热哈。下面代码分为三块:请求、解析网页的模块;网页数

系统 2019-09-27 17:46:05 2251

Python

Linux下为不同版本python安装第三方库

问题背景目前的linux发行版上,有很多安装了两个版本的python。我的机器上默认的版本为python2.x。且在使用easy_install安装第三方库时,也默认安装到了2.x的版本上,在3.x版本下则无法import安装的库。环境:Kubuntu15.04解决方法安装python3-setuptools和easy_install3,并安装pip3sudoapt-getinstallpython3-setuptoolssudoeasy_install3

系统 2019-09-27 17:38:29 2251

Python

Python实现二叉堆

优先队列的二叉堆实现在前面的章节里我们学习了“先进先出”(FIFO)的数据结构:队列(Queue)。队列有一种变体叫做“优先队列”(PriorityQueue)。优先队列的出队(Dequeue)操作和队列一样,都是从队首出队。但在优先队列的内部,元素的次序却是由“优先级”来决定:高优先级的元素排在队首,而低优先级的元素则排在后面。这样,优先队列的入队(Enqueue)操作就比较复杂,需要将元素根据优先级尽量排到队列前面。我们将会发现,对于下一节要学的图算法

系统 2019-09-27 17:38:24 2251

Python

python数据挖掘需要学的内容

1、Pandas库的操作Panda是数据分析特别重要的一个库,我们要掌握以下三点:・pandas分组计算;・pandas索引与多重索引;索引比较难,但是却是非常重要的・pandas多表操作与数据透视表2、numpy数值计算numpy数据计算主要应用是在数据挖掘,对于以后的机器学习,深度学习,这也是一个必须掌握的库,我们要掌握以下内容:・Numpyarray理解;・数组索引操作;・数组计算;・Broadcasting(线性代数里面的知识)3、数据可视化-ma

系统 2019-09-27 17:38:11 2251

Python

Python实现自动发送邮件 -- 自动抓取博客/网站中留言的邮箱并发送相应

Python实现自动发送邮件--自动抓取博客/网站中留言的邮箱并发送相应邮件背景脚本要解决的问题:实现方法代码及解析1.AutoSendEmailByBlogComments.py2.FileOperation.py3.SendEmail.py备注:邮箱SMTP设置背景在各大论坛、博客上,很多User通过留言邮箱获取相关资料,但是留言人数过多了,对于博主来说一个一个发送相关邮件太繁琐了,同时也经常不能及时发现新评论,效率太低。。。我是个懒人,这当然也不能忍

系统 2019-09-27 17:55:56 2250

Python

python dataframe筛选列表的值转为list【常用】

网上方法参差不齐,无注释解释不好秒懂,没有自己想要的,故自己试验一番~1.筛选列表中,当b列中为’1’时,所有c的值,然后转为list2.筛选列表中,当a列中为'one',b列为'1'时,所有c的值,然后转为list3.将a列整列的值,转为list(两种)4.筛选列表,当a=‘one’时,取整行所有值,然后转为list具体看下面代码:importpandasaspdfrompandasimportDataFramedf=DataFrame([['one',

系统 2019-09-27 17:55:24 2250

Python

Python目录

写在前面:整个IT产业只是在共同做好一件事--------信息(数据)的处理,对有用信息提取,存、增、删、改、查,然后更好的呈现在客户面前。本文主要涵括博主以Python为主的后端体系技术点介绍,以及关于工作、学习的心得,与同行、同好交流分享。语言、框架都只是工具,重要的是思想。日常工作学习中不应只满足于熟练调用接口,虽然技术日新月异,但万变不离其宗。如同专业的画家可以用铅笔,毛笔,圆珠笔画出艺术品,好的技术应该具备可以从容应对技术革新的能力,夯实基本功很

系统 2019-09-27 17:54:26 2250

Python

纯python进行矩阵的相乘运算的方法示例

本文介绍了纯python进行矩阵的相乘运算的方法示例,分享给大家,具体如下:defmatrixMultiply(A,B):#获取A的行数和列数A_row,A_col=shape(A)#获取B的行数和列数B_row,B_col=shape(B)#不能运算情况的判断if(A_col!=B_row):raiseValueError#最终的矩阵result=[]#zip解包后是转置后的元组,强转成list,存入result中BT=[list(row)forrowi

系统 2019-09-27 17:50:31 2250

Python

python中redis的安装和使用

python下redis安装用python操作redis数据库,先下载redis-py模块下载地址https://github.com/andymccurdy/redis-pyshell#wgethttps://github.com/andymccurdy/redis-py然后解压在解压目录运行pythonsetup.pyinstall安装模块即可安装完成使用:importredisr=redis.Redis(host=’localhost’,port=6

系统 2019-09-27 17:38:45 2250

Python

5种Python单例模式的实现方式

本文为大家分享了Python创建单例模式的5种常用方法,供大家参考,具体内容如下所谓单例,是指一个类的实例从始至终只能被创建一次。方法1:如果想使得某个类从始至终最多只有一个实例,使用__new__方法会很简单。Python中类是通过__new__来创建实例的:classSingleton(object):def__new__(cls,*args,**kwargs):ifnothasattr(cls,'_inst'):cls._inst=super(Sin

系统 2019-09-27 17:38:38 2250

Python

开发工具--搭建python环境

工具|搭建python环境实现python2版本与python3版本的环境搭建。正文1.Python下载官网:www.python.org下载:(64位3.5.2Windowsx86-64executableinstaller或32位3.7.1Windowsx86executableinstaller)(64位2.7.12Windowsx86-64MSIinstaller或32位2.7.12Windowsx86MSIinstaller)2.Python安装

系统 2019-09-27 17:57:40 2249

Python

使用python将多个excel文件合并到同一个文件的方法

应用场景:使用pandas把多个相同结构的Excel文件合并为一个。原始数据:相关代码:importosimportpandasaspd#将文件读取出来放一个列表里面pwd='test'#获取文件目录#新建列表,存放文件名file_list=[]#新建列表存放每个文件数据(依次读取多个相同结构的Excel文件并创建DataFrame)dfs=[]forroot,dirs,filesinos.walk(pwd):#第一个为起始路径,第二个为起始路径下的文件夹

系统 2019-09-27 17:57:01 2249

Python

Python搭建HTTP服务器和FTP服务器

本教程为大家分享了Python搭建HTTP服务器和FTP服务器的具体步骤,供大家参考,具体内容如下默认安装版本为pytho2.7http服务器搭建教程:进入要开放访问的目录下,执行命令:python-mSimpleHTTPServer9000显示上述表示安装成功,且http服务的端口为:9000,不跟端口默认80端口通过浏览器访问该http服务:http://localhost:9000页面显示入下:服务器端显示如下:表示接收请求成功。下面是ftp服务器搭

系统 2019-09-27 17:55:40 2249

Python

python 买卖股票的最佳时机 LeetCode No.122

python买卖股票的最佳时机LeetCodeNo.122解法:一、暴力解法二、贪心算法:由于不限制买卖次数,也没有交易费用,就可以是用贪心算法。思路:只要第二天比前一天高,我们就买进,第二天卖掉,就可以赚钱。三、动态规划:根据算法导论这本最权威的书(最难读的一本书)中提到动态规划的四个步骤,第一刻画一个最优解的结构特征,第二递归地定义最优解的值,第三计算最优解的值,通常采用自低向上的方法,第四计算出的信息构造一个最优解(如最长公共子序列中,求出最长的子序

系统 2019-09-27 17:55:40 2249

Python

Python正则表达式匹配和提取IP地址

LinuxNo.1IPv4下面是IPv4的IP正则匹配实例:简单的匹配给定的字符串是否是ip地址importreifre.match(r"^(?:[0-9]{1,3}\.){3}[0-9]{1,3}$","236.168.192.1"):print"IPvaild"else:print"IPinvaild"精确的匹配给定的字符串是否是IP地址importreifre.match(r"^(?:(?:25[0-5]|2[0-4][0-9]|[01]?[0-9]

系统 2019-09-27 17:49:15 2249