Python

简单的抓取淘宝图片的Python爬虫

写了一个抓taobao图片的爬虫,全是用if,for,while写的,比较简陋,入门作品。从网页http://mm.taobao.com/json/request_top_list.htm?type=0&page=中提取taobao模特的照片。复制代码代码如下:#-*-coding:cp936-*-importurllib2importurllibmmurl="http://mm.taobao.com/json/request_top_list.htm?t

系统 2019-09-27 17:53:25 2405

Python

Python运维中20个常用的库和模块

1、psutil是一个跨平台库(https://github.com/giampaolo/psutil)能够实现获取系统运行的进程和系统利用率(内存,CPU,磁盘,网络等),主要用于系统监控,分析和系统资源及进程的管理。2、IPy(http://github.com/haypo/python-ipy),辅助IP规划。3、dnspython(http://dnspython.org)Python实现的一个DNS工具包。4、difflib:difflib作为P

系统 2019-09-27 17:51:35 2405

Python

Python用GET方法上传文件

之前在osc看到一个文章讨论Get和Post的不同,有人说不能用Get来上传文件。这就是用Get上传文件的例子,client用来发Get请求,server用来收请求。文件内容是在http请求的body内传过去的。用了不同的语言,因为我觉得各自处理起来都要方便些。而且我觉得浏览器也是可以发出这样的请求的,之后我会尝试一下。请求端代码复制代码代码如下:importrequests#需要安装requestswithopen('test.txt','rb')asf

系统 2019-09-27 17:51:34 2405

Python

Python使用正则表达式分割字符串的实现方法

如下:re.split(pattern,string,[maxsplit],[flags])pattern:表示模式字符串,由要匹配的正则表达式转换而来。string:表示要匹配的字符串。maxsplit:可选参数,表示最大的拆分次数。flags:可选参数表示标志位,用于控制匹配方式,如是否区分子母大小写示例代码:importrepattern=r'[?|&]'#定义分隔符url='http://www.baidu.com/login.jsp?userna

系统 2019-09-27 17:50:54 2405

Python

idea python开发环境

安装IDEApython插件流程:File>Settings>Plugins>BrowseRepositories>Searchpython>Install>Restart点击旁边绿色的install,稍等片刻即可完成安装。安装完成后原本的install按钮变成了restart,说明需要重启IntellijIdea。点击按键即可重启。这样,python的插件就安装完成了。配置python开发环境下载下载地址:https://www.python.org/g

系统 2019-09-27 17:50:30 2405

Python

Python3.6+selenium2.53.6自动化测试_读取excel文件

环境:编辑工具:浏览器:安装xlrd安装DDT一分析1目录结构2导入包二代码importxlrdclassExcelUtil():def__init__(self,excelPath,sheetName="Sheet1"):self.data=xlrd.open_workbook(excelPath)self.table=self.data.sheet_by_name(sheetName)#获取第一行作为key值self.keys=self.table.r

系统 2019-09-27 17:50:29 2405

Python

Python中的字符串操作

一、表示字符串的各种形式s=‘hello’#索引:01234索引从0开始,即第一位为0位第一种:s#表示整个字符串s[:]#表示整个字符串s[0]#表示字符串的0位,即第一个字符s[-1]#打印字符串倒数第一位例:结果:例:结果:第二种:s[start:stop]#从satrt开始到stop-1结束例:结果:第三种:s[start:stop:step]#从satrt开始到stop-1结束,步长为step例:结果:第四种:s[:stop]#从0位开始索引到s

系统 2019-09-27 17:50:06 2405

Python

Python的条件锁与事件共享

1:事件机制共享队列:利用消息机制在两个队列中,通过传递消息,实现可以控制的生产者消费者问题要求:readthread读时,writethread不能写;writethread写时,readthread不能读。基本方法时间类(Event)·set:设置事件。将标志位设为True。wait:等待事件。会将当前线程阻塞,直到标志位变为True。clear:清除事件。将标志位设为False。set()clear()函数的交替执行也就是消息传递的本质模版:基本co

系统 2019-09-27 17:46:09 2405

Python

python仿evething的文件搜索器实例代码

今天看到everything搜索速度秒杀windows自带的文件管理器,所以特地模仿everything实现了文件搜索以及打开对应文件的功能,首先来一张搜索对比图。这是evething搜索效果:这是自己实现的效果:主要功能就是python的os库的文件列表功能,sqllite创建表,插入数据以及模糊搜索,然后就是tkiner实现的界面功能。全部代码贴出来做一次记录,花费一天时间踩坑。#coding=utf-8importtkinterastkimportt

系统 2019-09-27 17:56:39 2404

Python

遇见一只黑猫,她说Python是个怪物

导读:Python猫是一只喵星来客,它爱地球的一切,特别爱优雅而无所不能的Python。我是它的人类朋友豌豆花下猫,被授权润色与发表它的文章。如果你是第一次看到这个系列文章,那我强烈建议,请先看看它写的前几篇文章(链接见文末),相信你一定会爱上这只神秘的哲学+极客猫的。不多说啦,一起来享用今天的“思想盛宴”吧!本文原创并首发于公众号【Python猫】,未经授权,请勿转载。原文地址:https://mp.weixin.qq.com/s/e9B_jpyeSMk

系统 2019-09-27 17:55:27 2404

Python

python异步IO编程(二)

python异步IO编程(二)目录开门见山AsyncIO设计模式事件循环asyncio中的其他顶层函数开门见山下面我们用两个简单的例子来让你对异步IO有所了解importasyncioasyncdefcount():print("One")awaitasyncio.sleep(1)print("Two")asyncdefmain():awaitasyncio.gather(count(),count(),count())if__name__=="__mai

系统 2019-09-27 17:53:13 2404

Python

(方法总结)Python 中两个字典 dict 合并 和 两个列表 list

两个字典的合并:已知字典a={'a':1,'b':2,'c':3}和b={'d':4,'e':5,'f':6}合并方法1:dict(a,**b)操作如下:>>>a={'a':1,'b':2,'c':3}>>>b={'d':4,'e':5,'f':6}>>>dict(a,**b){'a':1,'b':2,'c':3,'d':4,'e':5,'f':6}合并方法2:c={}c.update(a,**b)输出c如下:>>>a={'a':1,'b':2,'c':3

系统 2019-09-27 17:52:55 2404

Python

python opencv 简单阈值算法的实现

本文先了解一个简单阈值函数,以了解一个阈值算法的具体参数。然后比较不同阈值函数的区别。同样的,先用一副图说明本文重要大纲:#!usr/bin/envpython#coding:utf-8importcv2img=cv2.imread('cat.jpg')img=cv2.cvtColor(img,cv2.COLOR_BGR2GRAY)#先将图像矩阵进行二值化#img=cv2.imread('cat.jpg',0)#也可以直接将图像用灰度值读入,其中0就表示用

系统 2019-09-27 17:51:14 2404

Python

值得收藏,Python 开发中的高级技巧

Python开发中有哪些高级技巧?这是知乎上一个问题,我总结了一些常见的技巧在这里,可能谈不上多高级,但掌握这些至少可以让你的代码看起来Pythonic一点。如果你还在按照类C语言的那套风格来写的话,在codereview恐怕会要被吐槽了。列表推导式>>>chars=[cforcin'python']>>>chars['p','y','t','h','o','n']字典推导式>>>dict1={'a':1,'b':2,'c':3,'d':4,'e':5}>

系统 2019-09-27 17:50:17 2404

Python

python爬虫---从零开始(二)Urllib库

接上文再继续我们的爬虫,这次我们来述说Urllib库1,什么是Urllib库Urllib库是python内置的HTTP请求库urllib.request请求模块urllib.error异常处理模块urllib.parseurl解析模块urllib.robotparserobots.txt解析模块不需要额外安装,python自带的库。注意:python2importurllib2response=urllib2.urlopen('http://baidu.c

系统 2019-09-27 17:50:06 2404