1.Python多线程爬虫在批量去爬取数据的时候,往往效率会很低,这个时候我们可以用到多线程的技术。python是支持多线程的,主要是通过thread和threading这两个模块来实现的。单线程爬虫效率相对来说会低很多,例如:importrequestsfrombs4importBeautifulSoupimporttimestart_time=time.time()defmain():headers={'User-Agent':'Mozilla/5.0
系统 2019-09-27 17:51:48 2307
根据第19届KDnuggets调查显示,Python成数据分析、数据科学与机器学习的第一大语言。图片来源于第19届KDnuggets软件大调查Python在机器学习中的地位日益扩大,2017年,机器学习中Python的使用率超过50%,今年则直接上升到66%。与之相对应的是,R的使用率终于跌破了50%。Python获得众多开发者的喜爱,不仅是应用在机器学习上,还体现在其“多才多艺”上。Python可以做Web应用开发、桌面软件、游戏……甚至YouTube、
系统 2019-09-27 17:51:20 2307
安装pyserialpipinstallpyserial查看可用的端口#coding:utf-8importserial.tools.list_portsplist=list(serial.tools.list_ports.comports())iflen(plist)<=0:print("没有发现端口!")else:plist_0=list(plist[0])serialName=plist_0[0]serialFd=serial.Serial(seri
系统 2019-09-27 17:50:55 2307
python有很多的内置模块,collections是比较常用的一个,collections实现了专门的容器数据类型,为python的内置容器提供了替代方案。(这句话是我根据官方文档理解翻译的。原文:ThismoduleimplementsspecializedcontainerdatatypesprovidingalternativestoPython’sgeneralpurposebuilt-incontainers,dict,list,set,and
系统 2019-09-27 17:50:55 2307
通过Python操作注册表有两种方式,第一种是通过Python的内置模块_winreg;另一种方式就是Win32ExtensionForPython的win32api模块,但是需要进行额外的安装。这里主要给出一些_winreg和win32api的Demo代码。1、_winrg可以参考官方的参考文档:http://docs.python.org/library/_winreg.htmlhttp://www.python.org/doc/2.6.2/libra
系统 2019-09-27 17:50:41 2307
爬虫的抓取方式有好几种,正则表达式,Lxml(xpath)与BeautifulSoup,我在网上查了一下资料,了解到三者之间的使用难度与性能三种爬虫方式的对比。抓取方式性能使用难度正则表达式快困难Lxml快简单BeautifulSoup慢简单这样一比较我我选择了Lxml(xpath)的方式了,虽然有三种方式,但肯定是要选择最好的方式来爬虫,这个道理大家都懂,另外有兴趣的朋友也可以去了解另外两种爬虫方式!好了现在来讲讲xpath由于Xpath属于lxml模块
系统 2019-09-27 17:49:53 2307
self代表类的实例,而非类类的方法与普通的函数只有一个特别的区别——它们必须有一个额外的第一个参数名称,按照惯例它的名称是self。从执行结果可以很明显的看出,self代表的是类的实例,代表当前对象的地址,而self.class则指向类。self不是python关键字,我们把他换成其他也是可以正常执行的:classTest:def__init__(runoob):runoob.a='a'defprt(runoob):print(runoob.a)t=Te
系统 2019-09-27 17:48:04 2307
两个树莓派,在同一个局域网内,传输文件,采用socket方式。client端代码:importsocketimportosimporthashlibclient=socket.socket()#生成socket,连接serverip_port=("192.168.137.210",12346)#server地址和端口号(最好是10000以后)client.connect(ip_port)#连接print("服务器已连接")whileTrue:content
系统 2019-09-27 17:45:47 2307
一、logging模块讲解1.函数:logging.basicConfig()参数讲解:(1)level代表高于或者等于这个值时,那么我们才会记录这条日志(2)filename代表日志会写在这个文件之中,如果没有这个字段则会显示在控制台上(3)format代表我们的日志显示的格式自定义,如果字段为空,那么默认格式为:level:log_name:contentimportloggingLOG_FORMAT="%(asctime)s======%(level
系统 2019-09-27 17:45:46 2307
tkinter介绍tkinter是python自带的GUI库,是对图形库TK的封装tkinter是一个跨平台的GUI库,开发的程序可以在win,linux或者mac下运行#!/user/bin/envPython3#-*-coding:utf-8-*-"""file:window.py.pycreatetime:2019/6/2714:54author:LoongXudesc:窗口"""importtkinterastkfromtkinterimportf
系统 2019-09-27 17:45:44 2307