本文利用Python3爬虫抓取豆瓣图书Top250，并利用xlwt模块将其存储至excel文件，图片下载到相应目录。旨在进行更多的爬虫实践练习以及模块学习。工具1.Python3.52.BeautifulSoup、xlwt模块开始动手首先查看目标网页的url：https://book.douban.com/top250?start=0，然后我尝试了在代码里直接通过字符串连接仅改变”start=“后面的数字的方法来遍历所有的250/25=10页内容，但是后来
系统 2019-09-27 17:53:39 2026
一、文件的打开和创建1、打开复制代码代码如下:open(file,mode):>>>fo=open('test.txt','r')>>>fo.read()'hello\n'>>>fo.close()file(file,mode):>>>f=file('test.txt','r')>>>f.read()'hello\n'>>>f.close()mode可取值：2、创建用w/w+/a/a+模式打开即可。二、文件的读取1、String=FileObject.re
系统 2019-09-27 17:52:20 2026
今天来说说编程语言中的动态类型语言与鸭子类型。动态语言维基百科对动态语言的定义：动态编程语言是一类在运行时可以改变其结构的语言：例如新的函数、对象、甚至代码可以被引进，已有的函数可以被删除或是其他结构上的变化。动态语言目前非常具有活力如PHP、Ruby、Python都属于动态语言，而C、C++、Java等语言则不属于动态语言。这个解释很抽象，其实动态语言是相对静态语言而言的，静态语言的特点是在程序执行前，代码编译时从代码中就可以知道一切，比如变量的类型，方
系统 2019-09-27 17:52:19 2026
相信有好多朋友们都是第一次了解python吧，可能大家也听过或接触过这个编程语言。那么到底什么是python呢？它在什么机缘巧合下诞生的呢？又为什么在短短十几年时间内就流行开来呢？就请大家带着疑问，让我们来探索python的奥秘吧!一：python发展史与优缺点1.发展史python，英文翻译为巨蟒，爬虫。是荷兰计算机学家吉多·范罗苏姆(著名的G叔)，在1989年圣诞节期间，为了打发圣诞节的无趣，开发的一个脚本解释程序，结合了Unixshell和C的习惯。
系统 2019-09-27 17:51:34 2026
有时网页中会嵌套一个或者多个Frame，此时我们直接去找嵌套在Frame里面的元素会抛出异常，所以在操作的时候我们需要将页面焦点切换到Frame里面，下面我们就以一个实例演示一下！首先先创建三个html文件，文件代码如下：1）frameset.html2）frame_left.html3）frame_right.html4）frame_middle.html5)把这四个html文件放在同一个文件夹下<以下是python实现该逻辑的代码：importunit
系统 2019-09-27 17:50:57 2026
**装饰器**1.装饰器的概念装饰器的本质就是一个函数，它的作用是为其他函数添加一个新的功能，但是不改变原函数的源代码和调用方式。装饰器的两大原则：不修改被修饰函数的源代码不修改被修饰函数的调用方式2.装饰器的知识储备（或者我们可以理解成，一个装饰器是由什么组成）装饰器=高阶函数+函数嵌套+闭包3.装饰器的实现首先我们定义一个累加求和的函数importtimedefcal():res=0foriinrange(100):res+=itime.sleep(1
系统 2019-09-27 17:50:53 2026
python图片爬取爬取各校校花图片—杜凯杰爬取十页校花图片(可按需求更改页数，爬取更多图片)—杜凯杰importrequestsfromlxmlimportetreestartUrl='http://www.xiaohuar.com/list-1-'headers={'User-Agent':'Mozilla/5.0(WindowsNT6.1;Win64;x64)AppleWebKit/537.36(KHTML,likeGecko)Chrome/74.0
系统 2019-09-27 17:50:47 2026
UnicodeDecodeError:'gbk'codeccan'tdecodebyte0x80inposition128:illegalmultibytesequence说到底是open()使用方法。原本程序是这样的：（重点看第4行）fromtkinterimport*importosdefopenFile():f=open('D:\Pythoncharmprojccts\SC\main_window.py',mode='r')whileTrue:dat
系统 2019-09-27 17:50:35 2026
[TOC]一、锁线程中的锁机制和进程中一样。都是通过锁来控制资源访问虽然，线程中的资源是共享的，但也可以通过锁来进行控制。达到线程同步的目的。虽然牺牲了效率但是保证了安全。x=0mutex=Lock()deftask():globalxmutex.acquire()#上锁foriinrange(200000):x=x+1mutex.release()#解锁if__name__=='__main__':th_list=[]foriinrange(10):t1
系统 2019-09-27 17:49:53 2026
一般来说，用pandas处理小于100兆的数据，性能不是问题。当用pandas来处理100兆至几个G的数据时，将会比较耗时，同时会导致程序因内存不足而运行失败。当然，像Spark这类的工具能够胜任处理100G至几个T的大数据集，但要想充分发挥这些工具的优势，通常需要比较贵的硬件设备。而且，这些工具不像pandas那样具有丰富的进行高质量数据清洗、探索和分析的特性。对于中等规模的数据，我们的愿望是尽量让pandas继续发挥其优势，而不是换用其他工具。本文我们
系统 2019-09-27 17:49:29 2026
