前言一年一度的虐狗节终于过去了，朋友圈各种晒，晒自拍，晒娃，晒美食，秀恩爱的。程序员在晒什么，程序员在加班。但是礼物还是少不了的，送什么好？作为程序员，我准备了一份特别的礼物，用以往发的微博数据打造一颗“爱心”，我想她一定会感动得哭了吧。哈哈准备工作有了想法之后就开始行动了，自然最先想到的就是用Python了，大体思路就是把微博数据爬下来，数据经过清洗加工后再进行分词处理，处理后的数据交给词云工具，配合科学计算工具和绘图工具制作成图像出来，涉及到的工具包有
系统 2019-09-27 17:53:34 2187
案例：爬取使用搜狗根据指定词条搜索到的页面数据（例如爬取词条为‘周杰伦'的页面数据）importurllib.request#1.指定urlurl='https://www.sogou.com/web?query=周杰伦''''2.发起请求:使用urlopen函数对指定的url发起请求，该函数返回一个响应对象，urlopen代表打开url'''response=urllib.request.urlopen(url=url)#3.获取响应对象中的页面数据:r
系统 2019-09-27 17:53:11 2187
这篇博客做一个爬虫的实例今天刚看到一个新闻，在7月26日上映的《哪吒之魔童降世》，密钥第二次延期至10月26日。截止至9月17日，《哪吒之魔童降世》票房已超49亿票房，在豆瓣上对该电影的评价有好有坏。说实话，博主看了这个电影真的觉得蛮不错的，因此把短评中的差评爬取下来，看下差评包括哪些方面。目录一、BeautifulSoup二、xpath三、正则表达式一、BeautifulSoup首先需要了解下差评文字内容在哪些标签下：进入豆瓣该电影短评界面，检查元素：可
系统 2019-09-27 17:53:05 2187
1.背景看到这里提到了pprint。打算去试试.2.pprint简介找到在线官网解释：pprint―Dataprettyprinter就是一个，方便大家打印一些，相对复杂的变量的好东西。3.使用pprint去写点代码试试。代码：复制代码代码如下:#-------------------------------------------------------------------------------#Name:【记录】折腾Python中的pprint#
系统 2019-09-27 17:52:55 2187
今天接着跟大家总结Python爬虫面试中常见的高频面试题。有需要的伙伴用心看啦！1.Request中包含什么呢？1、请求方式：主要有GET和POST两种方式,POST请求的参数不会包含在url里面2、请求URLURL：统一资源定位符，如一个网页文档、一张图片、一个视频等都可以用URL来唯一确定3、请求头信息,包含了User-Agent（浏览器请求头）、Host、Cookies信息4、请求体,GET请求时，一般不会有，POST请求时，请求体一般包含form-
系统 2019-09-27 17:52:44 2187
给密码加密是什么：用户注册的密码一般网站管理人员会利用md5方法加密，这种加密方法的好处是它是单向加密的，也就是说，你只有在提前知道某一串密码对应的md5加密码，才能反推出密码是多少，虽然有极小的几率可能造成两个密码加密之后的值相等（这种现象称为碰撞），不过基本上不用担心，因为概率是极低的。在常用的hashlib模块里还有sha1（）等方法，它的本质和md5是一致的，只是产生的结果是160bit字节，通常用一个40位的16进制字符串表示。而md5是最常见的
系统 2019-09-27 17:52:27 2187
本篇文章介绍如何使用xlrd来读取Excel表格中的内容，xlrd是第三方库，所以在使用前我们需要安装xlrd。另外我们一般会使用xlwt来写Excel，所以下一篇文章我们会来介绍如何使用xlwt来写Excel。xlrd下载：xlrd0.8.0安装xlrd安装xlrd，只需运行setup即可，另外你也可以直接解压缩到你的project中，也可以直接用xlrd的API获取Excel，这里称之为workbook复制代码代码如下:open_workbook(fi
系统 2019-09-27 17:51:03 2187
Python的虚拟环境极大地方便了人们的生活。本指南先介绍虚拟环境的基础知识以及使用方法，然后再深入介绍虚拟环境背后的工作原理。注意：本指南在macOSMojave系统上使用最新版本的Python3.7.x。1.为什么使用虚拟环境?虚拟环境为一系列潜在问题提供简单的解决方案，尤其是在以下几个方面：允许不同的项目使用不同版本的程序包，从而解决依赖性问题。例如，可以将ProjectAv2.7用于ProjectX，并将PackageAv1.3用于ProjectY
系统 2019-09-27 17:51:02 2187
数据集介绍使用数据集Wine，来自UCI。包括178条样本，13个特征。importpandasaspdimportnumpyasnpdf_wine=pd.read_csv('https://archive.ics.uci.edu/ml/machine-learning-databases/wine/wine.data',header=None)df_wine.columns=['Classlabel','Alcohol','Malicacid','Ash
系统 2019-09-27 17:50:52 2187
Python支持多种图形界面的第三方库，包括：wxWidgetsQtGTKTkinter：Tkinter模块(Tk接口)是Python的标准TkGUI工具包的接口.Tk和Tkinter可以在大多数的Unix平台下使用,同样可以应用在Windows和Macintosh系统里。Tk8.0的后续版本可以实现本地窗口风格,并良好地运行在绝大多数平台中。wxPython：wxPython是一款开源软件，是Python语言的一套优秀的GUI图形库，允许Python程序
系统 2019-09-27 17:50:19 2187
