在爬虫前，需要知道这两个知识点！！！字符串转字节类型str-->bytesencode()字节类型转字符串bytes-->strdecode()1.以一个简单的例子讲解urllib.request方法read读取相应内容，内容geturl获取请求的urlgetheaders获取头部信息getcode获取状态码readlines按行读取，返回列表，都是字节类型1.1获取百度的网页代码importurllib.requesturl="https://www.b
系统 2019-09-27 17:57:13 1875
第一篇markdown编辑器001Markdown基本语法第二篇Python集成环境和解释器002Python解释器安装003Python解释器源修改004pip的使用005Python的IDE之Pycharm的使用006Python的IDE之Jupyter的使用第三篇Python基础007常量008变量009Python变量内存管理010各类赋值方式011注释012数据类型基础013数据类型：数字类型014数据类型：字符串类型015数据类型：列表类型01
系统 2019-09-27 17:56:43 1875
Python中的上下文管理器，实际上就是实现了上下文管理协议的对象。在Python中打开文件的时候，我们需要确保文件被使用完毕之后，对其进行关闭操作——调用文件对象的close()方法。如果不使用上下文管理器，经典的处理方式就是将close()方法的调用放在一个finally语句中：f=open("www.log")try:print("dosomethingwithfile")finally:f.close()这里finally的唯一作用就是确保文件对象
系统 2019-09-27 17:56:31 1875
今天给大家出一个关于Python爬虫面试题的总结，相对于来说出现频率比较高的一些！1.为什么requests请求需要带上header？原因是：模拟浏览器，欺骗服务器，获取和浏览器一致的内容header的形式：字典headers={"User-Agent":"Mozilla/5.0(WindowsNT10.0;Win64;x64)AppleWebKit/537.36(KHTML,likeGecko)Chrome/54.0.2840.99Safari/537.
系统 2019-09-27 17:56:15 1875
python访问抓取网页常用命令简单的抓取网页:importurllib.requesturl="http://google.cn/"response=urllib.request.urlopen(url)#返回文件对象page=response.read()直接将URL保存为本地文件：importurllib.requesturl="http://google.cn/"response=urllib.request.urlopen(url)#返回文件对象
系统 2019-09-27 17:56:08 1875
一、动机最近打算折腾vn.py，但只有py27版本的，因为一向习惯使用最新稳定版的，所以不得不装py27的环境，不得不说Python的全局锁真的很烦。身为懒癌患者，必然使用全功能的anaconda，但不想同时装py27和py35两个版本的anaconda巨无霸（同时装两个，不知道conda是否也可以管理环境），于是选择用conda装python27的环境及一些必要的包。弄了几天终于把办公电脑和家里的Mac机上的环境都配好了，即使有了官方的安装教材，也踩了不
系统 2019-09-27 17:55:36 1875
trainData['survey_time']=pd.to_datetime(trainData['survey_time'],format='%Y/%m/%d%H:%M')trainData['survey_time']=trainData['survey_time'].dt.year格式化日期转换为dt然后直接取年python中时间日期格式化符号：%y两位数的年份表示（00-99）%Y四位数的年份表示（000-9999）%m月份（01-12）%d月内
系统 2019-09-27 17:55:28 1875
合并多个excel1.https://jingyan.baidu.com/article/e6c8503cb6ed7ee54e1a1811.html2.python#-*-coding:utf-8-*-importxlrd,xlsxwriter#待合并excelallxls=["C:\\Users\\wangjun\\Desktop\\ALL\\lvjie(6)(1).xlsx","C:\\Users\\wangjun\\Desktop\\ALL\\lvj
系统 2019-09-27 17:55:23 1875
本来PHP还学艺不精，又报了计算机二级Python的考试，还有一个半月的时间，抓紧买了高教社的这两本书，今天正式开始学习这个语言，虽然没法和世界上最好的语言PHP相提并论，但是也值得一学。虽然先看蓝K，但是很喜欢黄K前言里的第一句话：“应试”是个中性词。设定一个阶段目标，为之努力，这是一种乐趣！正式开始：第1章程序设计基本方法1.1程序设计语言高级语言根据执行机制分为：静态语言（C、Java）、脚本语言（JavaScript、PHP、Python）。执行方
系统 2019-09-27 17:55:21 1875
1.urllib.error.URLError:解决办法：退出网页上的谷歌账号，然后在命令行中进行认证。2.安装pyCrypto出现error:MicrosoftVisualC++14.0isrequired.安装pycryptodome来代替pyCrypto
系统 2019-09-27 17:55:09 1875
