文章目录一.爬虫简介二.简单爬虫架构三.URL管理器3.1url管理器应具有的最小功能：3.2实现方式四.网页下载器4.1urllib简单的获取一个网页。4.2使用Request4.3添加特殊情景的处理五.网页解析器5.1安装beautifulsoup45.2beautifulsoup语法5.3示例代码：六.完整实例6.1分析目标为什么是轻量级爬虫？因为复杂的爬虫需要考虑的场景和问题非常的多，比如有些网页需要登录后才能访问、而有些网页使用javascrip
系统 2019-09-27 17:46:04 2119
问题背景：同一个python脚本项目同时处理elasticseach6.2.1.和elasticseach5.1.1中存储的数据解决因为包冲突带来的问题解决思路：开一个python虚拟环境python安装虚拟环境：https://www.jianshu.com/p/4c898236cf35.3、创建虚拟环境mkvirtualenves5附：切换虚拟环境：workones5退出虚拟环境：deactivate4、查看当前虚拟环境安装的插件piplist5、py
系统 2019-09-27 17:45:40 2119
目录一、Python进阶实战之三级菜单1.1面条版1.2文艺青年版一、Python进阶实战之三级菜单打印省、市、县三级菜单可返回上一级可随时退出程序1.1面条版menu={'北京':{'海淀':{'五道口':{'soho':{},'网易':{},'google':{}},'中关村':{'爱奇艺':{},'汽车之家':{},'youku':{},},'上地':{'百度':{},},},'昌平':{'沙河':{'老男孩':{},'北航':{},},'天通苑':
系统 2019-09-27 17:45:30 2119
字符串--不可改变的序列如同大多数高级编程语言一样，变长字符串是Python中的基本类型。Python在“后台”分配内存以保存字符串（或其它值），程序员不必为此操心。Python还有一些其它高级语言没有的字符串处理功能。在Python中，字符串是“不可改变的序列”。尽管不能“按位置”修改字符串（如字节组），但程序可以引用字符串的元素或子序列，就象使用任何序列一样。Python使用灵活的“分片”操作来引用子序列，字符片段的格式类似于电子表格中一定范围的行或列
系统 2019-09-27 17:38:37 2119
今天有点��a=['XXXX_game.sql','XXXX_game_sp.sql','XXXX_gamelog_sp.sql','XXXX_gamelog.sql']foriina:if'gamelog'ini:a.remove(i)printa['XXXX_game.sql','XXXX_game_sp.sql','XXXX_gamelog.sql']历遍的过程中明显MISS掉了'XXXX_gamelog.sql'这个项目，大家可以自己试试，为什么会
系统 2019-09-27 17:38:32 2119
Python字典是另一种可变容器模型(无序)，且可存储任意类型对象，如字符串、数字、元组等其他容器模型。本文章主要介绍Python中字典(Dict)的详解操作方法,包含创建、访问、删除、其它操作等,需要的朋友可以参考下。字典由键和对应值成对组成。字典也被称作关联数组或哈希表。基本语法如下：1.创建字典>>>dict={'ob1':'computer','ob2':'mouse','ob3':'printer'}技巧：字典中包含列表：dict={'yangr
系统 2019-09-27 17:38:21 2119
字典由多个键及与其对应的值构成的对组成（把键值对成为项），每个键和它的值之间用冒号（：）隔开，项之间用逗号（,）隔开，而整个字典由一对大括号括起来。空字典由两个大括号组成：{}dict函数可以用dict函数，通过其他映射或者（键，值）这样的序列对建立字典复制代码代码如下:>>>items=[('name','Gumby'),('age',42)]>>>d=dict(items)>>>d{'age':42,'name':'Gumby'}>>>d['name'
系统 2019-09-27 17:38:11 2119
round()方法返回x的小数点四舍五入到n个数字。语法以下是round()方法的语法：round(x[,n])参数x--这是一个数值表达式n--这也是一个数值表达式返回值该方法返回x的小数点四舍五入到n个数字例子下面的例子显示了round()方法的使用#!/usr/bin/pythonprint"round(80.23456,2):",round(80.23456,2)print"round(100.000056,3):",round(100.00005
系统 2019-09-27 17:38:10 2119
1.算法：（设查找的数组期间为array[low,high]）（1）确定该期间的中间位置K（2）将查找的值T与array[k]比较。若相等，查找成功返回此位置；否则确定新的查找区域，继续二分查找。区域确定如下：a.array[k]>T由数组的有序性可知array[k,k+1,……,high]>T;故新的区间为array[low,……，K-1]b.array[k]复制代码代码如下:#!/usr/bin/python#-*-coding:utf-8-*-def
系统 2019-09-27 17:37:51 2119
在crnn训练的时候需要用到lmdb格式的数据集，下面是python生成lmdb个是数据集的代码，注意一定要在linux系统下，否则会读入图像的时候出问题，可能遇到的问题都在代码里面注释了，看代码即可。#-*-coding:utf-8-*-importosimportlmdb#先pipinstall这个模块哦importcv2importglobimportnumpyasnpdefcheckImageIsValid(imageBin):ifimageBin
系统 2019-09-27 17:32:50 2119
