之前想爬取一些淘宝的数据，后来发现需要登录，找了很多的资料，有个使用request的sessions加上cookie来登录的，cookie的获取在登录后使用开发者工具可以找到。不过这个登录后获得的网页的代码是静态的，获取动态网页还得另寻他法，一般需要的数据可以在网页的源码中得到，但是你知道的，有些动态加载的就不是那么简单了，而且我发现这样获得的源码中，有些想要获取的数据的格式是经过改动的，比如我要某个商品的具体链接，发现并不能直接使用。总体而言，这是一次失
系统 2019-09-27 17:54:47 1908
前言今天我们再说一下pytest框架和unittest框架相同的fixture的使用，了解unittest的同学应该知道我们在初始化环境和销毁工作时，unittest使用的是setUp，tearDown方法，那么在pytest框架中同样存在类似的方法，今天我们就来具体说明。先附上官方文档的一段说明1.每个级别的setup/teardown都可以多次复用2.如果相应的初始化函数执行失败或者被跳过则不会执行teardown方法3.在pytest4.2之前，xu
系统 2019-09-27 17:54:40 1908
项目中想使用以前的代码，或者什么样的需求致使你需要导入外部的包如果是web下，比如说django，那么你新建一个app，把你需要导入的说用东东，都写到这个app中，然后在setting中的app也配上基本就ok了如果是本地代码，可以有几种方式，1、这种最简单，也可能最不实用，将你的外部文件放到跟需要调用外部文件的文件同一个包下，同一目录folder------toinvoke.py------tobeinvoded.py这样在toinvoke.py中引入i
系统 2019-09-27 17:54:22 1908
高阶函数map/reducePython内建了map()和reduce()函数。我们先看map。map()函数接收两个参数，一个是函数，一个是Iterable，map将传入的函数依次作用到序列的每个元素，并把结果作为新的Iterator返回。举例说明，比如我们有一个函数f(x)=x2，要把这个函数作用在一个list[1,2,3,4,5,6,7,8,9]上，就可以用map()实现如下：现在，我们用Python代码实现：deff(x):returnx*xr=m
系统 2019-09-27 17:53:59 1908
Python支持一种有趣的语法，它允许你快速定义单行的最小函数。这些叫做lambda的函数，是从Lisp借用来的，可以用在任何需要函数的地方。lambda的语法时常会使人感到困惑，lambda是什么，为什么要使用lambda，是不是必须使用lambda？>>>deff(x):...returnx+2...>>>f(1)3>>>f=lambdax:x+2>>>f(1)3>>>(lambdax:x+2)(1)3Pythondef和Pythonlambda它们有
系统 2019-09-27 17:53:35 1908
闲暇之余，在家里自建了个服务器，因为用的小区宽带，IP位动态分配。域名解析就是个问题，我的域名一般停放在DNSPod下。DNSPod有提供修改的API，就用Python简单的实现了一下动态解析。这样，就不用安装花生壳了。废话不说，看代码：#!/usr/bin/envpython#-*-coding:utf-8-*-importhttplib,urllib,urllib2importtimeimportsys,osimportreimportjsonuser
系统 2019-09-27 17:52:14 1908
简介这篇博文和分类看似没有多大关系，但是也是从上一篇衍生出来的产物，因为涉及到FQ工具Lantern，就算是给关注和支持的小伙伴们拓展一下眼界和知识面。而且好多人都阅读了上一篇没发现那个参考博客点不开吗？那是因为还没来的急，整理和编写，今天再试一下就可以。一个软件可能占用多个端口拥有多个目标IP，下面以FQ工具Lantern为例，说明端口查看方法：1.借助第三方软件查看如果你电脑上安装了360等优化工具，可能会自带查看网络状况的插件如下图：2.命令行窗口查
系统 2019-09-27 17:51:27 1908
BeautifulSoup基础实战安装：pipinstallbeautifulsoup4常用指令：frombs4importBeautifulSoupasbsimporturllib.requestdata=urllib.request.urlopen("https://www.cnblogs.com/mcq1999/").read().decode("utf-8","ignore")bs1=bs(data)print(bs1.prettify())#格式
系统 2019-09-27 17:50:47 1908
转：https://www.jianshu.com/p/4be85de84d2a本机环境：Windows1064位Anacondapython3.7报错信息：pipisconfiguredwithlocationsthatrequireTLS/SSL,howeverthesslmoduleinPythonisnotavailable.解决方法：原因：Anaconda环境变量未配置完全需要配置的环境变量：D:\ProgramData\Anaconda3D:\
系统 2019-09-27 17:50:37 1908
说起Python强大的地方，你可能想到是它的优雅、简洁、开发速度快，社区活跃度高。但真正使得这门语言经久不衰的一个重要原因是它的无所不能，因为社区有各种各样的第三库，使得我们用Python实现一个东西实在是太简单了，你经常会看到几行代码实现爬虫，10行代码实现人脸识别，虽然有些夸张，但确实就是有这样的库帮你把所有的繁文缛节全部封装了，最后给你开放一个优雅的API。今天给你推荐的这个库叫“FuckIt.py”，名字一看就是很黄很暴力的那种，作者是这样介绍它的
系统 2019-09-27 17:50:33 1908
Python在debug方面的支持还是不错的，在明确代码意义的情况下，通过log、print和assert分析错误原因，配合单元测试可以很高效。然而，实际工作中大量代码很可能出自他人之手，这种情况下，使用debugger就显得更加高效了。一、在控制台下进行程序调试PDB如果你熟悉命令行调试工具（例如gdb、lldb），那么使用Python中的PDB将获得非常好的体验，PDB不仅支持项目启动时进行调用，也支持在Pythonshell中交互式调试；功能上，支持
系统 2019-09-27 17:50:11 1908
首先我们要明白在python中当字符编码为:UTF-8时，中文在字符串中的占位为3个字节，其余字符为一个字节下面就直接介绍几种python中字符串常用的几种字符串内置函数(本文中牵扯到了模块与一些之前章节没讲过的相关知识,坑我之后会填的)字符串切片(截取字符串):#字符串切片string[开始位置:结束位置:步长]name="巩�t鹏"print(name[0:])#从第一个字符截取到最后一个字符print(name[0:2])#从第一个字符截取到第二个字
系统 2019-09-27 17:49:35 1908
1、python大量的库为数据分析提供了完整的工具集2、比起MATLAB、R语言等其他主要用于数据分析语言，python语言功能更加健全3、python库一直在增加，算法的实现采取的方法更加创新4、python能很方便的对接其他语言，比如c、java等什么是IPython？IPython是一个python的交互式的shell(它默认的pythonshell要好用的多、强大的多)1、支持代码的自动补全、自动缩进，已经支持bashshell2、JupyterN
系统 2019-09-27 17:48:58 1908
在web开发中经常用到验证码，为了防止机器人注册或者恶意登陆和查询等，作用不容小觑但是验证码其实不是一个函数就能搞定的，它需要生成图片和水印，其实每种语言都有相关的函数生成图片和文字水印。包括我熟悉的php，呵呵，今天主要来分享如何用python生成验证码。python生成验证码主要用到如下模块：Image,ImageDraw,ImageFont,ImageFilter和随机数生成模块Random。代码如下：#!/usr/bin/envpython#cod
系统 2019-09-27 17:48:19 1908
本文实例为大家分享了网易有道2017内推编程题：洗牌，供大家参考，具体内容如下'''[编程题]洗牌时间限制：1秒空间限制：32768K洗牌在生活中十分常见，现在需要写一个程序模拟洗牌的过程。现在需要洗2n张牌，从上到下依次是第1张，第2张，第3张一直到第2n张。首先，我们把这2n张牌分成两堆，左手拿着第1张到第n张（上半堆），右手拿着第n+1张到第2n张（下半堆）。接着就开始洗牌的过程，先放下右手的最后一张牌，再放下左手的最后一张牌，接着放下右手的倒数第二
系统 2019-09-27 17:47:52 1908
