前言最近学习了Fiddler抓包工具的简单使用，通过抓包，我们可以抓取到HTTP请求，并对其进行分析。现在我准备尝试着结合Python来模拟GitHub登录。Fiddler抓包分析首先，我们想要模拟一个网站的登录，我们必须要简单了解其大致过程。在这里，我通过Fiddler来抓取GitHub登录的请求，从网页上登录的URL为：https://github.com/login，抓包结果如下：左边的是会话列表，右边的是请求和响应的数据。一般情况下，登录都是用PO
系统 2019-09-27 17:52:33 1993
操作：输入带分页的地址，去掉最后面的数字，设置一下起始页数和终点页数功能：下载对应页码的所有页面并储存为HTML文件，以当前时间命名代码：#-*-coding:utf-8-*-#----------------------------#程序：百度贴吧的小爬虫#日期：2015/03/28#语言：Python2.7#操作：输入带分页的地址，去掉最后面的数字，设置一下起始页数和终点页数#功能：下载对应页码的所有页面并储存为HTML文件，以当前时间命名#-----
系统 2019-09-27 17:51:10 1993
Python是一门面向对象的编程语言，编译速度超快，从诞生到现在已经25个年头了。它具有丰富和强大的库，常被称为“胶水语言”，能够把用其他语言编写的各种模块(尤其是C/C++)很轻松地联结在一起。其特点在于灵活运用，因为其拥有大量第三方库，所以开发人员不必重复造轮子，就像搭积木一样，只要擅于利用这些库就可以完成绝大部分工作。如果你想选择一种语言来入门编程，那么Python绝对是首选！其非常接近自然语言，精简了很多不必要的分号和括号，非常容易阅读理解。编程简
系统 2019-09-27 17:51:02 1993
Mock是什么Mock这个词在英语中有模拟的这个意思，因此我们可以猜测出这个库的主要功能是模拟一些东西。准确的说，Mock是Python中一个用于支持单元测试的库，它的主要功能是使用mock对象替代掉指定的Python对象，以达到模拟对象的行为。简单的说，mock库用于如下的场景：假设你开发的项目叫a，里面包含了一个模块b，模块b中的一个函数c（也就是a.b.c）在工作的时候需要调用发送请求给特定的服务器来得到一个JSON返回值，然后根据这个返回值来做处理
系统 2019-09-27 17:50:44 1993
最近要写一款基于被动式的漏洞扫描器，因为被动式是将我们在浏览器浏览的时候所发出的请求进行捕获，然后交给扫描器进行处理，本来打算自己写这个代理的，但是因为考虑到需要抓取https，所以最后找到Mitmproxy这个程序。安装方法：pipinstallmitmproxy接下来通过一个案例程序来了解它的使用，下面是目录结构sproxy|utils|__init__.py|parser.py|sproxy.pysproxy.py代码#coding=utf-8fro
系统 2019-09-27 17:50:22 1993
一、concurrent模块的介绍concurrent.futures模块提供了高度封装的异步调用接口ThreadPoolExecutor：线程池，提供异步调用ProcessPoolExecutor：进程池，提供异步调用ProcessPoolExecutor和ThreadPoolExecutor：两者都实现相同的接口，该接口由抽象Executor类定义。二、基本方法submit(fn,*args,**kwargs):异步提交任务map(func,*iter
系统 2019-09-27 17:49:19 1993
目录一、multiprocess模块二、multiprocess.process模块三、process模块介绍3.1方法介绍3.2属性介绍3.3在windows中使用process模块的注意事项四、使用process模块创建进程4.1在Python中启动的第一个子进程4.2join方法4.3查看主进程和子进程的进程号4.4多个进程同时运行4.5多个进程同时运行，再谈join方法(1)4.6多个进程同时运行，再谈join方法(2)4.7通过继承Process
系统 2019-09-27 17:49:09 1993
1.什么是FM？FM即FactorMachine，因子分解机。2.为什么需要FM？1、特征组合是许多机器学习建模过程中遇到的问题，如果对特征直接建模，很有可能会忽略掉特征与特征之间的关联信息，因此，可以通过构建新的交叉特征这一特征组合方式提高模型的效果。2、高维的稀疏矩阵是实际工程中常见的问题，并直接会导致计算量过大，特征权值更新缓慢。试想一个10000*100的表，每一列都有8种元素，经过one-hot独热编码之后，会产生一个10000*800的表。因此
系统 2019-09-27 17:48:36 1993
众所周知，中文输入法是一个历史悠久的问题，但也实在是个繁琐的活，不知道这是不是网上很少有人分享中文拼音输入法的原因，接着这次NLPProject的机会，我觉得实现一发中文拼音输入法，看看水有多深，结果发现还挺深的，但是基本效果还是能出来的，而且看别的组都做得挺好的，这次就分享一下我们做的结果吧。（注：此文假设读者已经具备一些隐马尔可夫模型的知识）任务描述实现一个中文拼音输入法。经过分析，分为以下几个模块来对中文拼音输入法进行实现：核心功能包括拼音切分(Sp
系统 2019-09-27 17:48:20 1993
聊聊Python的单元测试框架（一）：unittest作者：HelloGitHub-ProdesireHelloGitHub的《讲解开源项目》系列，项目地址：https://github.com/HelloGitHub-Team/Article前言说到Python的单元测试框架，想必接触过Python的朋友脑袋里第一个想到的就是unittest。的确，作为Python的标准库，它很优秀，并被广泛用于各个项目。但你知道吗？其实在Python众多项目中，主流的
系统 2019-09-27 17:47:56 1993
