Python - 军军小站|张军博客
Python

用python3 urllib破解有道翻译反爬虫机制详解

前言最近在学习python爬虫方面的知识,网上有一博客专栏专门写爬虫方面的,看到用urllib请求有道翻译接口获取翻译结果。发现接口变化很大,用md5加了密,于是自己开始破解。加上网上的其他文章找源码方式并不是通用的,所有重新写一篇记录下。爬取条件要实现爬取的目标,首先要知道它的地址,请求参数,请求头,响应结果。进行抓包分析打开有道翻译的链接:http://fanyi.youdao.com/。然后在按f12点击Network项。这时候就来到了网络监听窗口,

系统 2019-09-27 17:57:02 1926

Python

python 根据pid杀死相应进程的方法

用python语言实现根据pid杀死相应进程kill_process.py代码如下#!/usr/bin/python#-*-coding:utf-8-*-importosimportsysimportsignaldefkill(pid):try:a=os.kill(pid,signal.SIGKILL)#a=os.kill(pid,signal.9)#与上等效print'已杀死pid为%s的进程,返回值是:%s'%(pid,a)exceptOSError,

系统 2019-09-27 17:57:00 1926

Python

yield-Python大牛必须掌握的高端语法

小白:大牛哥,刚才看到有一个函数不使用return返回结果,而是使用yield关键字返回结果,看不太明白,Python中yield关键字的用途是什么,它有什么作用呀?大牛:要想理解yield的作用,你必须了解什么是生成器(generators),了解生成器之前(generators)你需要先去了解什么是可迭代对象(iterables)。大牛:小白啊,今天你大牛哥我刚好有空,给你说道说道这个yield的作用。让你开开眼界,看看我大牛都是怎么写出牛逼代码的。小

系统 2019-09-27 17:56:45 1926

Python

python字符串中的单双引

python中字符串可以(且仅可以)使用成对的单引号、双引号、三个双引号(文档字符串)包围:'thisisabook'"thisisabook""""thisisabook"""可在单引号包围的字符串中包含双引号,三引号等,但不能包含单引号自身(需转义)'thisisa"book''thisisa""book''thisisa"""book''thisisa\'book'也可多单引号中的双引号转义,但通常没什么必要和意义'thisisa\"book'同理,

系统 2019-09-27 17:56:37 1926

Python

CDH修改PySpark默认的Python版本

前言PySpark一直使用的是Linux默认的Python2.7.5版本,感觉超级不爽,于是想升个级,可怎么升啊?于是又开始了万年的Google操作步骤安装Python3.X参考配置全局变量sudovim/etc/profileexportPATH=/usr/bin/python3:$PATHsource/etc/profile打开CDHWeb配置spark-env.sh文件如下:即添加:exportPYSPARK_PYTHON=/usr/bin/pyth

系统 2019-09-27 17:56:03 1926

Python

python学习 -女神或者男神把微信消息撤回后好慌,有了这个妈妈再也不担心你

简介有时候在忙工作,女朋友发了一个消息,就撤回了,但是人天生的都有一颗好奇心,而且在当今这个时代找个女朋友不容易,一个程序猿找一个女朋友更是不容易的。人家好不容易跟你,你还不得把人家当老佛爷侍候着,侍候着也不行,还得小心翼翼地侍候着,但是声明:宏哥可能过分宠她,但绝对不是妻管严哈!因此当她撤回消息后,慌得一逼,是不是不高兴了?是不是生气了?还是发生什么事了?是不是生病了?还是我哪里惹到她了?俗话说:不干亏心事,不怕鬼叫门,虽然自己确实没有干亏心事,但是心里

系统 2019-09-27 17:55:43 1926

Python

详解Python3之数据指纹MD5校验与对比

MD5消息摘要算法(英语:MD5Message-DigestAlgorithm),一种被广泛使用的密码散列函数,可以产生出一个128位(16字节)的散列值(hashvalue),用于确保信息传输完整一致。MD5由美国密码学家罗纳德・李维斯特(RonaldLinnRivest)设计,于1992年公开,用以取代MD4算法。概述MD5校验码通过散列函数计算而成,可以生成任何数据的数据“指纹”,即我们可以利用MD5将消息或者数据压缩成摘要,是的数据量变小,便于比较

系统 2019-09-27 17:54:09 1926

Python

Python学习笔记(三

一、PyQt5安装:1、国内镜像:pipinstallPyQt5-ihttps://pypi.douban.com/simple安装完成之后还要安装PyQt5的工具包:pipinstallPyQt5-tools-ihttps://pypi.douban.com/simple2、官网的:pipinstallPyQt5pipinstallPyQt5-tools3、也可以在PyCharm中安装:4、安装完毕之后用下面的代码测试如果运行成功表示安装成功:impor

系统 2019-09-27 17:53:46 1926

Python

python找出一个列表中相同元素的多个索引实例

定义:X=[1,2,3,1,4]任务:找出元素为1的索引Solution:#如果直接用X.index(1),只能得到0这一个索引,而我们需要所有索引.l=len(X)zip_list=zip(*(range(l),X))id1=[z[0]fori,zinenumerate(zip_list)ifz[1]==1]#或者更简单的id1=[ifori,xinenumerate(X)ifx==1]以上这篇python找出一个列表中相同元素的多个索引实例就是小编分享

系统 2019-09-27 17:53:25 1926

Python

Python 中運算子 + 與 * 的 Overload 方法重載功能

字串String原本不能像數值一樣有加減乘除運算,但有例外。例如:>>>'Good'+'Morning''GoodMorning'運算子+可將2個字串,串接起來。運算子+有字串Concat功能。同樣,運算子*有迭代Iterator的功能,例如:>>>'Good'*3'GoodGoodGood'這寫法讓Python的程式更簡潔易讀。例如:forkinrange(1,6):print(''*(6-k)+'A'*2*k)這樣簡潔幾行程式即能將此圖形畫出,不是很美

系统 2019-09-27 17:52:44 1926

Python

python爬虫(入门教程、视频教程) 原创

python的版本经过了python2.x和python3.x等版本,无论哪种版本,关于python爬虫相关的知识是融会贯通的,脚本之家关于爬虫这个方便整理过很多有价值的教程,小编通过本文章给大家做一个关于python爬虫相关知识的总结,以下就是全部内容:python爬虫的基础概述1.什么是爬虫网络爬虫,即WebSpider,是一个很形象的名字。把互联网比喻成一个蜘蛛网,那么Spider就是在网上爬来爬去的蜘蛛。网络蜘蛛是通过网页的链接地址来寻找网页的。从

系统 2019-09-27 17:52:41 1926

Python

逻辑回归模型——python代码实现

逻辑回归的推导过程:https://blog.csdn.net/ACM_hades/article/details/90448785代码主要实现了下面公式:Wk+1=Wk+λX(Y−fWk(XT))W^{k+1}=W^k+λX(Y-f_{W^k}(X^T))Wk+1=Wk+λX(Y−fWk​(XT))数据集:我们选择MNIST数据集进行实验,它包含各种手写数字(0-9)图片,图片大小28*28。MNIST数据集本身有10个类别,为了将其变成二分类问题我们进

系统 2019-09-27 17:52:11 1926

Python

Appium+python自动化(十)- 元素定位秘籍助你打通任督二脉

简介你有道灵光从天灵盖喷出来你知道吗,年纪轻轻就有一身横练的筋骨,简直百年一见的练武奇才啊,如果有一天让你打通任督二脉,那还不飞龙上天啊。正所谓我不入地狱谁入地狱,警恶惩奸维护世界和平这个任务就交个你了,好吗。这本如来神掌秘籍是无价之宝,我看与你有缘,收你十块钱传授给你吧。想必这段经典台词给为都可以的耳熟能详吧,宏哥,没这么牛叉呼啦带闪电,就是希望对你有帮助就可以了。上一篇宏哥给小伙伴们介绍完定位工具这两个异性兄弟,这篇就给小伙伴们介绍一下定位方法。早就有

系统 2019-09-27 17:51:42 1926

Python

python编码问题

1、SyntaxError:Non-UTF-8codestartingwith'\xc7'infiletest_GRU.pyonline解决办法:#在文件前面加#coding=gbk2、如果包ascii报错(1)设置环境变量LANG在linux或Mac上设置环境变量的方式一样,编辑~/.bash_profile文件(’~’指的是用户登录后的默认目录),添加一行:exportLANG="en_US.UTF-8"添加完记得source.bash_profile

系统 2019-09-27 17:51:13 1926

Python

python使用递归的方式建立二叉树

树和图的数据结构,就很有意思啦。#coding=utf-8classBinaryTree:def__init__(self,root_obj):self.key=root_objself.left_child=Noneself.right_child=Nonedefinsert_left(self,new_node):node=BinaryTree(new_node)ifself.left_childisNone:self.left_child=nodee

系统 2019-09-27 17:49:38 1926