Python

python 爬取学信网登录页面的例子

我们以学信网为例爬取个人信息**如果看不清楚按照以下步骤:**1.火狐为例打开需要登录的网页�C>F12开发者模式(鼠标右击,点击检查元素)�C点击网络�C>需要登录的页面登录下�C>点击网络找到一个POST提交的链接点击�C>找到post(注意该post中信息就是我们提交时需要构造的表单信息)importrequestsfrombs4importBeautifulSoupfromhttpimportcookiesimporturllibimporthtt

系统 2019-09-27 17:57:26 2222

Python

Python并发编程之进程同步

"""问题:当多个进程使用同一份数据资源的时候,就会引发数据安全或顺序混乱的问题"""'''进程同步'''#多进程抢占输出资源importosimporttimeimportrandomfrommultiprocessingimportProcessdefwork(n):print(f'{n}:{os.getpid()}isrunning')#time.sleep(random.random())time.sleep(2)print(f"{n}:{os.g

系统 2019-09-27 17:56:01 2222

Python

简单了解python中对象的取反运算符

取反运算符的原理:1.对3取反:(取4位二进制)①化为二进制:3→0011②对二进制结果取反:0011→1100③对结果先取反再加1:1100→(~1100+1)→0011+1→0100④对符号取反并化为十进制:-0100→-42.对-4取反:①化为二进制:4→0100②对二进制结果取反:0100→1011③对结果先加1再取反:1011→~(1011+1)→~1100→0011④对符号取反并化为十进制:+0011→33.从结果来说:取反结果为:原数+1再变

系统 2019-09-27 17:51:41 2222

Python

Python日志模块学习,从这里开始...

消息与记录刚才谈到了关于历史账号的文章与消息记录,所以今天想跟大家聊聊Python关于消息记录的模块:日志管理模块logging。学习python的第一课,肯定都是print('HelloWrold...')。但print仅仅使用于我们日常学习,当我们的程序需要部署上线时,程序必须要具备记录日志与程序输出的功能。此时print就不能满足我们的需求,而logging应运而生。logging是python的内置模块,无需安装即可直接使用。logging模块借鉴

系统 2019-09-27 17:51:36 2222

Python

python常用日期使用方法

#!/usr/bin/python3--coding:utf-8--“”"通过datetime和dateutil进行常用日期的获取如:今年,去年,明年当前季度本月,上月,去年同期,今年一月今天,昨天,明天,本周、本月、本季度、本年第一天,本周、本月、本季度、本年最后一天“”"importdatetime获取常用特定日期(如去年/季度/当月/本周/首日/)=======================================关于年(今年,去年,明年)

系统 2019-09-27 17:50:37 2222

Python

跟老齐学Python之��嗦的除法

除法��嗦的,不仅是python。整数除以整数看官请在启动idle之后,练习下面的运算:>>>2/50>>>2.0/50.4>>>2/5.00.4>>>2.0/5.00.4看到没有?麻烦出来了,如果从小学数学知识除法,以上四个运算结果都应该是0.4。但我们看到的后三个符合,第一个居然结果是0。why?因为,在python里面有一个规定,像2/5中的除法这样,是要取整。2除以5,商是0(整数),余数是2(整数)。那么如果用这种形式:2/5,计算结果就是商那个

系统 2019-09-27 17:45:24 2222

Python

菜鸟使用python实现正则检测密码合法性

客户系统升级,要求用户密码符合一定的规则,即:包含大小写字母、数字、符号,长度不小于8,于是先用python写了个简单的测试程序:在写解决方案前,列一下python正则表达式中的特殊字符:^表示匹配的字符必须在最前边$表示匹配的字符必须在最后边*匹配*前面的字符0次或n次+匹配+前面的字符1次或n次?匹配?前面的字符0次或1次.(小数点)匹配除换行符外的所有字符(x)匹配x并记录匹配的值x|y匹配x或者y{n}这里n是一个正整数。匹配前面的n个字符{n,}

系统 2019-09-27 17:38:44 2222

Python

浅谈Python的Django框架中的缓存控制

关于缓存剩下的问题是数据的隐私性以及在级联缓存中数据应该在何处储存的问题。通常用户将会面对两种缓存:他或她自己的浏览器缓存(私有缓存)以及他或她的提供者缓存(公共缓存)。公共缓存由多个用户使用,而受其他某人的控制。这就产生了你不想遇到的敏感数据的问题,比如说你的银行账号被存储在公众缓存中。因此,Web应用程序需要以某种方式告诉缓存那些数据是私有的,哪些是公共的。解决方案是标示出某个页面缓存应当是私有的。要在Django中完成此项工作,可使用cache_co

系统 2019-09-27 17:38:43 2222

Python

python读取二进制mnist实例详解

python读取二进制mnist实例详解trainingdata数据结构:[offset][type][value][description]000032bitinteger0x00000803(2051)magicnumber000432bitinteger60000numberofimages000832bitinteger28numberofrows001232bitinteger28numberofcolumns0016unsignedbyte??

系统 2019-09-27 17:38:17 2222

Python

关联算法②——Apriori算法原理及python实现

一、关联规则关联规则,顾名思义,就是寻找事物之间的关联关系。比如《啤酒与尿布》中,在某个特定时间段,会出现啤酒与尿布同时出现在购物篮中的现象,且出现频率非常高。调研发现这是一群爱喝啤酒的奶爸群体。如果可以通过类似的方式挖掘更多特定的群体需求,就可以进行交叉销售或捆绑销售来提升销售额和利润。Apriori算法就是经典的寻找物品的关联算法。二、Apriori算法原理1、基础概念项集:包含0个或者多个项的集合称为项集频繁项集:那些经常一起出现的物品集合2、关联规

系统 2019-09-27 17:55:14 2221

Python

【python爬虫】Pycharm+Scrapy+win10搭建scrapy

准备工作基础环境准备win10pycharmpython3(同时保证有pip环境)scrapy环境准备打开网址https://www.lfd.uci.edu/~gohlke/pythonlibs/下载Twisted(按python版本+系统位数对应)(浏览器下ctrl+f直接搜索)下载scrapy(截止本文撰写,当前版本是:Scrapy-1.6.0-py2.py3-NONE-any.whl)(不区分系统和python版本)准备好这两个whl文件(我习惯在桌

系统 2019-09-27 17:54:59 2221

Python

【Python】注释

微信订阅号:Rabbit_svip本次笔记基于python3.7在大多数编程语言中,注释都是一项非常有用且常用的功能。在python中有3种注释方法。以#号开头三个单引号(''')三个双引号(""")以#号开头#sayhiprint("HelloWorld!")print("Python~")#这是一条注释#号后面跟着的部分都属于注释。#号适合用在单行注释。三个单引号(''')和三个双引号(""")'''这是多行注释,使用单引号。这是多行注释,使用单引号。

系统 2019-09-27 17:53:23 2221

Python

Python中实现从目录中过滤出指定文件类型的文件

最近学习下python,将从指定目录中过滤出指定文件类型的文件输出的方法总结一下,供日后查阅复制代码代码如下:#!/usr/bin/envpythonimportglobimportosos.chdir(“./”)forfileinglob.glob(“*.py”):printfileprint“#######AnotherOne##########”forfileinos.listdir(“./”):iffile.endswith(“.py”):prin

系统 2019-09-27 17:52:35 2221

Python

python之numpy模块的使用(2)

原文链接:https://www.machinelearningplus.com/python/numpy-tutorial-python-part2/1、数组的连接#1、连接数组操作;#方法1:通过将axis参数更改为0垂直和1水平np.concatenate#方法2:和np.vstack垂直和np.hstack水平#方法3:和np.r_垂直和np.c_水平#推荐使用np.vstack([a,b])垂直叠加;np.hstack([a,b])水平连接#1.

系统 2019-09-27 17:49:15 2221