Python

python实现爬虫统计学校BBS男女比例之多线程爬虫(二)

接着第一篇继续学习。一、数据分类正确数据:id、性别、活动时间三者都有放在这个文件里file1='ruisi\\correct%s-%s.txt'%(startNum,endNum)数据格式为293001男2015-5-119:17没有时间:有id、有性别,无活动时间放这个文件里file2='ruisi\\errTime%s-%s.txt'%(startNum,endNum)数据格式为2566女notime用户不存在:该id没有对应的用户放这个文件里fil

系统 2019-09-27 17:38:34 2500

Python

Python做的一个精简版学生信息管理系统【简单】【实用】

因为最近打算开发一个信息管理系统,有点复杂。作为初学者的我不是很懂。所以从简单的开始,先练练手。一步一步来,踏踏实实的走。千里之行始于足下。所以参考网上的一篇技术文章,稍微修改了一下,做了这个系统。文章链接:https://blog.csdn.net/xiao_huo_ban/article/details/79808778(本来想弄转载的,但是要原文作者允许太麻烦了)截图:废话不多说,上代码!代码:student_information.py#!/usr

系统 2019-09-27 17:56:19 2499

Python

【python爬虫】Pycharm+Scrapy+win10搭建scrapy

准备工作基础环境准备win10pycharmpython3(同时保证有pip环境)scrapy环境准备打开网址https://www.lfd.uci.edu/~gohlke/pythonlibs/下载Twisted(按python版本+系统位数对应)(浏览器下ctrl+f直接搜索)下载scrapy(截止本文撰写,当前版本是:Scrapy-1.6.0-py2.py3-NONE-any.whl)(不区分系统和python版本)准备好这两个whl文件(我习惯在桌

系统 2019-09-27 17:54:59 2499

Python

python WSGI框架详解

pythonWSGI框架详解WSGI几个关于WSGI相关的概念WSGI:全称是WebServerGatewayInterface,WSGI不是服务器,python模块,框架,API或者任何软件,只是一种规范,描述webserver如何与webapplication通信的规范。server和application的规范在PEP3333中有具体描述。要实现WSGI协议,必须同时实现webserver和webapplication,当前运行在WSGI协议之上的w

系统 2019-09-27 17:54:22 2499

Python

Python中的dot * multiply的区别

Python中的几种矩阵乘法同线性代数中矩阵乘法的定义:np.dot()np.dot(A,B):对于二维矩阵,计算真正意义上的矩阵乘积,同线性代数中矩阵乘法的定义。对于一维矩阵,计算两者的内积。见如下Python代码:importnumpyasnp2-Darray:2x3two_dim_matrix_one=np.array([[1,2,3],[4,5,6]])2-Darray:3x2two_dim_matrix_two=np.array([[1,2],[

系统 2019-09-27 17:52:17 2499

Python

对python特殊函数 __call__()的使用详解

__call__在Python中,函数其实是一个对象:>>>f=abs>>>f.__name__'abs'>>>f(-123)由于f可以被调用,所以,f被称为可调用对象。所有的函数都是可调用对象。一个类实例也可以变成一个可调用对象,只需要实现一个特殊方法__call__()。我们把Person类变成一个可调用对象:classPerson(object):def__init__(self,name,gender):self.name=nameself.gen

系统 2019-09-27 17:51:14 2499

Python

Python Django切换MySQL数据库实例详解

准备软件版本Django2.1.3Python3.7.1默认使用的是sqlite3DATABASES={'default':{'ENGINE':'django.db.backends.sqlite3','NAME':os.path.join(BASE_DIR,'db.sqlite3'),}}切换为MySql:#settings.pyDATABASES={'default':{'ENGINE':'django.db.backends.mysql','NAME

系统 2019-09-27 17:50:54 2499

Python

python中使用while循环的实例

python中for循环用于针对集合中的每个元素的一个代码块,而while循环能实现满足条件下的不断运行。使用while循环时,由于while只要满足条件就会执行代码,故必须指定结束条件,否则会形成死循环。如图,i的初始值为1,由于没有给i再进行赋值,导致i一直都满足条件,进入死循环。代码示例如下:i=1whilei<=5:print(i)上述问题的解决方案就是在循环中,给i赋值。这样当i不再满足条件时,程序将终止。代码示例如下:i=1whilei<=5:

系统 2019-09-27 17:50:32 2499

Python

python实现的登录和操作开心网脚本分享

SNS什么的我是一直无爱的,这次蛋疼写了个登录开心网(kaixin001)并向所有好友发送站内消息的脚本。开心网在登录的时候做了一些处理,并不传原始密码,从js分析到的结果是:登录时会生成一个随机的key,然后用这个key和原始密码进行xxtea加密,把加密后的结果再进行sha1加密。之后post这个key以及加密后的密码进行登录验证。以下是很简陋的脚本内容:#coding:utf-8"""开心网操作脚本Author:piglei2007@gmail.co

系统 2019-09-27 17:47:41 2499

Python

python聚类算法解决方案(rest接口/mpp数据库/json数据/下载

1.场景描述一直做java,因项目原因,需要封装一些经典的算法到平台上去,就一边学习python,一边网上寻找经典算法代码,今天介绍下经典的K-means聚类算法,算法原理就不介绍了,只从代码层面进行介绍,包含:rest接口、连接mpp数据库、回传json数据、下载图片及数据。2.解决方案2.1项目套路(1)python经典算法是单独的服务器部署,提供rest接口出来,供java平台调用,交互的方式是http+json;(2)数据从mpp数据库-Green

系统 2019-09-27 17:46:08 2499

Python

在远程服务器上离线配置python虚拟环境

服务器系统:CentOS6.5,配置:CUDA8,cudnn5.1.16,TITANX。目标环境:tensorflow-gpu、keras安装Anaconda首先,将下载好的Anaconda安装包上传到服务器,然后在服务器上进入安装包所在文件夹,运行bash命令安装。安装结束后,还需手动配置环境变量,否则运行python时,默认还是调用系统自带的python。sudogedit~/.bashrc运行上述命令打开环境配置文档,在文档末尾添加(改为自己的安装路

系统 2019-09-27 17:57:06 2498

Python

如何在Windows上使用Python进行开发

如何在Windows上使用Python进行开发本文由葡萄城技术团队于原创并首发转载请注明出处:葡萄城官网,葡萄城为开发者提供专业的开发工具、解决方案和服务,赋能开发者。一直以来C#都是微软在编程语言方面最为显著的Tag,但时至今日Python已经从一个小众语言,变成了世界编程语言排行榜排名前列的语言了。Python也在Web开发、网络爬虫、数据分析、大数据处理、机器学习、科学计算及绘图等领域有着不错的天然优势和不俗的表现。微软再从收购了Github后,在开

系统 2019-09-27 17:56:36 2498

Python

python自动化测试实例解析

本文实例讲述了python自动化测试的过程,分享给大家供大家参考。具体代码如下:importunittest########################################################################classRomanNumeralConverter(object):"""convertertheRomanNumber"""#---------------------------------------

系统 2019-09-27 17:56:13 2498

Python

浅谈MySQL在cmd和python下的常用操作

环境配置1:安装mysql,环境变量添加mysql的bin目录环境配置2:python安装MySQL-Python请根据自身操作系统下载安装,否则会报c++compile9.0,import_mysql等错误windows1064位操作系统可到http://www.lfd.uci.edu/~gohlke/pythonlibs/下载安装MySQL-Python包,至于whl和tar.gz在windows和Linux下的安装方法可查看我的上一篇文章一、cmd命

系统 2019-09-27 17:55:17 2498

Python

【Python基础学习】—时间转换函数

前言python的时间格式分为多种,几种格式之间的转换方法时常是我们遇到的而且是经常忘记的点,python不像php,时间字符串和datetime是一起的,只需要strtotime和date函数就可以相互转化。虽然网上已经有很多python时间转换的文章,但是由于作者本人经常做海外业务,需要各种时区之间的转换,所以这篇文章会对按时区转换各种时间格式做一个总结。转换方法图示(图片转自网络):一、字符串转时间戳1、默认:importtimedeftime_st

系统 2019-09-27 17:54:33 2498