Python

python连接mongodb数据库,并将数据存成dataframe

首先需要有连接mongodb数据库基本信息:CONFIG_HOST='11.111.11.11'CONFIG_PORT='27017'CONFIG_DATABASE='databasename'CONFIG_USER='username'CONFIG_PASSWORD=XXXXXXCONFIG_TABLE='tablename'python通过pymongo对mongodb进行访问,提取出databasename中tablename中的colname_a,

系统 2019-09-27 17:53:00 2036

Python

ubuntu下使用URLOS 5分钟快速部署Python3网站环境

本文主要介绍如何在ubuntu下快速部署Python3网站环境,不需要一步一步手工部署,借助URLOS面板即可实现5分钟快速部署。让我们正式开始吧!首先通过以下命令安装URLOS面板:curl-LOwww.urlos.com/siu&&shsiu面板安装完成后,登录URLOS,在应用市场中搜索python3网站环境,点击安装按钮:在基本信息中填写服务名称、运行节点、端口号:在网站中填写网站域名、引导文件等:完成以上步骤后,点击提交即可。等待系统自动部署完成

系统 2019-09-27 17:52:36 2036

Python

在Python函数中输入任意数量参数的实例

有时候,预先不知道函数需要接受多少个实参,好在Python允许函数从调用语句中调用语句中收集任意数量的实参。在参数前加上*号。来看一个制作披萨的函数,它需要接受很多配料,但你无法预先确定顾客要多少种配料。下面的函数只有一个形参*toppings,但不管调用语句提供了多少实参,这个形参都将他们统统收入囊中:defmake_pizza(*toppings):"""打印顾客点的所有配料"""print(toppings)make_pizza('pepperoni

系统 2019-09-27 17:51:16 2036

Python

python单元测试用例设计

前言在刚学习编程的时候总是忘记处理一些特例(尤其是动态语言可以传各种值),为了养成良好的编程和测试习惯,在编写单元测试用例的时候,我们注意考虑下如下测试用例(等价类划分):正常值功能测试边界值(比如最大最小,最左最右值)异常值(比如None,空值,非法值)实战操作defbinary_search(array,target):ifnotarray:return-1beg,end=0,len(array)whilebeg

系统 2019-09-27 17:50:52 2036

Python

python爬图片(绅士进来)

如果,不是因为图片,又怎会和各位绅士见面?环境:系统:win10ide:pycharm模块:requests,etree首先我们选一个有很多妹子图片的网站,我提供一个:https://www.mzitu.com/jiepai/下面我们开始:1.分析网页结构:打开网页,按F12打开调试,然后选中一个图片,看它的结构:有一个data-original属性。属性值就是图片的链接,并且这个标签的class是“lazy”,我们可以用etree找到这个节点,拿到图片的

系统 2019-09-27 17:50:39 2036

Python

Python生成器

什么是生产器利用迭代器,我们可以每次迭代获取数据(通过next()方法)时按照特定的规律进行生成。但是我们在实现一个迭代器时,关于当前迭代到的状态需要我们自己记录,进而才能根据当前状态生产下一个数据。为了达到记录当前状态,并配合next()函数进行迭代使用,我们可以采用更简便的语法。即生成器(gennerator)。生成器是一类特殊的迭代器创建生成器的方法1:将列表生成器[]改为()代码:nums=[x*2forxinrange(10)]print(num

系统 2019-09-27 17:49:50 2036

Python

python:在django中用celery实现异步

celery英文官方网站:www.celeryproject.org中文网站:http://docs.jinkan.org/docs/celery/celeryCelery是一个简单、灵活且可靠的,处理大量消息的分布式系统,并且提供维护这样一个系统的必需工具。专注于实时处理的任务队列,同时也支持任务调度。作用:解决耗时操作:开一个新的进程,去操作耗时操作,不影响原有进程定时操作,使Listitem用celery定时执行操作:定义一个任务task,也就是一个

系统 2019-09-27 17:48:28 2036

Python

python爬虫框架scrapy 豆瓣实战

Scrapy官方介绍是Anopensourceandcollaborativeframeworkforextractingthedatayouneedfromwebsites.Inafast,simple,yetextensibleway.意思就是一个开源和协作框架,用于以快速,简单,可扩展的方式从网站中提取所需的数据。环境准备本文项目使用环境及工具如下python3scrapymongodbpython3scrapy的安装就不再叙述mongodb是用来存

系统 2019-09-27 17:46:17 2036

Python

Python多层嵌套list的递归处理方法(推荐)

问题:用Python处理一个多层嵌套list['and','B',['not','A'],[1,2,1,[2,1],[1,1,[2,2,1]]],['not','A','A'],['or','A','B','A'],'B']需求1)如何展开成一层?需求2)如何删除重复的元素?包括重复的list,要考虑子list的重复元素删除后造成的子list重复#!/usr/bin/envpython#-*-coding:utf-8-*-defunilist(ll):""

系统 2019-09-27 17:38:25 2036

Python

Python基础之列表list增删改查操作

生成列表l1=[1,2,3]l2=[4,5,6]增:1.append()#在列表最后插入元素l1.append(7)print(l1)2.insert()#在指定位置插入元素l1.insert(0,8)print(l1)3.extend()#将一个列表中的所有元素放到另一个列表后面l1.extend(l2)print(l1)4.直接相加print([1]+[2])查统计个数print(l1.count(1))l1.append(1)print(l1.cou

系统 2019-09-27 17:55:54 2035

Python

通过cmd进入python的实例操作

通过cmd启动Python需要先设置系统环境,设置步骤如下:1、首先,在桌面找到“计算机”右键找到“属性”或者按下win键再右键“计算机”找到“属性”也可以。如下图所示:2、接下来,点击完“属性”之后,进到如下图所示的界面,选择“高级系统设置”点击完“高级系统设置”之后会弹出系统属性框,所下图所示。选择弹框中“高级”下的“环境变量”点击“环境变量”之后,接下来我们要在“系统变量”里的Path后面加上Python安装路径。注意:在path后面加上一个英文“;

系统 2019-09-27 17:55:32 2035

Python

Python日志无延迟实时写入的示例

我在用python生成日志时,发现无论怎么flush(),文件内容总是不能实时写入,导致程序意外中断时一无所获。以下是查到的解决方案(亲测可行):open函数中有一个bufferin的参数,默认是-1,如果设置为0是,就是无缓冲模式。但是用二进制模式打开这个文件,并且把要写入的信息转换byte-like如下。withopen("test.txt",'wb',buffering=0)asf:#wb是写模式加二进制模式f.write(b"hello!")在字符

系统 2019-09-27 17:54:26 2035

Python

Python的文件读写基本操作

May19,20192:08PM文件的读写,由内置模块open进行操作和实现文本文件读操作withopen('data.txt')asfile_read:txt=file_read.read()print(txt.strip())文本文件的追加#文件的追加withopen('data.txt','a')asfile_append:file_append.write('\nNicetomeetyou!')文件的重写#文件的重写withopen('data.t

系统 2019-09-27 17:53:40 2035

Python

python 函数 变量和闭包

首先我们认定,python中定义域查找遵循local->Enclosing->Global->Built-in顺序:a=1deffunc1():...print(a)...a=111...print(a)...func1()Traceback(mostrecentcalllast):File"",line1,inFile"",line2,infunc1UnboundLocalError:localvariable'a'referencedbeforeass

系统 2019-09-27 17:53:22 2035

Python

一些Centos Python 生产环境的部署命令(推荐)

Justnotes拿到一台干净的centos之后,初始化Python环境,一些命令和问题记录而已可以搞成脚本自动初始化,当然,用docker更好基础环境1.创建用户sudoaddusernewusersudopasswdnewuser#设置授权不需要输入密码sudo/usr/sbin/visudonewuserALL=NOPASSWD:ALL2.EPEL(FedoraExtraPackagesforEnterpriseLinuxrepository)参考文

系统 2019-09-27 17:51:15 2035