Python - 军军小站|张军博客
Python

python操作ElasticSearch--文档增删改查

安装6.0.0版本##pipinstallelasticsearch==6.0.0#导包importjsonfromelasticsearchimportElasticsearch创建Index–PUT/news?prettyes=Elasticsearch(hosts="ip:port")#创建一个名为news的索引result=es.indices.create(index='news',ignore=400)print(result)#创建成功#{'

系统 2019-09-27 17:53:21 1903

Python

python爬虫 urllib模块反爬虫机制UA详解

方法:使用urlencode函数urllib.request.urlopen()importurllib.requestimporturllib.parseurl='https://www.sogou.com/web?'#将get请求中url携带的参数封装至字典中param={'query':'周杰伦'}#对url中的非ascii进行编码param=urllib.parse.urlencode(param)#将编码后的数据值拼接回url中url+=para

系统 2019-09-27 17:53:16 1903

Python

Python拉勾网爬虫实现

拉勾网爬虫解析拉勾网网站:在拉勾网上输入关键词后我们可以得到相应的岗位信息(这里以Python为例),我们先获取到网站中所有的城市信息,再通过城市信息遍历爬取全国的Python职位信息。在数据包的Headers中我们可以得到网页头的相关信息,如网页URL、请求方法、Cookies信息、用户代理等相关信息。获取所有城市:classCrawlLaGou(object):def__init__(self):#使用session保存cookies信息self.la

系统 2019-09-27 17:52:08 1903

Python

在Python函数中输入任意数量参数的实例

有时候,预先不知道函数需要接受多少个实参,好在Python允许函数从调用语句中调用语句中收集任意数量的实参。在参数前加上*号。来看一个制作披萨的函数,它需要接受很多配料,但你无法预先确定顾客要多少种配料。下面的函数只有一个形参*toppings,但不管调用语句提供了多少实参,这个形参都将他们统统收入囊中:defmake_pizza(*toppings):"""打印顾客点的所有配料"""print(toppings)make_pizza('pepperoni

系统 2019-09-27 17:51:16 1903

Python

一些Centos Python 生产环境的部署命令(推荐)

Justnotes拿到一台干净的centos之后,初始化Python环境,一些命令和问题记录而已可以搞成脚本自动初始化,当然,用docker更好基础环境1.创建用户sudoaddusernewusersudopasswdnewuser#设置授权不需要输入密码sudo/usr/sbin/visudonewuserALL=NOPASSWD:ALL2.EPEL(FedoraExtraPackagesforEnterpriseLinuxrepository)参考文

系统 2019-09-27 17:51:15 1903

Python

使用Python中的cookielib模拟登录网站

前面简单提到了Python模拟登录的程序,但是没写清楚,这里再补上一个带注释的Python模拟登录的示例程序。简单说一下流程:先用cookielib获取cookie,再用获取到的cookie,进入需要登录的网站。#-*-coding:utf-8-*-#!/usr/bin/pythonimporturllib2importurllibimportcookielibimportreauth_url='http://www.nowamagic.net/'home

系统 2019-09-27 17:50:25 1903

Python

python 排列 组合

排列defperm(arr,stack):ifnotarr:print(stack)#到树的最后,输出结果tmp=stack.copy()res.append(tmp)else:#没有到树的叶子节点的时候,使用递归继续往下找。foriinrange(len(arr)):stack.append(arr[i])delarr[i]perm(arr,stack)arr.insert(i,stack.pop())arr=[1,2,3]stack=[]res=[]p

系统 2019-09-27 17:50:13 1903

Python

Python如何调用外部系统命令

前言利用Python调用外部系统命令的方法可以提高编码效率。调用外部系统命令完成后可以通过获取命令执行返回结果码、执行的输出结果进行进一步的处理。本文主要描述Python常见的调用外部系统命令的方法,包括os.system()、os.popen()、subprocess.Popen()等。本文分析python调用外部系统命令主要从两个方面考虑:1、是不是可以返回命令执行结果码,因为大部分场景都需要通过判断调用命令是执行成功还是失败。2、是不是可以获取命令执

系统 2019-09-27 17:49:30 1903

Python

python进阶学习笔记(一)

python进阶学习笔记(一)2013-05-2200:22虫师阅读(...)评论(...)编辑收藏同样是《python基础教程(第二版)》的内容,只是后面内容学起来,相比前面会比较有趣,也更加实用,所以,将“基础”改为“进阶”。python电子书分享地址:http://yunpan.cn/Q2U87uGrNiTA3本节讲文件的操作-------------------------------打开文件open函数用来打开文件,语法如下:open(name[

系统 2019-09-27 17:48:46 1903

Python

Python 使用matplotlib模块模拟掷骰子

掷骰子骰子类#die.py骰子类模块fromrandomimportrandintclassDie():"""骰子类"""def__init__(self,num_sides=6):"""默认六面的骰子"""self.num_sides=num_sidesdefroll(self):"""掷骰子的方法"""returnrandint(1,self.num_sides)折线图掷骰子#die_visual_plot.py使用plot可视化骰子importmat

系统 2019-09-27 17:48:44 1903

Python

python ORM模块sqlalchemy的使用

1、安装sqlalchemypipinstallsqlalchemy2、导入必要的包及模块importsqlalchemyfromsqlalchemy.ext.declarativeimportdeclarative_basefromsqlalchemy.ormimportsessionmaker3、创建数据库连接实例#创建数据库连接实例(#"数据库类型+数据库模块://用户名:密码@主机/库名")db=sqlalchemy.create_engine("

系统 2019-09-27 17:47:28 1903

Python

python之zip压缩包爆破

importzipfileimporteasyguiasguifromthreadingimportThreaddefcrackPassword(zFile,password):try:zFile.extractall(pwd=password.encode("utf-8"))print("[+]crackpassword"+password)returnexcept(RuntimeError,zipfile.BadZipFile):print("密码:"

系统 2019-09-27 17:46:50 1903

Python

python中使用xlrd、xlwt操作excel表格详解

最近遇到一个情景,就是定期生成并发送服务器使用情况报表,按照不同维度统计,涉及python对excel的操作,上网搜罗了一番,大多大同小异,而且不太能满足需求,不过经过一番对源码的"研究"(用此一词让我觉得颇有成就感)之后,基本解决了日常所需。主要记录使用过程的常见问题及解决。python操作excel主要用到xlrd和xlwt这两个库,即xlrd是读excel,xlwt是写excel的库。可从这里下载https://pypi.python.org/pyp

系统 2019-09-27 17:45:56 1903

Python

Python制作数据导入导出工具

python2.6编写,自己瞎写的,备用'''ExportandImportElasticSearchData.SimpleExampleAt__main__@author:wgzh159@163.com@note:uncheckconsistencyofdata,pleasedoitbyself'''importjsonimportosimportsysimporttimeimporturllib2reload(sys)sys.setdefaultenc

系统 2019-09-27 17:38:36 1903

Python

Python语言学习(四)(字典和集合)

字典字典可以存储任意类型对象,与列表、集合不同的是,字典的每个元素都是由一个键和一个值组成的“键值对”,键和值通过冒号分开。下面的代码演示了如何定义和使用字典。defmain():scores={'骆昊':95,'白元芳':78,'狄仁杰':82}#通过键可以获取字典中对应的值print(scores['骆昊'])print(scores['狄仁杰'])#对字典进行遍历(遍历的其实是键再通过键取对应的值)foreleminscores:print('%s\

系统 2019-09-27 17:57:22 1902