今天群里有个伙计问，怎么用python统计Nginx日志访问次数前十的IP才能快一些，他表示自己使用的方式是将日志前面的IP全部放在列表中，然后通过列表的count方法来统计的，起初都还好，但是当日志量一大就很慢，问有没有啥好的方法可以解决！当然有，可以使用python的字典来加快速度，下面的日志文件是我用代码模拟生成的：#!/usr/bin/envpython#-*-coding:utf-8-*-#@Time:2019/5/2210:27#@Author
系统 2019-09-27 17:52:27 2174
python从字符串中提取数字使用正则表达式，用法如下：##总结##^匹配字符串的开始。##$匹配字符串的结尾。##\b匹配一个单词的边界。##\d匹配任意数字。##\D匹配任意非数字字符。##x?匹配一个可选的x字符(换言之，它匹配1次或者0次x字符)。##x*匹配0次或者多次x字符。##x+匹配1次或者多次x字符。##x{n,m}匹配x字符，至少n次，至多m次。##(a|b|c)要么匹配a，要么匹配b，要么匹配c。##(x)一般情况下表示一个记忆组(r
系统 2019-09-27 17:50:42 2174
有用请点赞，没用请差评。欢迎分享本文，转载请保留出处。目前程序的训练部分分类器部分没有问题，但是最后的predict部分还存在点问题，一直没有找出来，等有时间了再来修改吧。采用的数据集：github：https://github.com/Tomator01/-Machine-Learning#-*-coding:utf-8-*-#AdaBoost算法#author:Tomatorimportnumpyasnpimportpandasaspdfromskle
系统 2019-09-27 17:49:05 2174
在上次的爬虫中，抓取的数据主要用到的是第三方的Beautifulsoup库，然后对每一个具体的数据在网页中的selecter来找到它，每一个类别便有一个select方法。对网页有过接触的都知道很多有用的数据都放在一个共同的父节点上，只是其子节点不同。在上次爬虫中，每一类数据都要从其父类（包括其父节点的父节点）上往下寻找ROI数据所在的子节点，这样就会使爬虫很臃肿，因为很多数据有相同的父节点，每次都要重复的找到这个父节点。这样的爬虫效率很低。因此，笔者在上次
系统 2019-09-27 17:49:04 2174
使用：复制代码代码如下:foldercleanup.py-d10-kc:\test\keepfile.txtc:\test表示对c:\test目录只保留最近10天的子文件夹和keepfile.txt中指定的子文件夹。代码：复制代码代码如下:importosimportos.pathimportdatetimedefgetOption():fromoptparseimportOptionParserdes="cleanupthefolderwithsomeo
系统 2019-09-27 17:47:28 2174
日常运维工作中，通常是邮件报警机制，但邮件可能不被及时查看，导致问题出现得不到及时有效处理。所以想到用Python实现发短信功能，当监控到问题出现时，短信报警，使问题能得到及时的处理。当然，我相信，用Python发短信应用场景不止此一处，下面我们开始Python发短信的实现。首先，看下成果展示：然后，看下代码实现：是不是非常简单！现在开始具体讲解，如何实现Python发短信功能。操作步骤1、安装模块twiliopipinstalltwilio2、申请获得t
系统 2019-09-27 17:47:21 2174
版本号：Python2.7.5，Python3改动较大，各位另寻教程。所谓网页抓取，就是把URL地址中指定的网络资源从网络流中读取出来，保存到本地。类似于使用程序模拟IE浏览器的功能，把URL作为HTTP请求的内容发送到服务器端，然后读取服务器端的响应资源。在Python中，我们使用urllib2这个组件来抓取网页。urllib2是Python的一个获取URLs(UniformResourceLocators)的组件。它以urlopen函数的形式提供了一个
系统 2019-09-27 17:46:01 2174
准备工作首先是准备工作，导入需要使用的库，读取并创建数据表取名为loandata。importnumpyasnpimportpandasaspdloandata=pd.DataFrame(pd.read_excel('loan_data.xlsx'))设置索引字段在开始提取数据前，先将member_id列设置为索引字段。然后开始提取数据。Loandata=loandata.set_index('member_id')按行提取信息第一步是按行提取数据，例如提
系统 2019-09-27 17:38:42 2174
在Python循环终止语句有三种：1、breakbreak用于退出本层循环示例如下：whileTrue:print"123"breakprint"456"2、continuecontinue为退出本次循环，继续下次循环示例如下:whileTrue:print"123"continueprint"456"3、自定义标记Tag自已定义一个标记为True或False示例代码：Tag=TruewhileTrue:print"123"print"456"Tag=Fa
系统 2019-09-27 17:57:18 2173
ChainMap是Pythoncollections模块中的一个成员，它用来将多个map组合到一起。Chain是链条的意思，字面意思就是把map串联到一起。问题的背景是我们有多个字典或者映射，想把它们合并成为一个单独的映射，有人说可以用update进行合并，这样做的问题就是新建了一个数据结构以致于当我们对原来的字典进行更改的时候不会同步。如果想建立一个同步的查询方法，可以使用ChainMap先看一下初步使用fromcollectionsimportChai
系统 2019-09-27 17:54:00 2173
前言我们在使用python开发的过程中时常听到GIL这个词，并且发现这个词经常和Python无法高效的实现多线程关联在一起，关于python多线程的实现在前面的文章已经介绍过，本文我们主要来了解一下GIL到底是什么？为什么会影响python的多线程。一、什么是GILGIL全称GlobalInterpreterLock，官方给出的解释如下：InCPython,theglobalinterpreterlock,orGIL,isamutexthatprevent
系统 2019-09-27 17:53:19 2173
1.准备阶段滑动验证码我们可以直接用GEETEST的滑动验证码。打开网址：https://www.geetest.com/，找到技术文档中的行为验证，打开部署文档，点击Python，下载ZIP包。ZIP包下载地址：https://github.com/GeeTeam/gt3-python-sdk/archive/master.zip解压，找到django_demo，为了方便复制粘贴代码，可以用编辑器打开项目。2.实施自己先写一个简单的登录，然后将djang
系统 2019-09-27 17:52:24 2173
函数描述int(x[,base])将x转换为一个整数long(x[,base])将x转换为一个长整数float(x)将x转换到一个浮点数complex(real[,imag])创建一个复数str(x)将对象x转换为字符串repr(x)将对象x转换为表达式字符串eval(str)用来计算在字符串中的有效Python表达式,并返回一个对象tuple(s)将序列s转换为一个元组list(s)将序列s转换为一个列表set(s)转换为可变集合dict(d)创建一个字
系统 2019-09-27 17:50:16 2173
转载：https://www.polarxiong.com/archives/Python-os-path-join-产生的斜杠在Windows和Linux下的不同表现和解决方法.html问题描述我一直以为Python是隔离了操作系统的差异，同样的function在不同操作系统下会有一致的结果，直到前几天临时切换到Windows下发现有些Python代码跑不出来，才发现如os.path.join()这样的方法在不同操作系统下的表现是不一致的。例如Pytho
系统 2019-09-27 17:48:07 2173
cx_Freeze（不推荐）以前只用cx_Freeze支持将python3打包成exe，示例如下：在你要打包的python文件下新建这个setup.py文件：然后在当前命令行执行：python3setup.pybuild这时候会在当前目录下生成一个build文件，里面就有一个exe注意：cx_Freeze打包回忽略依赖文件，所有一般依赖文件要手动从site-packge里面拷贝到build文件里面去，特别麻烦！PyInstaller（推荐）后面PyInst
系统 2019-09-27 17:47:53 2173
