- 军军小站|张军博客
搜索到与相关的文章
Python

在Python中利用Pandas库处理大数据的简单介绍

在数据分析领域,最热门的莫过于Python和R语言,此前有一篇文章《别老扯什么Hadoop了,你的数据根本不够大》指出:只有在超过5TB数据量的规模下,Hadoop才是一个合理的技术选择。这次拿到近亿条日志数据,千万级数据已经是关系型数据库的查询分析瓶颈,之前使用过Hadoop对大量文本进行分类,这次决定采用Python来处理数据:硬件环境CPU:3.5GHzIntelCorei7内存:32GBHDDR31600MHz硬盘:3TBFusionDrive数据

系统 2019-09-27 17:50:47 1942

Python

在windows下使用python进行串口通讯的方法

Windows版本下的python并没有内置串口通讯的pyserial的库,所以需要自己下载。参照了网上的教程,有许多用的pip的安装方式,但是试了几个都没有用,所以想到用GitHub下载库文件,步骤分为:1.在Github下载python-serial的库https://github.com/pyserial/pyserial2.下载完成后解压压缩包,找到serial文件夹,并找到python的安装位置(右击IDLE,然后查看python安装位置)。我的

系统 2019-09-27 17:50:24 1942

Python

Python实现Linux监控的方法

工作原理:基于/proc文件系统Linux系统为管理员提供了非常好的方法,使其可以在系统运行时更改内核,而不需要重新引导内核系统,这是通过/proc虚拟文件系统实现的。/proc文件虚拟系统是一种内核和内核模块用来向进程(process)发送信息的机制(所以叫做“/proc”),这个伪文件系统允许与内核内部数据结构交互,获取有关进程的有用信息,在运行中(onthefly)改变设置(通过改变内核参数)。与其他文件系统不同,/proc存在于内存而不是硬盘中。p

系统 2019-09-27 17:49:23 1942

Python

第11.22节 Python 中re模块的字符串分割器:split函数

一、引言在《第11.2节Python正则表达式支持函数概览》介绍了re模块的主要函数,在《第11.3节Python正则表达式搜索支持函数search、match、fullmatch、findall、finditer》重点介绍了几个搜索函数,后续章节将介绍re模块的其他函数,本节先介绍re.split函数的功能。二、语法释义调用语法:re.split(pattern,string,maxsplit=0,flags=0)参数及返回结果释义:1)这个函数的功能与

系统 2019-09-27 17:49:14 1942

Python

[leetcode刷题python] 求众数

给定一个大小为n的数组,找到其中的众数。众数是指在数组中出现次数大于⌊n/2⌋的元素。你可以假设数组是非空的,并且给定的数组总是存在众数。示例1:输入:[3,2,3]输出:3示例2:输入:[2,2,1,1,1,2,2]输出:2解法一:满足题干要求的众数若存在,则仅可能存在一个用dict来存储每个数字出现的次数根据出现次数排序判断出现次数最多的元素,其出现次数是否超过len/2+1python代码:classSolution(object):defmajor

系统 2019-09-27 17:49:06 1942

Python

python多协程爬虫示例

写python协程时使用gevent模块和queue模块可以大大提高爬虫速度。在同时爬取多个网站时,原来用for循环一个网站一个网站按循序顺序爬,就像先烧饭后烧菜,两个步骤异步进行。使用多协程可以让爬虫自己选择爬取顺序,就像边烧饭边烧菜,两个步骤同步进行,速度自然快了。不多说了,来看下代码吧:fromgeventimportmonkeymonkey.patch_all()#打上多协程布丁,下面的程序就可以执行多协程了importrequests,geven

系统 2019-09-27 17:47:59 1942

Python

关于Python中的向量相加和numpy中的向量相加效率对比

直接使用Python来实现向量的相加#-*-coding:utf-8-*-#向量相加defpythonsum(n):a=range(n)b=range(n)c=[]foriinrange(len(a)):a[i]=i**2b[i]=i**3c.append(a[i]+b[i])returna,b,cprintpythonsum(4),type(pythonsum(4))forarginpythonsum(4):printarg从这里这个输出结果可以看得出来

系统 2019-09-27 17:47:36 1942

Python

一个计算身份证号码校验位的Python小程序

S=Sum(Ai*Wi),i=0,.......16(现在的身份证号码都是18位长,其中最后一位是校验位,15位的身份证号码好像不用了)Ai对应身份证号码,Wi则为用于加权计算的值,它一串固定的数值,应该是根据某种规则得出的吧,用于取得最好的随机性,Wi的取之如下:7910584216379105842经过加权计算之后,得到一个S,用这个S去模11,取余值,然后查表得到校验位,这个索引表如下:0-----11-----02-----x3-----94---

系统 2019-09-27 17:46:48 1942

Python

python实现SMTP邮件发送功能

一直想着给框架添加邮件发送功能、所以整理下python下邮件发送功能首先python是支持邮件的发送、内置smtp库、支持发送纯文本、HTML及添加附件的邮件。之后是邮箱、像163、qq、新浪等邮箱默认关闭SMTP服务,需要我们手动打开,打开后通过发件人邮箱、授权密码通过发件人的SMTP服务发送代码如下:#!/usr/bin/envpython#-*-coding:utf_8-*-fromemail.mime.textimportMIMETextfrome

系统 2019-09-27 17:38:43 1942

编程技术

LAMP安装全攻略

1、获取软件包httpd-2.2.4.tar.gzmysql-6.0.0-alpha.tar.gzphp-5.2.2.tar.gz去相应的官方网站都可以下载到,把它们全部放到/usr/local/src下面.2、安装mysql这三个软件包的安装应该没有先后顺序,但我还是习惯先安装mysql:>tar-zxvfmysql-6.0.0-alpha.tar.gz>cdmysql-6.0.0-alpha>./configure--prefix=/usr/local

系统 2019-08-29 23:46:15 1942