搜索到与相关的文章
Python

python使用pandas处理大数据节省内存技巧(推荐)

一般来说,用pandas处理小于100兆的数据,性能不是问题。当用pandas来处理100兆至几个G的数据时,将会比较耗时,同时会导致程序因内存不足而运行失败。当然,像Spark这类的工具能够胜任处理100G至几个T的大数据集,但要想充分发挥这些工具的优势,通常需要比较贵的硬件设备。而且,这些工具不像pandas那样具有丰富的进行高质量数据清洗、探索和分析的特性。对于中等规模的数据,我们的愿望是尽量让pandas继续发挥其优势,而不是换用其他工具。本文我们

系统 2019-09-27 17:49:29 1590

Python

Python 入门之 软件开发规范

Python入门之软件开发规范1、软件开发规范--分文件(1)为什么使用软件开发规范:当几百行--大几万行代码存在于一个py文件中时存在的问题:不便于管理修改可读性差加载速度慢这时可以使用软件开发规范,规范项目目录结构,规范代码,遵循PEP8规范,能够更加清晰,合理的开发。(2)软件开发规范--约定俗称<1>bin--启动文件(启动接口)start.py项目启动<2>lib--公共文件(大家需要的功能)commom.py放置一些常用的公共组件函数,像是服务

系统 2019-09-27 17:49:27 1590

Python

python3 selenium自动化测试 强大的CSS定位方法

ccs的优点:css相对xpath语法比xpath简洁,定位速度比xpath快css的缺点:css不支持用逻辑运算符来定位,而xpath支持。css定位语法形式多样,相对xpath比较难记。css定位建议多用,这个定位方式很强大,定位速度快且准确度高。至于难记,用熟了就好了,对勤快的人来说,这不是问题。CSS_selector常用符号:#表示id.表示class>表示子元素,层级1.通过id属性定位:find_element_by_css_selector

系统 2019-09-27 17:49:19 1590

Python

Python编程学习之如何判断3个数的大小

前言大部分初学编程的人来说刚开始都会练习判断两个数或者三个数的大小,来熟悉某种语言的特性和最基本的if,else循环,当我们学习了更高级的语法知识后,又会有不同的实现方式,比如这道练习题依次接收用户输入的3个数,排序后打印现在我们来看一下在Python中都有哪些方法来实现:1,采用分支结构,用最基本的if和else来实现:a=int(input('a>>>'))b=int(input('b>>>'))c=int(input('c>>>'))ifa>b:if

系统 2019-09-27 17:49:18 1590

Python

python占位符输入方式实例

占位符,顾名思义就是插在输出里站位的符号。占位符是绝大部分编程语言都存在的语法,而且大部分都是相通的,它是一种非常常用的字符串格式化的方式。1、常用占位符的含义s:获取传入对象的__str__方法的返回值,并将其格式化到指定位置r:获取传入对象的__repr__方法的返回值,并将其格式化到指定位置c:整数:将数字转换成其unicode对应的值,10进制范围为0<=i<=1114111(py27则只支持0-255);字符:将字符添加到指定位置o:将整数转换成

系统 2019-09-27 17:49:18 1590

Python

Python初学者自学----输入输出

自我学习记录:如有问题,请帮助指正,勿喷。输出:用print()在括号中加上字符串,就可以向屏幕上输出指定的文字根据惯例第一个程序:Hello,word,第一理解的应该是print(hello,word)意外发生了这个报错翻译了一下‘标识符中的无效字符’没看懂自我理解就是把字符串加到‘’里面去。看一下效果有输出那对应的肯定有输入了input(),可以让用户输入字符串,并存放到一个变量里。比如输入用户的名字name=input()嗯确实多了输入的窗口,但没有

系统 2019-09-27 17:49:16 1590

Python

Python学习笔记之文件的读写操作实例分析

本文实例讲述了Python文件的读写操作。分享给大家供大家参考,具体如下:读写文件读取文件f=open('my_path/my_file.txt','r')#open方法会返回文件对象file_data=f.read()#通过read方法获取数据f.close()#关闭该文件首先使用内置函数open打开文件。需要文件路径字符串。open函数会返回文件对象,它是一个Python对象,Python通过该对象与文件本身交互。在此示例中,我们将此对象赋值给变量f。

系统 2019-09-27 17:49:16 1590

Python

Python学习笔记—Day04

Python学习第四天之基础知识04:注释:'#'在python之中是注释符号,用于单行注释,注释应该言而又物,应当写一些算法里面比较难懂的地方。字符串:还记得我们之前写的一个实例吗?在第二天的时候,以下是代码重现:x=input("你今年多少岁了?\n")y=input("你叫什么名字?\n")print(y+"今年"+x+"岁了")那么在这个print(y+“今年”+x+“岁了”)里面是不是有点不知道是什么呢?这个叫做字符串的拼接,将两个字符串连接在一

系统 2019-09-27 17:49:08 1590

Python

python+numpy实现的基本矩阵操作示例

本文实例讲述了python+numpy实现的基本矩阵操作。分享给大家供大家参考,具体如下:#!usr/bin/envpython#coding:utf-8#学习numpy中矩阵的代码笔记#2018年05月29日15:43:40#参考网站:http://cs231n.github.io/python-numpy-tutorial/importnumpyasnp#==================矩阵的创建,增删查改,索引,运算===============

系统 2019-09-27 17:49:00 1590

Python

python实现对图片进行旋转,放缩,裁剪的功能

先说明下,我这是对某个目录下的图片名称进行操作,该目录下的图片名称为1.jpg,2.jpg。。。。。这样类似的图片名。1.旋转#-*-coding:utf-8-*-fromPILimportImagedefrotateimg(inputimg,outimg):im=Image.open(inputimg)#图片的宽度和高度img_size=im.sizeprint("图片宽度和高度分别是{}".format(img_size))#旋转图片#左旋转90度im

系统 2019-09-27 17:48:59 1590