搜索到与相关的文章
Python

Python按行读取大文件

在工作中遇到一个需求,需要用Python脚本读取一个13G的文件,把每行的记录写入redis。由于机器的内存只有8G,所以不能一次将磁盘上的文件全部读入内存,需要一行一行读取文件。Python按行读取文件主要是使用file.readline方法或者利用file对象的迭代器性质,而file.readlines方法则是一次把所有内容从磁盘读入内存。当内存足够时,file.readlines方法显然会更快,因为磁盘I/O次数更少。下面给出了三种遍历文件每行的方式

系统 2019-09-27 17:56:36 2308

Python

糟了,上网记录被Python扒下来了!

来源|高级农民工(ID:Mocun6)责编|胡巍巍长时间使用浏览器会积累大量浏览器历史记录,这些是很隐私的数据,里面甚至可能有一些不可描述的网站或者搜索记录不想让别人知道。不过,我们自己可能会感兴趣,天天都在上网,想知道长期下来是都在摸鱼还是有认真工作。其次,了解下自己每天打开多少次网页、哪些网站上的最多、常搜哪些关键词,这些也很有趣。下面就来给大家介绍一款Python编写的神工具,可以一键分析你的上网行为。我用了后发现了很多不可思议的结论。比如访问次数最

系统 2019-09-27 17:56:03 2308

Python

Python学习之asyncore模块用法实例教程

本文以实例分析了Python中asyncore模块的原理及用法,分享给大家供大家参考。具体分析如下:asyncore库是python的一个标准库,它是一个异步socket的包装。我们操作网络的时候可以直接使用socket等底层的库,但是asyncore使得我们可以更加方便的操作网络,避免直接使用socket,select,poll等工具时需要面对的复杂。这个库很简单,包含了一个函数和一个类*loop()函数*dispatcher基类需要注意的是,loop函

系统 2019-09-27 17:55:57 2308

Python

Python之流程控制——if...else...

Python之流程控制——if...else...一、流程控制假如把程序比做走路,那我们到现在为止,一直走的都是直路,还没遇到过分岔口。当遇到分岔口时,你得判断哪条岔路是你要走的路,如果我们想让程序也能处理这样的判断,该怎么办?很简单,只需要在程序里预设一些条件判断语句,满足哪个条件就走哪条岔路,这个过程就叫流程控制。几乎在每个编程语言中,都会有if...else...,可分为单分支,双分支,多分支。二、单分支if条件:满足条件后要执行的代码三、双分支if

系统 2019-09-27 17:55:08 2308

Python

python3 基础

目录基础特性数据结构/常用函数函数类装饰器文件异常模块常用模块基础特性●首部添加#!/usr/bin/envpython3表示这是一个python3程序●变量为动态类型,弱类型语言的主要特性之一,要声明变量直接变量名=xx即可,如x=777●语句之后没有分号;作为结束,取而代之的是每行首部的缩进进行标识●运算符号中**代表^即指数,#为//,即注释,"""..."""为文档字符串,即/**...*/●默认数值类型为浮点型●基本类型函数;int(变量),fl

系统 2019-09-27 17:54:49 2308

Python

Python的包package的导入与被导入(包的类和方法的导入

包package的导入与被导入:参考一下:https://blog.csdn.net/guowujun321/article/details/807644681.文件目录:||--A/||__init__.py||A1.py||B/||__init__.py||B1.py||测试A.py问题1:在平行目录下的测试A.py想要导入A包时,需要在测试A.py中写:fromAimport*然后可以直接调用A包中的方法或者类(不需要写包名)或者importAA.a

系统 2019-09-27 17:54:36 2308

Python

python端口扫描系统实现方法

本文实例讲述了python端口扫描系统实现方法。分享给大家供大家参考。具体实现方法如下:该程序的主要功能如下:1.从自有API接口获取所有的外网IP段;2.用Nmap遍历扫描所有的IP段,-oX生成XML的扫描报告;3.用xml.etree.ElementTree模块方法读取XML文件,将ip,开放端口,对应服务等写入Mysql数据库。功能很简单,没有满足老大高大上的需求,所以这个小项目就这么英勇的挂掉了!~~~完全都还没考虑程序异常终止,扫描服务器异常歇

系统 2019-09-27 17:54:20 2308

Python

Python 缓存机制与 functools.lru_cache

原文链接:https://kuanghy.github.io/2016/04/20/python-cache缓存是一种将定量数据加以保存以备迎合后续请求的处理方式,旨在加快数据的检索速度。在Python的3.2版本中,引入了一个非常优雅的缓存机器,即functool模块中的lru_cache装饰器。lru_cache原型如下:@functools.lru_cache(maxsize=None,typed=False)使用functools模块的lur_ca

系统 2019-09-27 17:53:45 2308

Python

Python 爬虫面试题 170 道

最近在刷面试题,所以需要看大量的Python相关的面试题,从大量的题目中总结了很多的知识,同时也对一些题目进行拓展了,但是在看了网上的大部分面试题都有这几个问题:有些部分还是Python2的代码回答的很简单,关键的题目没有点出为什么还有一些复制粘贴根本就跑不通这种相信大家深有体会吧,这样就导致我们可能需要去找其他人发出来的教程。所以我决定针对市面上大多的Python题目做一个分析,同时也希望大家尽可能的做到举一反三,而不是局限于题目本身。通过本场我分享的这

系统 2019-09-27 17:52:53 2308

Python

Python学习:操作列表

创建数值列表列表非常适合用于存储数字集合,而Python提供了很多工具,可帮助你高效地处理数字列表。明白如何有效地使用这些工具后,即便列表包含数百万个元素,你编写的代码也能运行得很好。使用函数range()数range()让你能够轻松地生成一系列的数字。forvalueinrange(1,5):print(value)输出:1234在这个示例中,range()只是打印数字1~4,这是你在编程语言中经常看到的差一行为的结果。函数range()让Python从

系统 2019-09-27 17:52:44 2308