在工作中遇到一个需求，需要用Python脚本读取一个13G的文件，把每行的记录写入redis。由于机器的内存只有8G，所以不能一次将磁盘上的文件全部读入内存，需要一行一行读取文件。Python按行读取文件主要是使用file.readline方法或者利用file对象的迭代器性质，而file.readlines方法则是一次把所有内容从磁盘读入内存。当内存足够时，file.readlines方法显然会更快，因为磁盘I/O次数更少。下面给出了三种遍历文件每行的方式
系统 2019-09-27 17:56:36 2280
生成器在Python中，使用了yield的函数被称为生成器（generator）。生成器是一个返回迭代器的函数，只能用于迭代操作，更简单点理解生成器就是一个迭代器。在调用生成器运行的过程中，每次遇到yield时函数会暂停并保存当前所有的运行信息，返回yield的值,并在下一次执行next()方法时从当前位置继续运行。调用一个生成器函数，返回的是一个迭代器对象。列表推导式空间开销大占用内存耗时大,.生成器保存的是算法，而列表保存的计算后的内容，所以同样内容的
系统 2019-09-27 17:56:08 2280
2019-09-15-15:40:24今天没有学知识,是一个一周总结,把这一周学的知识总结一遍,然后把做过的练习题再做一遍看是否还会有再出现同样的错误,而且还可以知道有哪些知识点没有掌握好,可以把它再进行巩固一遍做了一遍没有发现有很大的错误,只是很多知识点有印象,但不深刻,还得巩固.======我======是======一======条======快======乐======分======割======线======,OneWeek_Summarize.
系统 2019-09-27 17:56:05 2280
本章包括：1、了解卷积神经网络（convnets）2、使用数据增强来减轻过度拟合3、使用预训练的convnet进行特征提取4、微调预训练的信号5、可视化回馈学习的内容以及他们如何做出分类决策一、引言一个简单的convnet示例。第二章中的密接网络的测试精度为97.8%，而convnet的测试精度为99.3%：我们将错误率降低了68%（相对）。为什么这个简单的convnet比一个紧密连接的模型工作得那么好呢？为了回答这个问题，让我们深入研究conv2d和ma
系统 2019-09-27 17:55:54 2280
整理Python中常用的函数一，把字符串形式的list转换为list使用ast模块中的literal_eval函数来实现，把字符串形式的list转换为Python的基础类型listfromastimportliteral_evalstr_list="[1838,13735,8285,35386]"mylist=literal_eval(str_list)type(mylist)二，filterfilter()函数用于过滤序列，过滤掉不符合条件的元素，返回由
系统 2019-09-27 17:55:48 2280
字符串索引示意图字符串切片也就是截取字符串，取子串Python中字符串切片方法字符串[开始索引：结束索引：步长]切取字符串为开始索引到结束索引-1内的字符串步长不指定时步长为1字符串[开始索引:结束索引]练习样例#1.截取2-5位置的字符num_str_1=num_str[2:6]print(num_str_1)#2.截取2-末尾的字符#当开始索引和结束索引为开始和结束时可以省略不写num_str_1=num_str[2:]print(num_str_1)
系统 2019-09-27 17:55:42 2280
pythonredis之连接池的原理转载地址什么是连接池通常情况下,当我们需要做redis操作时,会创建一个连接,并基于这个连接进行redis操作,操作完成后,释放连接,一般情况下,这是没问题的,但当并发量比较高的时候,频繁的连接创建和释放对性能会有较高的影响于是,连接池就发挥作用了连接池的原理是,通过预先创建多个连接,当进行redis操作时,直接获取已经创建的连接进行操作,而且操作完成后,不会释放,用于后续的其他redis操作这样就达到了避免频繁的red
系统 2019-09-27 17:55:12 2280
字典是键/值对构成的集合，字典通过大括号来创建，字典的键是字符串，而值可以是任何数据对象。字典有两个重要的特征：字典是无序的，字典项没有特定的顺序，只能通过键来获取值；字典是可变的，支持原处修改键的值；字典是作为散列表来实现的，可增长，搜索非常快速；和列表一样，字典存储的是对象的引用，不是拷贝。创建字典创建空的字典：>>>d={}创建包含两个项目的字典：>>>d={'name':'vic','age':28}创建包含嵌套类型的字典：>>>d={'stude
系统 2019-09-27 17:52:13 2280
Python真的是无所不能，原因就是因为Python有数目庞大的库，无数的现成的轮子，让你做很多很多应用都非常方便。wifi跟我们的生活息息相关，无处不在。今天从WiFi连接的原理，再结合代码为大家详细的出一期关于Python破译wifi密码的Python学习教程！01.如何连接wifi首先我们的电脑是如何连接wifi的呢？就拿我们的笔记本电脑来说，我们的笔记本电脑都有无线网卡，如下图所示：当我们连接WiFi时，无线网卡会自动帮助我们扫描附近的WiFi信号
系统 2019-09-27 17:51:24 2280
Python入门之内置模块--logging模块1、logging--日志（1）日志的作用：<1>记录用户信息<2>记录个人流水<3>记录软件的运行状态<4>记录程序员发出的指令<5>用于程序员代码调试（2）日志的函数式简单配置：logging.debug()#debug调试10logging.info()#info信息20logging.warning()#warning警告30logging.error()#error错误40logging.criti
系统 2019-09-27 17:51:02 2280
