背景由于工作性质，经常面对不同的问题，某些场景下SQL+Excel、常用办公软件不能处理，这时到网上找一些案例，自己动手用python处理。后续，借此博客记录比较典型的处理过程。后续，陆续实际处理的问题，如1.合并PDF2.拆分PDF3.敏感字段MD5脱敏4.从非架构化的大文本文件中提取指定条件的记录需求工作和生活中有时会遇到将多个pdf文件，合并成一个大文件的情况。例如，扫描时，普通扫描仪或打印机一页生成一个PDF，而一份资料实际多页。Adobe的收费版
系统 2019-09-27 17:57:30 1886
在工作中遇到一个需求，需要用Python脚本读取一个13G的文件，把每行的记录写入redis。由于机器的内存只有8G，所以不能一次将磁盘上的文件全部读入内存，需要一行一行读取文件。Python按行读取文件主要是使用file.readline方法或者利用file对象的迭代器性质，而file.readlines方法则是一次把所有内容从磁盘读入内存。当内存足够时，file.readlines方法显然会更快，因为磁盘I/O次数更少。下面给出了三种遍历文件每行的方式
系统 2019-09-27 17:56:36 1886
数据库的安装和连接PyMySQL的安装pipinstallPyMySQLpython连接数据库importpymysqldb=pymysql.connect("数据库ip","用户","密码","数据库")#打开数据库连接cursor.execute("SELECTVERSION()")#使用execute()方法执行SQL查询data=cursor.fetchone()#使用fetchone()方法获取单条数据print("Databaseversion
系统 2019-09-27 17:56:03 1886
首先理解Python的函数能像普通的对象一样能作为参数传递给其他函数，可以被赋值给其他变量，可以作为返回值，可以被定义在另外一个函数内。前面的文章已经对闭包做了介绍，再次进行延伸和理解一下装饰器，主要用于不在改变源代码的情况下进行添加功能，装饰器利用闭包来实现，一般和闭包一起使用。装饰器返回一个函数对象，简单理解在原函数功能上又加入新功能并返回一个和原函数名相同的函数对象。deffuncout(func):deffuncIn(x,y):func(x,y)#
系统 2019-09-27 17:55:41 1886
如果需要把大量实验跑完，最好用批量处理操作，直接使用shell写shell文件来操作也行，但是需要学习shell脚本的语法，不如直接用python调用shell，把python如何调用shell学会，就直接在python里边把需要的命令写成字符串，传递给python的调用shell的模块就行了importosos.system('ffmpeg-version')#将在shell中打印出ffmpeg的版本str='ffmpeg-version'os.syst
系统 2019-09-27 17:55:28 1886
一、windows上安装1.安装python分别安装了Python2和Python3python3.7默认安装目录C:\Users\Administrator\AppData\Local\Programs\Python\Python37安装目录里的python.exe,pip.py自定是否修改2.安装virtualenv和virtualenvwrapper-winpip2installvirtualenv2-ihttps://pypi.douban.com
系统 2019-09-27 17:55:05 1886
PIL(PythonImageLibrary)是python的第三方图像处理库，但是由于其强大的功能与众多的使用人数，几乎已经被认为是python官方图像处理库了。其官方主页为:PIL。PIL历史悠久，原来是只支持python2.x的版本的，后来出现了移植到python3的库pillow,pillow号称是friendlyforkforPIL,其功能和PIL差不多，但是支持python3。PIL(PythonImagingLibrary)是Python一个
系统 2019-09-27 17:54:43 1886
总章一.学习前言二.环境搭建三.Python的基本概念一.学习前言很多人在自学Python的时候，总是不知道如何学习，不知道该怎么学，今天看到框架，就想学flask或者其他框架，但是当学的时候又茫然了，不知道怎么学；想学Python，但是又不知道Python就业方向以及前景如何，小编给大家强力推荐一套Python学习方法，只要按照这个方法去学，那么，在和别人同时学习的时候，在同样条件下，你学的效率一定会比别人高。Python相对于其他语言来说，简单了不少，
系统 2019-09-27 17:54:32 1886
每个编程语言中（诸如：Java、C++、C）等都有函数的，Python也不例外函数的主要作用有哪些呢？1、将程序的功能进行模块化，功能模块清晰2、减少重复代码的工作量3、便于阅读及维护、调试等一、函数的结束及返回值#-*-coding:utf-8-*-deff1():print("ThisisFun()")return#函数调用结束print("--End1--")print("Print2")return"---End2--"f1()print(type
系统 2019-09-27 17:54:20 1886
Python面向对象编程——基本语法一、类的语法上一节最后的代码其实有问题，属性名字和年龄都写死了，想传名字传不进去。classPerson(object):def__init__(self,name,age):self.name=nameself.age=agep=Person("Alex",22)print(p.name,p.age)为什么有__init__?为什么有self?此时的你一脸蒙逼，相信不画个图，你的智商是理解不了的！画图之前，你先注释掉这
系统 2019-09-27 17:54:00 1886
