前言上项目的时候，遇见一次需求，需要把在线的其中一个collection里面的数据迁移到另外一个collection下，于是就百度了看到好多文章，其中大部分都是使用导入的方法，没有找到在线数据的迁移方法。于是写了python脚本，分享出来。思路：collection数据量比较大，所以一次性操作所有数据太大，于是分段执行操作。先分段按1000条数据量进行查询，处理成json数据把处理后的json数据发送到目的collection上即可实现:一、使用http的
系统 2019-09-27 17:52:33 1970
程序说明：本程序实现将开发程序服务器中的打包文件通过该脚本上传到正式生产环境（注：生产环境和开发环境不互通）程序基本思路：将开发环境中的程序包拷贝到本地堡垒机将程序包进行解压获得解压后的文件通同步到生产服务器上主要知识点：python库os.system()的基本使用利用python调用xshell命令程序使用方法：pythonaddline.py开发主机ip程序包目标主机ip上传目录上传编号如：pythonaddline.py240/home/shaoj
系统 2019-09-27 17:52:05 1970
黑客泛指擅长IT技术的人群，简单地说，是对计算机系统和网络的缺陷和漏洞的发现进行攻击。他们有着高超的技术能力，同时身怀多种编程语言，随随便便就能攻击别的网站，进行活动。在黑客中，最受喜欢的就是Python语言。有资料显示，目前GitHub代码库中，有超过20%的网络攻击工具或PoC（概念验证）代码都是采用Python编写的，这表明Python是黑客开发网络攻击工具时的首选。作为一门编程语言，Python在信息安全领域拥有极大的优势，其中很重要的一个原因就是
系统 2019-09-27 17:51:31 1970
注释PIL是python的一个图像处理库，功能非常强大，可以实现图片的格式转换、旋转、裁剪、改变尺寸、像素处理、图片合并等等操作。PIL已经更名为pillow所以在终端输入pip3installpil会报错，而应该输入pip3installpillow进行安装。源码fromPILimportImagedefImage_PreProcessing():#待处理图片存储路径im=Image.open('UnprocessImage.jpeg')#Resize图
系统 2019-09-27 17:50:56 1970
今天我们来到了循环队列这一节，之前的文章中，我介绍过了用python自带的列表来实现队列，这是最简单的实现方法。但是，我们都知道，在列表中删除第一个元素和删除最后一个元素花费的时间代价是不一样的，删除列表的第一个元素，那么在它之后的所有元素都要进行移动。所以当列表特别长的时候，这个代价就比较明显了。我们本文介绍的循环队列可以避免这个问题，同样我们上篇文章提到的用链表实现的方法也可以避免。下面，我们来介绍循环队列。循坏队列循环队列，就是将普通的队列首尾连接起
系统 2019-09-27 17:50:25 1970
前言一个偶然的机会来到博客园，看到了vamei的博文，瞬间被大神言简意赅，深入浅出的Python快速课程所吸引，开始了一步一步的学习编程之路。同时也惊闻大神因抑郁症去世，真是天妒英才，感慨万千。有兴趣的可以看看大神生前的文章。https://www.cnblogs.com/vamei/archive/2012/09/13/2682778.html第一课Python的优缺点以及干什么用的，想必大家都很了解。主要有：简单易学，功能强大，可移植性强等，是人工智能
系统 2019-09-27 17:49:55 1970
最近越发感觉到限制我对Python运用、以及读懂别人代码的地方，大多是在于对数据的处理能力。其实编程本质上就是数据处理，怎么把文本数据、图像数据，通过python读入、切分等，变成一个N维矩阵，然后再带入别人的模型，bingo~跑出来一个结果。结果当然也是一个矩阵或向量的形式。所以说，之所以对很多模型、代码束手无策，其实还是没有掌握好数据处理的“屠龙宝刀”，无法对海量数据进行“庖丁解牛”般的处理。因此，我想以一个别人代码中的一段为例，仔细琢磨文本数据处理的
系统 2019-09-27 17:49:36 1970
01-初心缘由最近在研究语音识别方向，看了很多的语音识别的资料和文章，了解了一下语音识别的前世今生，其中包含了很多算法的演变，目前来说最流行的语音识别算法主要是依赖于深度学习的神经网络算法，其中RNN扮演了非常重要的作用，深度学习的应用真正让语音识别达到了商用级别。然后我想动手自己做一个语音识别系统，从GitHub上下载了两个流行的开源项目MASR和ASRT来进行复现，发现语音识别的效果没有写的那么好，其中如果要从零来训练自己的语言模型势必会非常耗时。因此
系统 2019-09-27 17:49:34 1970
很多初学者会使用windows作为开发机使用，今天就来看下如何在win10和Linux下分别安装Python虚机环境。虚机环境有非常多的优点，今天我们用的虚拟环境是virtualenv。virtualenv用于创建独立的Python环境，多个Python相互独立，互不影响，它能够：1.在没有权限的情况下安装新套件2.不同应用可以使用不同的套件版本3.套件升级不影响其他应用win10下安装1.打开cmd安装虚拟环境包pipinstallvirtualenvw
系统 2019-09-27 17:49:26 1970
如题，后续继续优化importcsv#构建表头headers=["id","user_name","age","country"]#内容列表rows=[("001","dana",18,"china"),("002","tom",22,"arimecan"),("003","jack",45,"hk")]#新建csv文档，默认是自动换行的，所以要newline=""withopen("csv01.csv","w",newline='')asf:f_csv=
系统 2019-09-27 17:49:07 1970
