今天接到一个新的任务,要对一个140多M的csv文件进行数据处理,总共有170多万行,尝试了导入本地的MySQL数据库进行查询,结果用Navicat导入直接卡死....估计是XAMPP套装里面全默认配置的MySQL性能不给力,又尝试用R搞一下吧结果发现光加载csv文件就要3分钟左右的时间,相当不给力啊,翻了翻万能的知乎发现了Python下的一个神器包:Pandas(熊猫们?),加载这个140多M的csv文件两秒钟就搞定,后面的分类汇总等操作也都是秒开,太牛
系统 2019-09-27 17:52:33 1961
MongoDB是目前最流行的NoSQL数据库之一，使用的数据类型BSON（类似JSON）。1.安装Mongodb和pymongoMongodb的安装和配置Mongodb的安装教程请网上搜索,安装完成后,进行以下配置过程:1.1创建目录,该目录为Mongodb数据文件的存放目录:*注:本人使用的不是root用户,所以修改目录的拥有者.*sudomkdir/datasudochown-Rpython:python/datamkdir/data/db1.2分别执
系统 2019-09-27 17:52:16 1961
目录一、执行Python程序的两种方式1.1交互式1.2命令行式二、变量2.1什么是变量2.2如何定义变量2.3变量的组成2.4变量名的规范2.5变量名的两种命名风格三、常量四、Python变量内存管理4.1引用计数4.2垃圾回收机制4.3小整数池五、花式赋值5.1链式赋值5.2交叉赋值六、注释6.1单行注释6.2多行注释七、数据类型基础7.1为什么要有数据类型八、解压缩九、Python与用户交互十、Python格式化输出的三种方式10.1占位符%10.2
系统 2019-09-27 17:51:57 1961
1.random.random()random.random()方法返回一个随机数，其在0至1的范围之内，以下是其具体用法：importrandomprint("随机数:",random.random())输出结果：0.228675212571162.random.uniform()random.uniform()是在指定范围内生成随机数，其有两个参数，一个是范围上限，一个是范围下线，具体用法如下：importrandomprint(random.unif
系统 2019-09-27 17:51:23 1961
算数运算符：+#加：两个对象相加-#减：得到负数或是一个数减去另一个数*#乘：两个数相乘或是返回一个被重复若干次的字符串/#除：x/y，x除以y%#取模：返回除法的余数**#幂：x**y，返回x的y次幂//#取整除：返回商的整数部分（向下取整）比较运算符：==#判断两个对象是否相等!=#判断两个对象是否不相等<>#判断两个对象是否不相等，py2可用，py3不可用<#判断是否小于<=#判断是否小于等于>#判断是否大于>=#判断是否大于等于逻辑运算符：与and
系统 2019-09-27 17:51:05 1961
简介你好，当你打开这个文档的时候，我知道，你想要的是什么！Python爬虫，如何快速的学会Python爬虫，是你最期待的事情，可是这个事情应该没有想象中的那么容易，况且你的编程底子还不一定好，这套课程，没有你想要的Python基础，没有变量，循环，数组等基础知识，因为我不想在那些你可以直接快速学会的地方，去浪费你的时间。好了，这套课程是基于Python3.0以上写的，操作系统我使用的是CentOS7+所以里面的好多内容可能和你的不一样，当然也会导致许多问题
系统 2019-09-27 17:50:42 1961
python&djangologging小结[TOC]python基本一次配置,多处生效importlogginglogging.basicConfig(format='%(asctime)s%(message)s',datefmt='%m/%d/%Y%I:%M:%S%p')logging.warning('iswhenthiseventwaslogged.')>>>12/12/201011:46:36AMiswhenthiseventwaslogged.
系统 2019-09-27 17:50:19 1961
看懂巴菲特推荐的指数基金定投，Python验证看懂巴菲特推荐的指数基金定投，Python验证超越股神，你这辈子是不可能了的啦，但是超越身边的普通人，那是足够了，只要你坚持定投，坚持定投正确的标的，直到成功为止，建立好市场的心里站，不要在股市中浮浮沉沉。我在大学期间，我就开始学习理财投资，直到我出大学毕业，踏入社会，我领到第一份工资，我觉得我要开始寻找我的定投标的了，我可以推荐你一款非常好用的股票软件，同花顺，这是我当初学习股票得来的。最近身边的朋友都陆续走
系统 2019-09-27 17:50:08 1961
原文链接：https://my.oschina.net/xiaocon/blog/199414finally关键字的意思是只要异常，到最后都会执行语句块。。。#!/usr/bin/pythonimporttimetry:f=file('poem.txt')whileTrue:line=f.readline()iflen(line)==0:breaktime.sleep(2)printline,finally:f.close()print'file.clos
系统 2019-09-27 17:49:21 1961
python基础学习笔记（十）2013-05-0800:30虫师阅读(...)评论(...)编辑收藏魔法方法、属性------------------------准备工作为了确保类是新型类，应该把_metaclass_=type入到你的模块的最开始。classNewType(Object):mor_code_hereclassOldType:mor_code_here在这个两个类中NewType是新类，OldType是属于旧类，如果前面加上_metacla
系统 2019-09-27 17:48:53 1961
