在数据分析领域，最热门的莫过于Python和R语言，此前有一篇文章《别老扯什么Hadoop了，你的数据根本不够大》指出：只有在超过5TB数据量的规模下，Hadoop才是一个合理的技术选择。这次拿到近亿条日志数据，千万级数据已经是关系型数据库的查询分析瓶颈，之前使用过Hadoop对大量文本进行分类，这次决定采用Python来处理数据：硬件环境CPU：3.5GHzIntelCorei7内存：32GBHDDR31600MHz硬盘：3TBFusionDrive数据
系统 2019-09-27 17:50:47 2148
一、实现过程终端的字符颜色是用转义序列控制的，是文本模式下的系统显示功能，和具体的语言无关转义序列是以ESC开头,即用\033来完成（ESC的ASCII码用十进制表示是27，用八进制表示就是033）书写格式：开头部分：\033[显示方式;前景色;背景色m+结尾部分：\033[0m注意：开头部分的三个参数：显示方式，前景色，背景色是可选参数，可以只写其中的某一个；另外由于表示三个参数不同含义的数值都是唯一的没有重复的，所以三个参数的书写先后顺序没有固定要求，
系统 2019-09-27 17:50:28 2148
open()方法Pythonopen()方法用于打开一个文件，并返回文件对象，在对文件进行处理过程都需要使用到这个函数，如果该文件无法被打开，会抛出OSError。注意：使用open()方法一定要保证关闭文件对象，即调用close()方法。open()函数常用形式是接收两个参数：文件名(file)和模式(mode)。open(file,mode='r')完整的语法格式为：open(file,mode='r',buffering=-1,encoding=No
系统 2019-09-27 17:49:56 2148
一、and:在Python中，and和or执行布尔逻辑演算，如你所期待的一样，但是它们并不返回布尔值；而是，返回它们实际进行比较的值之一。复制代码代码如下:>>>'a'and'b''b'>>>''and'b'''>>>'a'and'b'and'c''c'在布尔上下文中从左到右演算表达式的值，如果布尔上下文中的所有值都为真，那么and返回最后一个值。如果布尔上下文中的某个值为假，则and返回第一个假值二、or:复制代码代码如下:>>>'a'or'b''a'>
系统 2019-09-27 17:49:41 2148
ccs的优点：css相对xpath语法比xpath简洁，定位速度比xpath快css的缺点：css不支持用逻辑运算符来定位，而xpath支持。css定位语法形式多样，相对xpath比较难记。css定位建议多用，这个定位方式很强大，定位速度快且准确度高。至于难记，用熟了就好了，对勤快的人来说，这不是问题。CSS_selector常用符号：#表示id.表示class>表示子元素，层级1.通过id属性定位：find_element_by_css_selector
系统 2019-09-27 17:49:19 2148
目录Python并发编程04/多线程1.生产消费者模型2.线程的理论知识2.1什么是线程2.2线程vs进程2.3线程的应用3.开启进程的两种方式3.1第一种方式3.2第一种方式4.线程vs进程的代码对比4.1开启速度对比4.2对比pid4.3同一个进程内线程共享内部数据5.线程的其他方法6.join与守护线程6.1join6.2守护线程7.互斥锁Python并发编程04/多线程1.生产消费者模型#编程思想,模型,设计模式,理论等等,都是交给你一种编程的方法
系统 2019-09-27 17:49:07 2148
此套电子书收集于网络，如有侵权请联系删除！！！此套电子书仅用于个人学习，请勿用于商业获利，造成后果自负！！！这套电子书包括：机器学习、深度学习、数据科学入门、神经网络等获取资源地址：链接:https://pan.baidu.com/s/1BuY0qliHtQ86eWuBoErWg提取码:n63r此套电子书保持在线更新，获取最新版本请关注公众号：Python专栏，回复：机器学习电子书
系统 2019-09-27 17:47:48 2148
什么场景下会有main函数？当该python脚本被作为模块(module)引入(import)时，其中的main()函数将不会被执行。main函数的作用？__name__=='__main__'是Python的main函数入口。并非说，加入这句才能使用pythonxxx.py来执行，而是说，这里可以判断，当前是否是直接被python直接调用执行。main为什么只有文件当作执行程序的时候才会被执行呢？这是由于两方面原因，一方面，main函数是所有执行程序的入
系统 2019-09-27 17:47:18 2148
首先还是应该科普下函数参数传递机制，传值和传引用是什么意思？函数参数传递机制问题在本质上是调用函数（过程）和被调用函数（过程）在调用发生时进行通信的方法问题。基本的参数传递机制有两种：值传递和引用传递。值传递（passl-by-value）过程中，被调函数的形式参数作为被调函数的局部变量处理，即在堆栈中开辟了内存空间以存放由主调函数放进来的实参的值，从而成为了实参的一个副本。值传递的特点是被调函数对形式参数的任何操作都是作为局部变量进行，不会影响主调函数的
系统 2019-09-27 17:47:11 2148
rindex()方法返回所在的子str被找到的最后一个索引，可选择限制搜索的字符串string[beg:end]如果没有这样的索引存在，抛出一个异常。语法以下是rindex()方法的语法：str.rindex(str,beg=0end=len(string))参数str--此选项指定要搜索的字符串。beg--这是开始索引，默认情况下为0len--这是最后的索引，默认情况下它等于字符串的长度。返回值此方法如果找到返回最后一个索引，否则如果没有找到str引发一
系统 2019-09-27 17:47:10 2148
