一、计算机结构五大部件：输入设备、输出设备、存储器、运算器、控制器二、cpu、硬盘、内存三者之间的关系cpu：是计算机运算核心和控制中心，让电脑的各个部件顺利工作，起到协调和控制作用硬盘：存储资料和软件等数据设备，有容量大，断电数据不丢失的特点，也被人们称之为“数据仓库”内存：a、负责硬盘等硬件上的数据与cpu之间的数据交换处理。b、缓存系统中的临时数据。c、断电后数据丢失三、变量的命名规则：1、要具有描述性2、变量名只能_、数字、字母组成，不能有空格或特
系统 2019-09-27 17:51:18 1875
函数：split()Python中有split()和os.path.split()两个函数，具体作用如下：split()：拆分字符串。通过指定分隔符对字符串进行切片，并返回分割后的字符串列表（list）os.path.split()：按照路径将文件名和路径分割开一、函数说明1、split()函数语法：str.split(str="",num=string.count(str))[n]参数说明：str：表示为分隔符，默认为空格，但是不能为空('')。若字符串
系统 2019-09-27 17:50:49 1875
作为近两年来最火的编程语言的python,受到广大程序员的追捧必然是有其原因的，如果要挑出几点来讲的话，第一条那就python语法简洁，易上手，第二条呢?便是python有着极其丰富的第三方的库。所以不管你使用的关系型数据库是oracle，mysql,sqlserver,还是关系型数据库redis,mongoDB。python都有有与之对应的第三方库。下面就来为大家一一介绍一下!Mysql我们先来看看如何对接mysql数据库，python2和python3
系统 2019-09-27 17:50:46 1875
JSON(JavaScriptObjectNotation)是一种轻量级的数据交换格式，它基于ECMAScript的一个子集。JSON采用完全独立于语言的文本格式，这些特性使JSON成为理想的数据交换格式，易于人阅读和编写，同时也易于机器解析和生成，在接口数据开发和传输中非常常用。Python3中我们利用内置模块json解码和编码JSON对象。json模块提供了四个功能：dumps、dump、loads、loaddumps把数据类型转换成字符串dump把数
系统 2019-09-27 17:50:16 1875
前言一个业务型的服务，被open接口后，遭遇并发扫数据，于是要做限流操作。一直固执的认为，业务API和OpenAPI要分开处理，或许因为起初接入其他企业ERP系统都是走较为规范的OpenAPI，始终对于这种开发系统业务API的做法感觉不好。窗口限流需求是要在Django的一个工程里做限流，倘若是rest_framework的View也好办，直接就提供了限流rest_frameworkthrottling可参照文档设置。不能直接使用设置的原因是，面对是Dja
系统 2019-09-27 17:49:39 1875
SOAP.py客户机和服务器SOAP.py包含的是一些基本的东西。没有Web服务描述语言（WebServicesDescriptionLanguage，WSDL）或者任何其它附加的东西，只有用Python实现的SOAP客户机和服务器的透明支持。甚至这个包中的一个很好的功能也只是与基础架构相关：SOAP.py支持安全套接字层（SSL）用于加密的SOAP传输。为使用这个功能，您必须安装M2Crypto，M2Crypto是一个库，包含各种加密工具和格式，从RSA
系统 2019-09-27 17:49:38 1875
Python重试模块retrying工作中经常碰到的问题就是，某个方法出现了异常，重试几次。循环重复一个方法是很常见的。比如爬虫中的获取代理，对获取失败的情况进行重试。刚开始搜的几个博客讲的有点问题，建议看官方文档，还有自己动手实验。参考：https://segmentfault.com/a/1190000004085023https://pypi.org/project/retrying/最初的版本importrequestsclassProxyUtil
系统 2019-09-27 17:49:24 1875
【摘要】本节中，我们看一下正则表达式的相关用法。正则表达式是处理字符串的强大工具，它有自己特定的语法结构，有了它，实现字符串的检索、替换、匹配验证都不在话下。当然，对于爬虫来说，有了它，从HTML里提取想要的信息就非常方便了。1.实例引入说了这么多，可能我们对它到底是个什么还是比较模糊，下面就用几个实例来看一下正则表达式的用法。打开开源中国提供的正则表达式测试工具http://tool.oschina.net/regex/，输入待匹配的文本，然后选择常用的
系统 2019-09-27 17:48:57 1875
最近，我加入了Cloudera，在这之前，我在计算生物学/基因组学上已经工作了差不多10年。我的分析工作主要是利用Python语言和它很棒的科学计算栈来进行的。但ApacheHadoop的生态系统大部分都是用Java来实现的，也是为Java准备的，这让我很恼火。所以，我的头等大事变成了寻找一些Python可以用的Hadoop框架。在这篇文章里，我会把我个人对这些框架的一些无关科学的看法写下来，这些框架包括:Hadoop流mrjobdumbohadoopyp
系统 2019-09-27 17:48:52 1875
前言R:代表redis-cliP:代表python的redis准备pipinstallredispool=redis.ConnectionPool(host='39.107.86.223',port=6379,db=1)redis=redis.Redis(connection_pool=pool)redis.所有命令下面命令所有命令我都省略了，有和Python内置函数冲突的我会加上redis.全局命令dbsize（返回key的数量）R:dbsizeP:pr
系统 2019-09-27 17:48:51 1875
