我们直接用Requests、Selenium等库写爬虫，如果爬取量不是太大，速度要求不高，是完全可以满足需求的。但是写多了会发现其内部许多代码和组件是可以复用的，如果我们把这些组件抽离出来，将各个功能模块化，就慢慢会形成一个框架雏形，久而久之，爬虫框架就诞生了。利用框架我们可以不用再去关心某些功能的具体实现，只需要去关心爬取逻辑即可。有了它们，可以大大简化代码量，而且架构也会变得清晰，爬取效率也会高许多。所以如果对爬虫有一定基础，上手框架是一种好的选择。本
系统 2019-09-27 17:53:32 2263
1、django+python27+mysql的生产环境，想换成python3，请问需要哪些注意事项？生产环境数据不想被破坏，所以不敢轻易下手，希望大神指点一下？关于python升级：可以使用Python3自带工具2to3，将python2的代码转换为python3。少部分代码仍需手工转换。升级python版本后，第三方包的版本需要升级。有的第三方包不支持python3。这个时候可以尝试使用2to3工具对第三包的python源代码进行转换，然后使用。这样存
系统 2019-09-27 17:53:03 2263
通过使用turtle绘画象棋棋盘，供大家参考，具体内容如下#绘制象棋棋盘importturtlet=turtle.Pen()t.width(2)#设置画笔粗细t.speed(1)#设置画笔移动速度#画竖线t.penup()t.goto(-400,-400)foriinrange(9):t.pendown()ifi!=0andi!=8:t.goto(-400+i*100,0)t.penup()t.goto(-400+i*100,100)t.pendown()
系统 2019-09-27 17:51:32 2263
这个问题是如何在一些场景下使用断言表达式，通常会有人误用它，所以我决定写一篇文章来说明何时使用断言，什么时候不用。为那些还不清楚它的人，Python的assert是用来检查一个条件，如果它为真，就不做任何事。如果它为假，则会抛出AssertError并且包含错误信息。例如：py>x=23py>assertx>0,"xisnotzeroornegative"py>assertx%2==0,"xisnotanevennumber"Traceback(mostr
系统 2019-09-27 17:51:11 2263
image前言学过Python数据分析的朋友都知道，在可视化的工具中，有很多优秀的三方库，比如matplotlib，seaborn，plotly，Boken，pyecharts等等。这些可视化库都有自己的特点，在实际应用中也广为大家使用。plotly、Boken等都是交互式的可视化工具，结合Jupyternotebook可以非常灵活方便地展现分析后的结果。虽然做出的效果非常的炫酷，比如plotly，但是每一次都需要写很长的代码，一是麻烦，二是不便于维护。我
系统 2019-09-27 17:51:05 2263
Python数据类型转换有时候，我们需要对数据内置的内心进行转换，数据类型的转换，你只需要将数据类型作为函数名即可。以下几个内置的函数可以执行数据类型之间的转换，这些函数返回一个新的对象，表示转换的值。函数描述int(x[,base])将x转换为一个整数float(x)将x转换到一个浮点数complex(real[,imag])创建一个复数str(x)将对象x转换位字符串repr(x)将对象x转换位表达式字符串eval(str)用来计算在字符串中的有效Py
系统 2019-09-27 17:50:09 2263
目录1.单表查询2.多表查询1.单表查询单表查询语法：selectdistinct字段1,字段2...from表名where条件groupbyfieldhaving筛选orderbyfieldlimit限制条数关键字执行的优先级:fromwheregroupbyselectdistincthavingorderbylimit1.1简单查询1.select语句：select*from表；select字段,字段..from表；selectdistinct字段,
系统 2019-09-27 17:49:27 2263
本文从参考了网络上的许多内容，主要为分布式进程及其的评论内容。所谓分布式运算，既可以指在同一台机器上利用多进程（线程）进行运算，又可以指将计算任务进行分解，利用多台机器进行运算。本文中的分布式单指最后一种。python的标准库multiprocessing中存在一个managers的子模块，该模块支持将多进程分布到多台机器上。选择一个进程来调度任务，其他进程进行计算，从而实现分布式运算。而调度进程和计算进程之间的通信，是通过网络来进行的，用到了python
系统 2019-09-27 17:49:22 2263
复制代码代码如下:#!/usr/bin/envpython#-*-coding:utf-8-*-importos,base64icon=open('ya.png','rb')iconData=icon.read()iconData=base64.b64encode(iconData)LIMIT=60liIcon=[]whileTrue:sLimit=iconData[:LIMIT]iconData=iconData[LIMIT:]liIcon.append
系统 2019-09-27 17:48:33 2263
变量命名在《初识永远强大的函数》一文中，有一节专门讨论“取名字的学问”，就是有关变量名称的问题，本温故而知新的原则，这里要复习：名称格式：（下划线或者字母）+（任意数目的字母，数字或下划线）注意：1.区分大小写2.禁止使用保留字3.遵守通常习惯•以单一下划线开头的变量名（_X)不会被frommoduleimport*语句导入的。•前后有下划线的变量名（X)是系统定义的变量名，对解释器有特殊意义。•以两个下划线开头，但结尾没有两个下划线的变量名（__X)是类
系统 2019-09-27 17:47:41 2263
