简介提到爬虫，大部分人都会想到使用Scrapy工具，但是仅仅停留在会使用的阶段。为了增加对爬虫机制的理解，我们可以手动实现多线程的爬虫过程，同时，引入IP代理池进行基本的反爬操作。本次使用天天基金网进行爬虫，该网站具有反爬机制，同时数量足够大，多线程效果较为明显。技术路线IP代理池多线程爬虫与反爬编写思路首先，开始分析天天基金网的一些数据。经过抓包分析，可知：./fundcode_search.js包含所有基金的数据，同时，该地址具有反爬机制，多次访问将会
系统 2019-09-27 17:57:51 2602
一、Python中的编码规则#_*_coding:utf-8_*_在python2中添加此行，可识别UTF-8编码，是16位二进制编码，可识别汉字python2.x:默认使用ASCII编码python3.x:默认使用UTF-8编码1.没有分号(编码规范PEP8)2.严格按照缩进的语言系统中默认的python为2.7.5版本：我们下载的版本为python3.6.4：测试：【1】在python2中添加此行，可识别UTF-8编码，是16位二进制编码，可识别汉字1
系统 2019-09-27 17:55:33 2602
前情提要：Python爬虫初体验（2）：多线程的应用及爬取中的实际问题从来没想过，写一个功能较为完备的爬虫代码，要花好几天的时间……这次算是增长了许多编程经验。好的废话不多说，进入正题上次的代码中，由于部分XKCD漫画有特殊格式（还有404彩蛋），而我的代码中try-except结构只处理了连接超时的问题，没有对漫画本身的格式变化进行处理，导致线程意外中断。虽然最后写了重试下载，但是它和上面的一样，有个致命问题：如果是漫画格式的问题，它会陷入无限死循环。所
系统 2019-09-27 17:53:24 2602
前言Modbus协议是由Modicon公司（现在的施耐德电气SchneiderElectric）推出，主要建立在物理串口、以太网TCP/IP层之上，目前已经成为工业领域通信协议的业界标准，广泛应用在工业电子设备之间的互联。ModbusPoll和ModbusSlave是两款非常流行的Modbus设备仿真软件，支持ModbusRTU/ASCII和ModbusTCP/IP协议，经常用于测试和调试Modbus设备，观察Modbus通信过程中的各种报文。当用于支持M
系统 2019-09-27 17:53:03 2602
decimal模块为快速正确舍入的十进制浮点运算提供支持。模块设计以三个概念为中心：十进制数，算术上下文和信号。十进制数是不可变的。它有一个符号，系数数字和一个指数。为了保持重要性，系数数字不会截断尾随零。十进制数也包括特殊值，例如Infinity，-Infinity，和NaN。该标准还区分-0和+0。算术的上下文是指定精度、舍入规则、指数限制、指示操作结果的标志以及确定符号是否被视为异常的陷阱启用器的环境。舍入选项包括ROUND_CEILING、ROUN
系统 2019-09-27 17:49:13 2602
上一篇文章中我们介绍了python语言的几个特点，并在最后留了一个问题，python除了上下执行以外有没有其他的执行方式。今天我们就来介绍python中的数据类型和控制流。数据类型python中包含六个标准数据类型分别为：Number（数字）、String（字符串）、List（列表）、Tuple（元组）、Set（集合）、Dictionary（字典）。不同的数据类型往往对应不同的用途。这个很好理解。比如你可以用一个字符串用来储存一个人的名字。name="六小
系统 2019-09-27 17:48:08 2602
AnacondaPython的编写环境，用Anaconda就够了。Anaconda是专业的数据科学计算环境，已经集成绝大部分包和工具，不需要多余的安装和调试，使用方便。所以以下我们就讲解一下Anaconda的安装~Anaconda是一个Python平台，用的ipython内核到时候可以用JupyterNotebook编辑器但推荐用Spyder下载一个Anaconda百度上面有很多教程Anaconda官网选择Windows点击Download下载Python
系统 2019-09-27 17:46:56 2602
mint19.2本来pip和pip2对应python2.7pip3对应python3.6用源码安装了python3.7之后.这样版本也没问题.但是,用pip3.7安装包的时候提示pip需要升级,但是一旦升级,就不对了pippip2pip3都指向了pip3.7这导致一系列问题.包pgadmin4启动后报csrf错误,甚至进而导致docker-compose模式下postgres服务下线!而且,无法用重装python-pip,python3-pip来解决sud
系统 2019-09-27 17:46:37 2602
1.计算给出两个时间之间的时间差importdatetimeasdt#currenttimecur_time=dt.datetime.today()#onedaypre_time=dt.date(2016,5,20)#eg:2016.5.20delta=cur_time-pre_time#ifyouwanttogetdiscrepancyindaysprintdelta.days#ifyouwanttogetdiscrepancyinhoursprintd
系统 2019-09-27 17:38:14 2602
转载自：http://www.qqread.com/app-soft/z493108.htmlMPlayer作为Mac用户心目中最好用的多媒体播放工具之一，一直都广受好评，是Mac视频播放必备软件。无奈，后来因为种种原因，开发团队停止了MPlayer的更新和维护。最近，另外一个开发团队在MPlayer的基础上，新编译了一款基于MPlayer的多媒体播放软件-MPlayerX。功能上，MPlayerX比MPlayer更加强大；界面上，MPlayerX与Qui
系统 2019-08-29 23:50:48 2602
