今天在写爬虫程序的时候由于要翻页，做除法分页的时候出现了复制代码代码如下:totalCount='100'totalPage=int(totalCount)/20ValueError:invalidliteralforint()withbase10的错误网上同样的错误有人建议用round(float(“1.0″))，但是解决不了我这个问题，round(float(“1.0″))是用于解决浮点数转换为整形数的，而我这个则是因为原字符串转换为整形后做除法，虽然
系统 2019-09-27 17:45:38 1779
Pythonsocket网络编程初学python，前段时间买了两本书《python编程从入门到实践》《Python核心编程第三版》，第一本书主要讲的是一些基本语法和一些基本的使用方法，而第二本则深入很多，自己看来也是一知半解，刚好看到了这部分网络编程，依然有好多不太理解的地方，不过想来通过自己不断的摸索，不断地搜寻资料学习，早晚应该会变得通透吧.......这部分主要使用的模块就是socket模块，在这个模块中可以找到socket()函数，该函数用于创建套
系统 2019-09-27 17:38:34 1779
网络通用urllib-网络库(stdlib)。requests-网络库。grab�C网络库（基于pycurl）。pycurl�C网络库（绑定libcurl）。urllib3�CPythonHTTP库，安全连接池、支持文件post、可用性高。httplib2�C网络库。RoboBrowser�C一个简单的、极具Python风格的Python库，无需独立的浏览器即可浏览网页。MechanicalSoup-一个与网站自动交互Python库。mechanize-有
系统 2019-09-27 17:38:25 1779
前言最近在维护项目的python项目代码，项目使用了python的日志模块logging，设定了保存的日志数目，不过没有生效，还要通过contab定时清理数据。分析项目使用了logging的TimedRotatingFileHandler：#!/user/bin/envpython#-*-coding:utf-8-*-importloggingfromlogging.handlersimportTimedRotatingFileHandlerlog=log
系统 2019-09-27 17:38:11 1779
1、python装饰器刚刚接触python的装饰器，简直懵逼了，直接不懂什么意思啊有木有，自己都忘了走了多少遍Debug，查了多少遍资料，猜有点点开始明白了。总结了一下解释得比较好的，通俗易懂的来说明一下：小P闲来无事，随便翻看自己以前写的一些函数，忽然对一个最最最基础的函数起了兴趣：defsum1():sum=1+2print(sum)sum1()此时小P想看看这个函数执行用了多长时间，所以写了几句代码插进去了：importtimedefsum1():s
系统 2019-09-27 17:38:08 1779
概述模块Pickle实现了对一个Python对象结构的二进制的序列化和反序列化。即当Python程序持续运行一些字符串、列表字典、甚至自定义的类等数据对象，需要持久化存储，即存储在磁盘中，防止运行在内存中，因断电等情况丢失数据。那么Pickle模块就派上用场了，它可以将对象转换为一种可以传输或存储的格式。python的pickle模块实现了基本的数据序列和反序列化。通过pickle模块的序列化操作我们能够将程序中运行的对象信息保存到文件中去，永久存储；通过
系统 2019-09-27 17:56:58 1778
Python爬虫包BeautifulSoup递归抓取实例详解概要：爬虫的主要目的就是为了沿着网络抓取需要的内容。它们的本质是一种递归的过程。它们首先需要获得网页的内容，然后分析页面内容并找到另一个URL，然后获得这个URL的页面内容，不断重复这一个过程。让我们以维基百科为一个例子。我们想要将维基百科中凯文・贝肯词条里所有指向别的词条的链接提取出来。#-*-coding:utf-8-*-#@Author:HaonanWu#@Date:2016-12-2510
系统 2019-09-27 17:56:47 1778
最近在用python写接口的测试程序，期间用到解析字典获取某个key的value，由于多个接口返回的字典格式不是固定的并存在多层嵌套的情况。在字典的方法中也没有找到可直接达到目的的方法(也可能是我对字典的方法了解的不深的缘故)，于是自己写了个程序。下面是代码#coding:utf-8importtypes#获取字典中的objkey对应的值，适用于字典嵌套#dict:字典#objkey:目标key#default:找不到时返回的默认值defdict_get(
系统 2019-09-27 17:55:32 1778
邻近算法（k-NearestNeighbor)是机器学习中的一种分类（classification）算法，也是机器学习中最简单的算法之一了。虽然很简单，但在解决特定问题时却能发挥很好的效果。因此，学习kNN算法是机器学习入门的一个很好的途径。kNN算法的思想非常的朴素，它选取k个离测试点最近的样本点，输出在这k个样本点中数量最多的标签（label）。我们假设每一个样本有m个特征值（property），则一个样本的可以用一个m维向量表示:X=（x1，x2，.
系统 2019-09-27 17:54:43 1778
Python标准库包含两个测试工具。doctest：一个简单的模块，为检查文档而设计，但也适合用来编写单元测试。unittest：一个通用的测试框架。一、使用doctest进行单元测试创建文件mymath.py，内容defsquare(x):'''计算平方并返回结果（下面是单元测试的格式）>>>square(2)>>>square(3)'''returnx*xif__name__=='__main__':importdoctest,mymathdoctes
系统 2019-09-27 17:54:39 1778
开篇：测试过程中，对于多参数参数多值的情况进行测试用例组织，之前一直使用【正交分析法】进行用例组织，说白了就是把每个参数的所有值分别和其他参数的值做一个全量组合，用Python脚本实现，就是itertools模块中product方法（又称笛卡尔积法）。正交分析法的优点是测试用例覆盖率100%，缺点测试用例数量庞大，执行用例消耗的人工巨大。Pairwise（结对）算法源于对传统的正交分析方法优化后得到的产物，它的理论来自于数学统计。毫不避讳的说，本人看不懂数
系统 2019-09-27 17:54:21 1778
在学习python的时候，三大“名器”对没有其他语言编程经验的人来说，应该算是一个小难点，本次博客就博主自己对装饰器、迭代器和生成器理解进行解释。为什么要使用装饰器什么是装饰器？“装饰”从字面意思来谁就是对特定的建筑物内按照一定的思路和风格进行美化的一种行为，所谓“器”就是工具，对于python来说装饰器就是能够在不修改原始的代码情况下给其添加新的功能，比如一款软件上线之后，我们需要在不修改源代码和不修改被调用的方式的情况下还能为期添加新的功能，在pyth
系统 2019-09-27 17:54:20 1778
废话不多说，直接上代码#Author:LancyWuproduct_list=[('Iphone',5800),('MacPro',9800),('Bike',800),('Watch',10600),('Coffee',31),('LancyPython',120)]#商品列表shopping_list=[]#定义一个列表来存储已购商品salary=input("请输入工资：")ifsalary.isdigit():#当输入的内容为数字salary=in
系统 2019-09-27 17:54:07 1778
由于之前对于爬取下来的数据都是存入MongoDB中，想起来还没有尝试存入MySQL，于是将一篇简单的文章爬取下来，存入MySQL试试这里用到的python模块是pymysql，因为MySQLdb之前已经停止维护首先在cmd中连接MySQL并且创建一个数据库json在图形化界面workbench中可以看到接下来就要在pycharm中写代码了，在pycharm中导入pymysql后即可#建立python与MySQL之间的连接mysql=pymysql.conn
系统 2019-09-27 17:53:26 1778
简单使用最开始，我们用最短的代码体验一下logging的基本功能。importlogginglogger=logging.getLogger()logging.basicConfig()logger.setLevel('DEBUG')logger.debug('logsomething')#输出out>>DEBG:root:logsomething第一步，通过logging.getLogger函数，获取一个loger对象，但这个对象暂时是无法使用的。第二步
系统 2019-09-27 17:52:26 1778
