这次只演示了，如何在真实项目内用到BeautifulSoup库来解析网页，而新浪的新闻是ajax加载过来的数据，在这里我们只演示解析部分数据（具体反扒机制没做分析）。代码地址：https://gitee.com/dwyui/BeautifulSoup_xinlang.git。关于的爬虫的博客已经越来越多，使用到的技术也越来越多，后期我还会持续写下去，大概从几个角度去写，多线程爬取（提高效率），如何更好的做到爬取数据（破解反扒）。用redis管理多线程和代理
系统 2019-09-27 17:45:54 1825
前言由于笔者近期的研究课题与图像后处理有关，需要通过图像处理工具对图像进行变换和处理，进而生成合适的训练图像数据。该系列文章即主要记录笔者在不同的环境下进行图像处理时常用的工具和库。在Python环境下，对图像的处理笔者主要使用Pillow库，主要操作包括对图像的读取、存储和变换等。实际应用中，Pillow中提供的Image模块适合对图像整体进行变换处理操作。注：以下介绍仅包括对应模块和函数的基础用法，故而在介绍时省略了部分参数和选项，更完备的用法和介绍可
系统 2019-09-27 17:45:53 1825
SQLite是一个小型的关系型数据库，它最大的特点在于不需要单独的服务、零配置。我们在之前讲过的两个数据库，不管是MySQL还是MongoDB，都需要我们安装。安装之后，然后运行起来，其实这就相当于已经有一个相应的服务在跑着。SQLite与前面所说的两个数据库不同。首先Python已经将相应的驱动模块作为了标准库的一部分，只要是你安装了Python，就可以使用；再者它可以类似于操作文件那样来操作SQLite数据库文件。还有一点，SQLite源代码不受版权限
系统 2019-09-27 17:45:49 1825
Python提供了两个内置函数从标准输入读入一行文本，默认的标准输入是键盘。如下：1.raw_input2.inputraw_input函数raw_input()函数从标准输入读取一个行，并返回一个字符串（去掉结尾的换行符）：复制代码代码如下:str=raw_input("Enteryourinput:");print"Receivedinputis:",str这将提示你输入任意字符串，然后在屏幕上显示相同的字符串。当我输入"HelloPython！"，它
系统 2019-09-27 17:45:41 1825
最近写的代码中写了很多函数，都是按步骤调用的，想看代码执行到第几个函数了，但又不想在每个函数中打印来表示执行到哪了，这时候就想用进度条来显示了，看网上没有我这种思路来实现的，自己来写个importtimeimporttqdmdefwork1():time.sleep(1)defwork2():time.sleep(1)defwork3():time.sleep(1)defwork4():time.sleep(1)defwork5():time.sleep(
系统 2019-09-27 17:45:25 1825
1.能调用方法的一定是对象,比如数值、字符串、列表、元组、字典，甚至文件也是对象，Python中一切皆为对象。str1='hello'str2='world'str3=''.join([str1,str2])print(str3)2.三种基本的文件操作模式：r(only-read)、w(only-write)、a(append)对文件进行操作的流程：第一，建立文件对象。第二，调用文件方法进行操作。第三，不要忘了关闭文件。（文件不关闭的情况下，内容会放在缓存
系统 2019-09-27 17:38:34 1825
先来介绍一些pythonweb编程基础知识1.GET与POST区别1)POST是被设计用来向web服务器上放东西的，而GET是被设计用来从服务器取东西的，GET也能够向服务器传送较少的数据，而Get之所以也能传送数据,只是用来设计告诉服务器,你到底需要什么样的数据.POST的信息作为HTTP请求的内容，而GET是在HTTP头部传输的；2)POST与GET在HTTP中传送的方式不同，GET的参数是在HTTP的头部传送的，而Post的数据则是在HTTP请求的内
系统 2019-09-27 17:38:29 1825
浅谈python中set使用In[2]:a=set()#常用操作1In[3]:aOut[3]:set()In[4]:type(a)Out[4]:setIn[5]:b=set([1,3])In[6]:bOut[6]:{1,3}In[7]:type(b)Out[7]:setIn[8]:b.update(2)---------------------------------------------------------------------------Typ
系统 2019-09-27 17:38:07 1825
先看代码：In[1]:a={'name':'wang'}In[2]:a.get('age')In[3]:a['age']---------------------------------------------------------------------------KeyErrorTraceback(mostrecentcalllast)in()---->1a['age']KeyError:'age'In[4]:a.get('age',10)Out[4
系统 2019-09-27 17:38:06 1825
系统管理员通常从svn/git中检索代码，部署站点后通常首先会生成该站点所有文件的MD5值，如果上线后网站页面内容被篡改（如挂马）等，可以比对之前生成MD5值快速查找去那些文件被更改，为了使系统管理员第一时间发现，可结合crontab或nagios等工具。程序测试如下：#pythoncheck_change.pyUsage:pythoncheck_change.pyupdate/home/wwwrootpythoncheck_change.pycheck/
系统 2019-09-27 17:38:00 1825
