分析分析网站寻找需要的网址用谷歌浏览器摁F12打开开发者工具，然后打开斗鱼颜值分类的页面，如图：在里面的请求中，最后发现它是以ajax加载的数据，数据格式为json，如图：圈住的部分是我们需要的数据，然后复制它的网址为https://www.douyu.com/gapi/rknc/directory/yzRec/1，出于学习目的只爬取第一页（减少服务器压力）。然后把网址放到浏览器中测试是否可以访问。如图：结果正常。分析json数据，提取图片链接最后分析发现
系统 2019-09-27 17:46:57 1625
最近在做周报的时候，需要把csv文本中的数据提取出来制作表格后生产图表。在获取csv文本内容的时候，基本上都是用withopen(filename,encoding='UTF-8')asf:来打开csv文本，但是实际使用过程中发现有些csv文本并不是utf-8格式，从而导致程序在run的过程中报错，每次都需要手动去把该文本文件的编码格式修改成utf-8，再次来run该程序，所以想说：直接在程序中判断并修改文本编码。基本思路：先查找该文本是否是utf-8的编
系统 2019-09-27 17:46:34 1625
闭包(closure)是函数式编程的重要的语法结构。函数式编程是一种编程范式(而面向过程编程和面向对象编程也都是编程范式)。在面向过程编程中，我们见到过函数(function)；在面向对象编程中，我们见过对象(object)。函数和对象的根本目的是以某种逻辑方式组织代码，并提高代码的可重复使用性(reusability)。闭包也是一种组织代码的结构，它同样提高了代码的可重复使用性。不同的语言实现闭包的方式不同。Python以函数对象为基础，为闭包这一语法结
系统 2019-09-27 17:45:45 1625
一.语法列表解析式是将一个列表（实际上适用于任何可迭代对象（iterable））转换成另一个列表的工具。在转换过程中，可以指定元素必须符合一定的条件，才能添加至新的列表中，这样每个元素都可以按需要进行转换。好处：1.简洁2.高效其实列表解析式并不是必须的，因为它能完成的工作都能够通过for循环完成，但是列表解析式比手动的for循环语句运行得更快(往往速度快一倍)，因为它们的迭代在解释器内部是以C语言的速度执行的，而不是以手动的Python代码执行的，特别是
系统 2019-09-27 17:45:29 1625
在我以前介绍Python2.4特性的Blog中已经介绍过了decorator了，不过，那时是照猫画虎，现在再仔细描述一下它的使用。关于decorator的详细介绍在Python2.4中的What'snew中已经有介绍，大家可以看一下。如何调用decorator基本上调用decorator有两种形式第一种：复制代码代码如下:@Adeff():这种形式是decorator不带参数的写法。最终Python会处理为：复制代码代码如下:f=A(f)还可以扩展成：复制
系统 2019-09-27 17:38:31 1625
IT行业，技术要比学历、年龄、从业经验更为重要，技术水平直接决定就业薪资，想要学好python，首先要先了解精通Python语言基础、Pythonweb开发、Python爬虫、Python数据分析这四大方面。全栈即指的是全栈工程师，指掌握多种技能，并能利用多种技能独立完成产品的人。就是与这项技能有关的都会，都能够独立的完成。全栈只是个概念，也分很多种类。真正的全栈工程师涵盖了web开发、DBA、爬虫、测试、运维，要学的内容那是相当的巨量。就web开发方向而
系统 2019-09-27 17:38:07 1625
解决思路首先想到的就是利用python的正则表达式来匹配非法字符，然后找出非法记录。然而理想总是丰满的，现实却是残酷的。在实现的过程中，才发现自己对于字符编码、以及python内部字符串表示的相关知识的缺乏。在这期间，踩过了不少坑，到最后虽然还有些模糊的地方，但总算有一个总体清晰的了解。在此记录下心得，避免以后在同一个地方跌倒。以下的测试环境是ArcGIS10.3自带的python2.7.8环境，不保证其他python环境也适用。python正则表达式py
系统 2019-09-27 17:37:48 1625
python循环while和forin简单实例#!/uer/bin/envpython#_*_coding:utf-8_*_lucknumber=5b=0whileb<3:print('gusscount:',b)a=int(input('yougusenumber'))ifa>lucknumber:print('youaerbiger')elifa==lucknumber:print('youarerighet')break#跳出这个层级的循环else:
系统 2019-09-27 17:37:36 1625
C的语法在你第一次接触时给你的感觉是灵活而松散，似乎随便你怎么写编译器都能给予解释——也就是可以顺利的编译通过，你甚至可以写出i=96+'a'；之类的语句来。但当你深入学习使用C的时候你会发现C的语法也有其诡谲的一面，其中声明就是很讨厌的一项。我记得自己在学习的时候是靠死记硬背一些基本的声明方式来过关的，顺便说说这种方法在很多情况下都是最好的方法之一。我们首先来看C语言的术语以及一些能组合成一个声明的单独语法成分。其中一个非常重要的成分就是声明器（decl
系统 2019-08-29 23:21:44 1625
转载自----http://lifethinker.iteye.com/blog/260515编写Java多线程程序一直以来都是一件十分困难的事，多线程程序的bug很难测试，DCL(DoubleCheckLock)就是一个典型，因此对多线程安全的理论分析就显得十分重要，当然这决不是说对多线程程序的测试就是不必要的。传统上，对多线程程序的分析是通过分析操作之间可能的执行先后顺序，然而程序执行顺序十分复杂，它与硬件系统架构，编译器，缓存以及虚拟机的实现都有着很
系统 2019-08-29 23:06:36 1625
