python爬虫1《1》什么是爬虫网络爬虫？网络爬虫（又被称为网页蜘蛛，网络机器人）,是一种按照一定的规则，自动地抓取万维网信息的程序或者脚本。《2》爬虫的基本原理：我们把互联网比喻为一张大网，网络爬虫我们想象为网上的蜘蛛，网页与网页之间的连接我们理解为节点，爬虫就相当于是访问网页，获取网页的信息，又通过节点可以爬取另一个网站，然后不停的通过一个个节点即访问一个个网页，这样网站的数据就可以被我们获取下来了。《3》爬虫的分类：网络爬虫可分为通用爬虫和聚焦爬虫
系统 2019-09-27 17:50:05 2321
概述：通信数据交换方式分为几种模式：全双工、半双工和单工数据传输；问题：什么是全双工、半双工和单工？解释：全双工（FullDuplex）是通讯传输的一个术语。通信允许数据在两个方向上同时传输，它在能力上相当于两个单工通信方式的结合。全双工指可以同时（瞬时）进行信号的双向传输（A→B且B→A）。指A→B的同时B→A，是瞬时同步的，四线制。单工就是在只允许甲方向乙方传送信息，而乙方不能向甲方传送。半双工(HalfDuplex)数据传输指数据可以在一个信号载体的
系统 2019-09-27 17:49:55 2321
Python爬虫面试题170道最近在刷面试题，看了网络上大量的Python相关面试题后，我发现了这几个问题：有些还是Python2的代码回答的很简单，关键的题目没有点出为什么一些复制粘贴的代码根本就跑不通这几个问题相信大家深有体会吧，所以我决定针对市面上大多的Python题目做一个分析，同时也希望大家尽可能的做到举一反三，而不是局限于题目本身。通过本场我分享的这篇文章，你将获得如下知识点：掌握Python的基础语法语法常见的Python应用场景掌握Pyth
系统 2019-09-27 17:47:55 2321
1.进程和线程2.同步和异步3.协程4.生成器到协程5.asyncio模块（协程模块）………………………………………………………………………………1.进程和线程进程相当于一个任务，比如做饭线程相当于操作，做饭需要解冻肉，洗菜，煮米饭一个进程任务，做饭下需要多进程做饭的多个进程，如上GIL全局解释器锁是用在IO密集型（大量的文件读写，多次请求网络数据）的多线程中对比单线程和多线程的例子：调用包time和线程包：threading先模拟请求网络数据的函数req
系统 2019-09-27 17:46:22 2321
方法一Python读取文件针对小文件可行，大文件效率和性能都很差。以下是几种写法defget_count(file_abs_name):""":param:file_abs_name文件名含绝对路径"""withopen(file_abs_name,'r')asf:cnt=len(f.readlines)f.flush()returncntdefget_count(file_abs_name):""":param:file_abs_name文件名含绝对路径
系统 2019-09-27 17:46:00 2321
python内存管理机制:引用计数垃圾回收内存池1.引用计数当一个python对象被引用时其引用计数增加1;当其不再被变量引用时引用计数减1;当对象引用计数等于0时,对象被删除(引用计数是一种非常高效的内存管理机制)2.垃圾回收垃圾回收机制:①引用计数,②标记清除,③分带回收引用计数:引用计数也是一种垃圾收集机制,而且也是一种最直观,最简单的垃圾收集技术.当python某个对象的引用计数降为0时,说明没有任何引用指向该对象,该对象就成为要被回收的垃圾了.(
系统 2019-09-27 17:45:59 2321
今天正式开始扫盲工作。首先要了解什么是JAVA，什么是J2ME。JAVA：由SUN公司推出的一种高级编程语言。这不是下定义，谁要是按这个去答卷就等着扣分吧。小知识：计算机是只认得二进制数据的，我们称之为第一代编程语言，也叫机器语言。第二代编程语言是汇编语言，我们通常说的软件破解，都是都过反汇编技术来实现的。汇编与反汇编也是写外挂最重要的技能之一。第三代编程语言，也叫高级语言，就是我们所说的C/C++，JAVA，VB，DELPHI等等。SUN公司推出的JAV
系统 2019-08-29 23:48:38 2321
很简单的tomcat配置，可以从网上下载解压安装JDK及tomcat，最后用一个批处理文件(*.bat)，就可以实现配置启动tomcat，很简单的批处理文件，稍懂点DOS命令的一看就懂！！批处理如下：setJAVA_HOME=d:\DEJ2SDK1.4setTOMCAT_HOME=d:\DETOMCAT50d:cdd:\DETOMCAT50\binstartup.batJAVA起步(1)－TOMCAT的配置
系统 2019-08-29 23:16:44 2321
MIX10，ScottGu宣布Silverlight4RC（releasecandidate）版本发布，从2009年11月到现在，Silverlight4又多了一些新的功能，另外对于已有功能，也有了相应的增强。Silverlight4RC增加了以下几个新的功能：1.XAPSigning（XAP签名）2.Customwindowchromefortrustedapplication（可信任应用下自定义窗口外观）前一段时间发布的一个FaceBook的Silve
系统 2019-08-29 23:09:30 2321
很高兴能在CSDN这个平台和你进行交流。“享受挨踢的人生，分享技术的乐趣！”LSOFT.CN(琅软中国)QQ：15137281邮箱：undoner@gmail.com博客：http://blog.csdn.net/undoner（因上班原因工作原因上班受限，因此咨询问题仅限邮件，请尽量详尽！）附：Java开发技术大全(500个源代码).http://download.csdn.net/detail/undoner/4837887Java_TCPIP_Soc
系统 2019-08-29 22:53:15 2321
