前言网络爬虫也称为网络蜘蛛、网络机器人，抓取网络的数据。其实就是用Python程序模仿人点击浏览器并访问网站，而且模仿的越逼真越好。一般爬取数据的目的主要是用来做数据分析，或者公司项目做数据测试，公司业务所需数据。而数据来源可以来自于公司内部数据，第三方平台购买的数据，还可以通过网络爬虫爬取数据。python在网络爬虫方向上有着成熟的请求、解析模块，以及强大的Scrapy网络爬虫框架。爬虫分类1、通用网络爬虫：搜索引擎使用，遵守robots协议（君子协议）
系统 2019-09-27 17:51:27 2153
8.计数排序8.1算法思想计数排序是一个非基于比较的排序算法。它的优势在于在对一定范围内的整数排序时，它的复杂度为Ο(n+k)（其中k是整数的范围），当o（k）O(nlog(n))的时候其效率反而不如基于比较的排序（基于比较的排序的时间复杂度在理论上的下限是O(nlog(n)),如归并排序，堆排序）。作为一种线性时间复杂度的排序，计数排序要求输入的数据必须是有确定范围
系统 2019-09-27 17:49:42 2153
在pycharm使用过程中，对于每次新建文件的编码格式和关于代码编写者的一些个人信息快捷填写，方法如下：1.打开pycharm，选择File-Settings（Ctrl+Alt+S），再选择Editor--Color&Style--FileandTemplates--Python-Script可以使用搜索快速找到"FileandCodeTemplates",右侧菜单选择"PythonScript",对模板进行编辑2.编辑内容预定义的变量要扩展为格式为${}
系统 2019-09-27 17:49:42 2153
首先，介绍一下编码类型：然后，再看一下编码类型的转换过程：python程序是在内存中运行，因此应该处理的是Unicode类型的字符串，文件或终端中的各种编码方式，可以理解为py3中的Bytes类型。Unicode只能在内存中使用Bytes是在文件存储和网络数据传输中使用记住我们的程序要处理的是Unicode类型下面看一下py2和py3中字符串的类型：py2：py3：看起来好像一样，都是str类型，其实对应的编码方式是不一样的，请看下图：这样是否看出区别了呢
系统 2019-09-27 17:49:37 2153
Turtle图形库Turtle库是Python内置的图形化模块，属于标准库之一，位于Python安装目录的lib文件夹下，常用函数有以下几种：画笔控制函数penup():抬起画笔；pendown():落下画笔；pensize(width):画笔宽度；pencolor(color):画笔颜色；运动控制函数forward(d)/fd(d):直行d个像素；circle(r,extent=None):绘制半径为r，角度为extent的弧形，圆心默认在海龟左侧距离r
系统 2019-09-27 17:48:49 2153
在读取https://github.com/Embedding/Chinese-Word-Vectors中的中文词向量时，选择了一个有3G多的txt文件，之前在做词向量时用的是word2vec，所以直接导入模型然后indexword即可。因为这是一个txt大文件，尝试了DataFrame，np.loadtxt等，都没有成功，其中主要遇到的问题是：如何读取完整的大文件，而不会出现内存不足memeryerror等问题将读取出来的文件，保存为npy文件根据词找到
系统 2019-09-27 17:47:39 2153
引用：https://www.cnblogs.com/zoe-yan/p/10374757.html利用vs2017c#调用python脚本需要安装IronPython。我是通过vs2017的工具->NuGet包管理器->管理解决方案的NuGet包，搜索IronPython包安装，也可以在官网下载安装包自行安装后添加引用即可。创建一个控制台应用程序，安装完IronPython包后编辑程序：python脚本程序：运行后得到结果：需要注意的是，c#调用pyth
系统 2019-09-27 17:46:46 2153
万恶的源泉：Fireboo的疑问（当然lambda本身写的就有问题）：>>>filter(lambdax:x>2,[1,[1,2,3],2,3])[[1,2,3],3]？：>>>1<[1]True>>>int>>dict>>int
系统 2019-09-27 17:46:30 2153
最近在学习机器学习的过程中，常常需要将本地写的代码传到GPU服务器中，然后在服务器上运行。之前的做法一直是先在本地写好代码，然后通过FileZilla这样的文件传输工具来将写好的文件传到服务器，再通过ssh工具远程连接到服务器，执行相应的python脚本。这样的方式十分繁琐，效率很低。今天听到朋友提到了配置远程解释器使用场景先说说自己的使用场景，我是在什么情况下，需要将IDE配置成这样的环境来方便我的工作。首先，我需要在本地机子上写python代码，但是因
系统 2019-09-27 17:46:10 2153
pythongetopt详解函数原型：getopt.getopt(args,shortopts,longopts=[])参数解释：args：args为需要解析的参数列表。一般使用sys.argv[1:],这样可以过滤掉第一个参数（ps：第一个参数是脚本的名称，它不应该作为参数进行解析）shortopts：简写参数列表longopts：长参数列表返回值：opts：分析出的(option,value)列表对。args：不属于格式信息的剩余命令行参数列表。源码分
系统 2019-09-27 17:38:35 2153
