爬虫工作的三个基本步骤：爬取网页、解析内容、存储数据准备先安装爬取网页需要用到的第三方库：requests和bs4pipinstallrequestspipinstallbs4爬取网页#coding:UTF-8importrequestslink="http://www.santostang.com/"headers={'User-Agent':'Mozilla/5.0(WindowsNT6.1;Win64;x64)AppleWebKit/537.36(K
系统 2019-09-27 17:57:02 2153
常用终端命令(python虚拟环境+git)基础新建文件夹mkdir[文件夹名]新建文件touch[文件名]编辑文件vi[文件名]查看当前文件夹位置中的所有文件ls(-a/-all)-a:显示隐藏文件；-all:显示隐藏文件和属性python虚拟环境jupyternotebook添加虚拟环境变量（需要在该变量中）python-mipykernelinstall(--user)--name[环境名称]--display-name"[显示的名称]"#####查
系统 2019-09-27 17:56:37 2153
珠玉在前：https://code.visualstudio.com/docs/languages/pythonhttps://blog.csdn.net/m0_37192554/article/details/83714975http://www.cppcns.com/jiaoben/python/151875.html关于常规插件https://code.visualstudio.com/docs/languages/pythonOtherpopula
系统 2019-09-27 17:54:53 2153
有时候使用到获取本机IP，就采用以下方式进行。复制代码代码如下:#!/usr/bin/pythonimportsocketimportstructimportfcntldefgetip(ethname):s=socket.socket(socket.AF_INET,socket.SOCK_DGRAM)returnsocket.inet_ntoa(fcntl.ioctl(s.fileno(),0X8915,struct.pack(‘256s',ethname
系统 2019-09-27 17:54:44 2153
set()函数创建一个无序不重复元素集，可进行关系测试，删除重复数据，还可以计算交集、差集、并集等。set语法：classset([iterable])参数说明：iterable--可迭代对象对象；返回值：返回新的集合对象。将列表转为集合：list1=[1,3,4,3,2,1]list1=set(list1)print(list1)结果如下：（1，2,3,4）扩展举例：python将3X4的矩阵列表转换为4X3列表matrix=[[1,2,3,4],[5,
系统 2019-09-27 17:53:49 2153
一、什么是匿名函数关键字lambda表示匿名函数。冒号前面的x表示形参，冒号后面是返回值。例：计算1~10对应数字的平方，以列表形式输出。定义法函数：deffun(x):returnx**2print(list(map(fun,range(1,11))))匿名函数法：print(list(map(lambdax:x**2,range(1,11))))二、匿名函数的特点当我们在传入函数时，有些时候，不需要显式地定义函数，直接传入匿名函数更方便。匿名函数有个限
系统 2019-09-27 17:53:21 2153
来源|Python语音识别作者|深度学习与python（ID:PythonDC）Python是目前编程领域最受欢迎的语言。在本文中，我将总结Python面试中最常见的100个问题。每道题都提供参考答案，希望能够帮助你在2019年求职面试中脱颖而出，找到一份高薪工作。这100道面试题涉及Python基础知识、Python编程、数据分析以及Python函数库等多个方面。前50道面试题：Q51、python中编译和链接过程？编译和链接允许正确编译新扩展而不会出现
系统 2019-09-27 17:52:55 2153
前言网络爬虫也称为网络蜘蛛、网络机器人，抓取网络的数据。其实就是用Python程序模仿人点击浏览器并访问网站，而且模仿的越逼真越好。一般爬取数据的目的主要是用来做数据分析，或者公司项目做数据测试，公司业务所需数据。而数据来源可以来自于公司内部数据，第三方平台购买的数据，还可以通过网络爬虫爬取数据。python在网络爬虫方向上有着成熟的请求、解析模块，以及强大的Scrapy网络爬虫框架。爬虫分类1、通用网络爬虫：搜索引擎使用，遵守robots协议（君子协议）
系统 2019-09-27 17:51:27 2153
BacktoPythonIndex.1.安装Installation官网,国内镜像源清华最方便，condaconfig--addchannelshttps://mirrors.tuna.tsinghua.edu.cn/anaconda/pkgs/free/condaconfig--addchannelshttps://mirrors.tuna.tsinghua.edu.cn/anaconda/pkgs/main/#显示源地址condaconfig--set
系统 2019-09-27 17:50:47 2153
文章目录1.最小+1次数使得列表中的数字互异（Hash）2.数组排序，使得交换的次数最少3.按优先级排序（分奇偶）4.投骰子求期望（求期望）1.最小+1次数使得列表中的数字互异（Hash）给定字符串A，A是由逗号分割的数字串，A可以解析成整数数组B。每次操作可以选择任意B[i]，并将其递增1。返回使B中的每个值都是唯一的最少操作次数。eg：A为[1,2,3,4,5]返回0A为[1,2,2]返回1思路：这个题来是Sina的笔试，用hash表，冲突的就往旁边的
系统 2019-09-27 17:49:16 2153
