Python

Python信息抽取之乱码解决办法

Python信息抽取之乱码解决办法就事论事,直说自己遇到的情况,和我不一样的路过吧,一样的就看看吧信息抓取,用python,beautifulSoup,lxml,re,urllib2,urllib2去获取想要抽取的页面内容,然后使用lxml或者beautifulSoup进行解析,插入mysql具体的内容,好了貌似很简单很easy的样子,可是里面的恶心之处就来了,第一,国内开发网站的人在指定网站编码或者是保存网站源码的时候并没有考虑什么编码,反正一句话,一个

系统 2019-09-27 17:54:45 2348

Python

python爬虫 urllib模块反爬虫机制UA详解

方法:使用urlencode函数urllib.request.urlopen()importurllib.requestimporturllib.parseurl='https://www.sogou.com/web?'#将get请求中url携带的参数封装至字典中param={'query':'周杰伦'}#对url中的非ascii进行编码param=urllib.parse.urlencode(param)#将编码后的数据值拼接回url中url+=para

系统 2019-09-27 17:53:16 2348

Python

python中用logging实现日志滚动和过期日志删除功能

logging库提供了两个可以用于日志滚动的class(可以参考https://docs.python.org/2/library/logging.handlers.html),一个是RotatingFileHandler,它主要是根据日志文件的大小进行滚动,另一个是TimeRotatingFileHandler,它主要是根据时间进行滚动。在实际应用中,我们通常根据时间进行滚动,因此,本文中主要介绍TimeRotaingFileHandler的使用方法(R

系统 2019-09-27 17:52:54 2348

Python

分析Python读取文件时的路径问题

Python在读取文件内容时的路径问题,值得深究一下.我想讨论的重点还是在绝对路径上面.在这之前我们先看一下1:相对路径这张图演示了在相对路径下寻找查找指定文件.open('相对路径演示'\'相对路径示例'.txt)打开的是相对当前运行的程序所在目录。而我当前运行的程序相对位置在桌面.所以直接print(lines)可以看到这个结果2:绝对路径.绝对路径的查找方法就不演示了,相信每个人都会找到。但是我想讨论的是几个关于路径中的编码问题,相信这对初学者们有很

系统 2019-09-27 17:52:11 2348

Python

利用python和TensorFlow构建神经网络解决二分类问题

关于神经网络结构的软件设计和分类曲线的绘制,本文主要参考了以下文章:https://blog.csdn.net/lilong117194/article/details/79130032构建的具体步骤如下:步骤1.建立数据源(样本库)——使用随机初始化的方式。由于需要进行逻辑分类,需要建立2个数据类,并合并在一起。如下:num_points=1000#样本数目vectors_set=[]x1_PlotData=[]#用于后期绘图的数据y1_PlotData

系统 2019-09-27 17:50:49 2348

Python

python暴力解压rar加密文件过程详解

第一次使用csdn写文章,写得不好还请见谅。(运行环境:python3.6)下了一个带密码的压缩包文件,作为一个刚学python的新手,想着能不能用python暴力破解它,于是在网上搜了很多资料,看着似乎并不是很麻烦,也想试着自己写一个可以暴力破解的程序,在写的过程中却遇到了各种各样的问题,希望大手们能带带我。遇到的问题如下:zipfile和zipfile2似乎都不支持AES解密(https://bugs.python.org/issue9170)在用ra

系统 2019-09-27 17:47:52 2348

Python

Python代码使用 Pyftpdlib实现FTP服务器功能

当你想快速共享一个目录的时候,这是特别有用的,只需要1行代码即可实现。FTP服务器,在此之前我都是使用Linux的vsftpd软件包来搭建FTP服务器的,现在发现了利用pyftpdlib可以更加简单的方法即可实现FTP服务器的功能。环境要求Python2.7Windows/Linux环境搭建pipinstallpyftpdlib一行代码实现FTP服务器通过Python的-m选项作为一个简单的独立服务器来运行,当你想快速共享一个目录的时候,这是特别有用的。在

系统 2019-09-27 17:46:58 2348

Python

在Python中用get()方法获取字典键值的教程

get()方法返回给定键的值。如果键不可用,则返回默认值None。语法以下是get()方法的语法:dict.get(key,default=None)参数key--这是要搜索在字典中的键。default--这是要返回键不存在的的情况下默认值。返回值该方法返回一个给定键的值。如果键不可用,则返回默认值为None。例子下面的例子显示了get()方法的使用。#!/usr/bin/pythondict={'Name':'Zara','Age':27}print"V

系统 2019-09-27 17:46:48 2348

Python

Python threading的使用方法解析

一、例子:我们对传参是有要求的必须传入一个元组,否则报错import_threadasthreadimporttimedefloop1(in1):print("Startloop1at:",time.ctime())print("我是参数",in1)time.sleep(4)print("Endloop1at:",time.ctime())defloop2(in1,in2):print("Startloop2at:",time.ctime())print(

系统 2019-09-27 17:45:45 2348

Python

Python语言的面相对象编程方式初步学习

词语练习class:告诉python创造一个新的东西object:两个意思:最基本的东西和任何实例化的东西。instance:创建一个类得到的东西。def:在类中创建一个函数。self:在类里面的函数中使用,是实例和object能访问的变量。inheritance:继承,一个类可以继承另一个类,像你和你的父母。composition:一个类可以包含另外一个类,就像汽车包含轮胎。attribute:一个属性类,通常包括变量。is-a:表示继承关系has-a:

系统 2019-09-27 17:38:27 2348

Python

利用python进行游戏编程 pdf

利用python进行游戏编程python游戏编程普遍是一些较为简单的单机小游戏。可以用作python入门后的一个练习方向。链接:https://pan.baidu.com/s/1_kzfWxCmA5qWq6i-kovGVA提取码:oyap

系统 2019-09-27 17:57:06 2347

Python

常用终端命令(python虚拟环境+git)

常用终端命令(python虚拟环境+git)基础新建文件夹mkdir[文件夹名]新建文件touch[文件名]编辑文件vi[文件名]查看当前文件夹位置中的所有文件ls(-a/-all)-a:显示隐藏文件;-all:显示隐藏文件和属性python虚拟环境jupyternotebook添加虚拟环境变量(需要在该变量中)python-mipykernelinstall(--user)--name[环境名称]--display-name"[显示的名称]"#####查

系统 2019-09-27 17:56:37 2347

Python

详解python中的模块及包导入

python中的导入关键字:import以及fromimport1、importimport一般用于导入包以及模块。不过有个小问题:(1)当导入的是模块的时候是可以直接可以使用模块内的函数以及变量的,比如说:包名为:com.test,在这个包底下有个模块为a.py,那么当其他包中的模块想要引入a模块的时候写法为importcom.test.a在b.py中调用的方式为:com.test.a.(a中的函数或者变量),而不能直接写为a.(a中的函数名或者变量)(

系统 2019-09-27 17:56:03 2347

Python

基于Linux系统中python matplotlib画图的中文显示问题

最近想学习一些python数据分析的内容,就弄了个爬虫爬取了一些数据,并打算用Anaconda一套的工具(pandas,numpy,scipy,matplotlib,jupyter)等进行一些初步的数据挖掘和分析。在使用matplotlib画图时,横坐标为中文,但是画出的条形图横坐标总是显示“框框”,就去查资料解决。感觉这应该是个比较常见的问题,网上的中文资料也确实很多,但是没有任何一个彻底解决了我遇到的问题。零零碎碎用了快3个小时的时间,才终于搞定。特此

系统 2019-09-27 17:55:12 2347

Python

Python获取命令实时输出-原样彩色输出并返回输出结果的示例

经试验显示效果不错。#!/usr/bin/python3#-*-coding:utf-8-*-importosimportsubprocess#与在命令窗口执行显示效果相同,如有彩色输出可保留,但不能返回结果defrun(command):subprocess.call(command,shell=True)#实时输出但不可显示彩色,可以返回结果defsh(command,print_msg=True):p=subprocess.Popen(command

系统 2019-09-27 17:54:40 2347