拥有Python标签的文章
Python

python爬虫前的准备

1、爬虫概念​爬虫:写一段代码,去指定的url(网站)去获取指定的数据​互联网:或联网中,给你一个起始url,比如:www.baidu.com,互联网中的节点都是一个al链接,或者称之为url1.1通用爬虫:百度,搜狗,google,雅虎,bing1.1.1他们的工作:1.爬取所有信息2.主动提交url3.百度主动和域名服务商合作​1.1.2如果不想让百度抓取?robots.txt放到django根目录​1.1.3网站排名:魏则西事件pagerank1.2

系统 2019-09-27 17:57:14 2556

Python

python 如何将虚拟环境的项目的所有.py文件的import导包汇总到

参考文章:pipreqs-Generaterequirements.txtfileforanyprojectbasedonimports作用:能快速汇总所需安装的包然后批量安装使用方法:执行pipinstallpipreqs执行pipreqs‘path’(会把项目path路径下所有.py文件以及子文件夹下的.py文件的导包汇总到一个txt文件)比如:然后我在当前路径打开控制台程序:然后执行:(’./'表示当前路径)没一会儿,就会显示:文件夹中多了个requ

系统 2019-09-27 17:55:22 2556

Python

Python标准库之sqlite3使用实例

Python自带一个轻量级的关系型数据库SQLite。这一数据库使用SQL语言。SQLite作为后端数据库,可以搭配Python建网站,或者制作有数据存储需求的工具。SQLite还在其它领域有广泛的应用,比如HTML5和移动端。Python标准库中的sqlite3提供该数据库的接口。我将创建一个简单的关系型数据库,为一个书店存储书的分类和价格。数据库中包含两个表:category用于记录分类,book用于记录某个书的信息。一本书归属于某一个分类,因此boo

系统 2019-09-27 17:53:53 2556

Python

Python Numpy库datetime类型的处理详解

前言关于时间的处理,Python中自带的处理时间的模块就有time、datetime、calendar,另外还有扩展的第三方库,如dateutil等等。通过这些途径可以随心所欲地用Python去处理时间。当我们用NumPy库做数据分析时,如何转换时间呢?在NumPy1.7版本开始,它的核心数组(ndarray)对象支持datetime相关功能,由于'datetime'这个数据类型名称已经在Python自带的datetime模块中使用了,NumPy中时间数据

系统 2019-09-27 17:53:05 2556

Python

Python使用scipy模块实现一维卷积运算示例

本文实例讲述了Python使用scipy模块实现一维卷积运算。分享给大家供大家参考,具体如下:一介绍signal模块包含大量滤波函数、B样条插值算法等等。下面的代码演示了一维信号的卷积运算。二代码importnumpyasnpimportscipy.signalx=np.array([1,2,3])h=np.array([4,5,6])print(scipy.signal.convolve(x,h))#一维卷积运算三运行结果[413282718]四一维卷积

系统 2019-09-27 17:51:17 2556

Python

Python利用pandas处理Excel数据的应用

最近迷上了高效处理数据的pandas,其实这个是用来做数据分析的,如果你是做大数据分析和测试的,那么这个是非常的有用的!!但是其实我们平时在做自动化测试的时候,如果涉及到数据的读取和存储,那么而利用pandas就会非常高效,基本上3行代码可以搞定你20行代码的操作!该教程仅仅限于结合柠檬班的全栈自动化测试课程来讲解下pandas在项目中的应用,这仅仅只是冰山一角,希望大家可以踊跃的去尝试和探索!一、安装环境:1:pandas依赖处理Excel的xlrd模块

系统 2019-09-27 17:50:55 2556

Python

小小的Python编程故事

现在Python的火热已经不是整个编程界的事情了,Python的火热已经蔓延到小学、大学课程,之前看新闻报道说青岛的小学生课程里都开始设置Python的课程了,大学里由原来必考的VB也改成了Python。一时大家都掀起了学习了Python的热潮,而接踵而来的各种课程书籍的推荐,但是接踵而来的推荐也不能说看到推荐就购买,要选择合适的自己的书籍或者课程观看哦~今天就来为大家推荐一本适合孩子或者文科生所看的Python编程书籍!《小小的Python编程故事》,下

系统 2019-09-27 17:50:53 2556

Python

用python代码做configure文件

(在lua中通过loadfile,setfenv实现)python当然也可以:catconfig.pybar=10foo=100catpython_as_config.py:ns={}execfile('config.py',ns)print"\n".join(sorted(dir(ns)))print"*"*80printns['foo']printns['bar']缺点是不像lua那么可以以成员的方式访问table中的变量,如ns.foo,ns.bar

系统 2019-09-27 17:38:37 2556

Python

收集的几个Python小技巧分享

获得当前机器的名字:复制代码代码如下:defhostname():sys=os.nameifsys=='nt':hostname=os.getenv('computername')returnhostnameelifsys=='posix':host=os.popen('echo$HOSTNAME')try:hostname=host.read()returnhostnamefinally:host.close()else:return'Unkwonhos

系统 2019-09-27 17:38:03 2556

Python

[Python]Python/PHP如何查询sql server中NTEXT

[Python]Python/PHP如何查询sqlserver中NTEXT类型数据VersionDateCreatorDescription1.0.0.12006-11-23郑昀草稿继续阅读之前,我们假设您熟悉以下知识:nPython/PHPnSQLServer2000SP4以上版本的MicrosoftsqlservernpymssqlnNTEXT类型本文讨论了在Python中,如果利用pymssql来连接MicrosftSqlserver2000SP4以

系统 2019-08-12 01:33:40 2556

Python

Python 爬取qqmusic音乐url并批量下载

qqmusic上的音乐还是不少的,有些时候想要下载好听的音乐,但有每次在网页下载都是烦人的登录什么的。于是,来了个qqmusic的爬虫。至少我觉得for循环爬虫,最核心的应该就是找到待爬元素所在url吧。下面开始找吧(讲的不对不要笑我)#寻找url:这个url可不想其他的网站那么好找。把我给累得不轻,关键是数据多,从那么多数据里面挑出有用的数据,最后组合为music真正的music。昨天做的时候整理的几个中间url:#url1:https://c.y.qq

系统 2019-09-27 17:52:45 2555

Python

python调用摄像头拍摄数据集

之前需要做一些目标检测的训练,需要自己采集一些数据集,写了一个小demo来实现图片的采集使用方法:指定name的名称,name为分类的标签按n键拍摄图片程序会在当前目录下生成一个pictures的文件夹,图片存放在其中print("正在初始化摄像头...")importcv2importosimportdatetimecap=cv2.VideoCapture(0)print("初始化成功!")#name='play_phone'#name='haqian'

系统 2019-09-27 17:46:30 2555

Python

python中如何实现将数据分成训练集与测试集的方法

接下来,直接给出大家响应的代码,并对每一行进行标注,希望能够帮到大家。需要用到的是库是。numpy、sklearn。#导入相应的库(对数据库进行切分需要用到的库是sklearn.model_selection中的train_test_split)importnumpyasnpfromsklearn.model_selectionimporttrain_test_split#首先,读取.CSV文件成矩阵的形式。my_matrix=np.loadtxt(ope

系统 2019-09-27 17:57:13 2554

Python

python 在某.py文件中调用其他.py内的函数的方法

假设名为A.py的文件需要调用B.py文件内的C(x,y)函数假如在同一目录下,则只需importBif__name__=="__main__":B.C(x,y)若只需调用单个函数,也可以fromBimportCif__name__=="__main__":C(x,y)若A.py和B.py位于不同的目录下,可以用以下方法(假设B.py位于D盘的根目录下)1.引用所在路径importsyssys.path.append('D:/')importBif__na

系统 2019-09-27 17:56:22 2554

Python

python打开网页和暂停实例

本文实例讲述了python打开网页和暂停的方法。分享给大家供大家参考。具体实现代码如下:importwebbrowserimportoswebbrowser.open_new_tab("//www.jb51.net/")os.system("pause")#运行windows的pause命令,等待用户输入i=0whilei<100:ifdownloadUrlList==None:breakwebbrowser.open_new_tab(downloadUr

系统 2019-09-27 17:55:52 2554