搜索到与相关的文章
Python

python爬虫小案例_从豆瓣爬取多页的图书信息保存到数据库(MongoDB)

一、在豆瓣网爬取以下图书的信息:二、参考代码:1、连接MongoDB数据库,并且创建数据库和表importpymongomyclient=pymongo.MongoClient("mongodb://127.0.0.1:27017/")db=myclient['webCrawler']#创建数据库webCrawlerdatatable=db['Book_info']#创建Book_info表2、爬取数据并且存储到数据库importreimportpanda

系统 2019-09-27 17:56:44 2077

Python

Python 文件处理注意事项总结

Python文件处理注意事项总结文件处理在编程中是常见的操作,文件的打开,关闭,重命名,删除,追加,复制,随机读写非常容易理解和使用。需要注意的是文件的安全关闭,采用with语句轻松便捷:withopen(pathname,”r”)asmyfile:do_some_with(myfile)1.CSV的文件处理csv模块可以很好地处理csv文件,而Pandas模块则可以较好的处理大型的csv文件,还可以处理HTML等,并提供分块处理。2.XML的文件处理对于

系统 2019-09-27 17:56:11 2077

Python

python分割文件的常用方法

本文大家整理了一些比较好用的关于python分割文件的方法,方法非常的简单实用。分享给大家供大家参考。具体如下:例子1指定分割文件大小配置文件config.ini:复制代码代码如下:[global]#原文件存放目录dir1=F:\work\python\3595\pyserver\test#新文件存放目录dir2=F:\work\python\3595\pyserver\test1python代码如下:复制代码代码如下:#!/usr/bin/python#

系统 2019-09-27 17:54:53 2077

Python

python sqlite3 基本操作

创建数据库importsqlite3#连接数据库(如果不存在则创建)conn=sqlite3.connect('test.db')print("Openeddatabasesuccessfully")#创建游标c=conn.cursor()#SQL语句sql="""CREATETABLESTUDENTS(IDINTPRIMARYKEYNOTNULL,NAMETEXTNOTNULL,AGEINTNOTNULL,ADDRESSCHAR(50));"""#创建表

系统 2019-09-27 17:53:45 2077

Python

python爬虫第6关csv&excel

前面讲到json是特殊的字符串。其实,csv也是一种字符串文件的格式,它组织数据的语法就是在字符串之间加分隔符——行与行之间是加换行符,同列之间是加逗号分隔。它可以用任意的文本编辑器打开(如记事本),也可以用Excel打开,还可以通过Excel把文件另存为csv格式(因为Excel支持csv格式文件)。将我们刚刚写入的csv文件下载到本地电脑,再用记事本打开,你会看到:用Excel打开,则是这样的:发现了吗?csv文件里的逗号可以充当分隔同列字符串的作用。

系统 2019-09-27 17:53:37 2077

Python

Appium+python自动化(二十五)- 那些让人抓耳挠腮、揪头发和掉头发

简介在前边的第二十二篇文章里,已经分享了通过获取控件的坐标点来获取点击事件的所需要的点击位置,那么还有没有其他方法来获取控件点击事件所需要的点击位置呢?答案是:Yes!因为在不同的大小屏幕的手机上获取控件的坐标点,不是一样的,而是有变化的,因此在不同的手机机型上,我们可能都需要重新获取坐标点,这么操作起来,如果操作控件特别的多,那么获取控件的坐标点就会显得特别的繁琐。因此我们可以通过获取控件的ID来避免获取控件坐标点的这种弊端。通过控件ID实现自动化脚本的

系统 2019-09-27 17:53:35 2077

Python

第7课 python 布尔值和四种语句

是不是已经很有感觉,Python你觉得自己可以做点简单的事情了?恭喜了。(还不行?重新看看1-6课时,另外请我吃饭,慢慢教你也可以)本课,我们说bool-布尔;只有2种情况真/假;或者叫0/1;或者True/Flase在python中True/Flase第1个字母都是大写,为什么?规定。。。。。。你写了true报错,别要说我无跟你说;其次bool用在什么场景?条件判断的时候,好像if或while的情况,都需要如果为真,就如何的场景:name="samly7

系统 2019-09-27 17:50:37 2077

Python

118 Python程序中的线程操作-守护线程

[TOC]一、守护线程无论是进程还是线程,都遵循:守护xx会等待主xx运行完毕后被销毁。需要强调的是:运行完毕并非终止运行。对主进程来说,运行完毕指的是主进程代码运行完毕对主线程来说,运行完毕指的是主线程所在的进程内所有非守护线程统统运行完毕,主线程才算运行完毕1.1详细解释主进程在其代码结束后就已经算运行完毕了(守护进程在此时就被回收),然后主进程会一直等非守护的子进程都运行完毕后回收子进程的资源(否则会产生僵尸进程),才会结束。主线程在其他非守护线程运

系统 2019-09-27 17:49:52 2077

Python

python 生成器生成杨辉三角的方法(必看)

用Python写趣味程序感觉��诺模�停不下来#生成器生成展示杨辉三角#原理是在一个2维数组里展示杨辉三角,空的地方用0,输出时,转化为''defyang(line):n,leng=0,2*line-1f_list=list(range(leng+2))#预先分配,insert初始胡会拖慢速度,最底下一行,左右也有1个空格#全部初始化为0fori,vinenumerate(f_list):f_list[v]=0ZEROLIST=f_list[:]#预留一个

系统 2019-09-27 17:48:29 2077

Python

python基础_高级变量类型

高级变量类型目标列表元组字典字符串公共方法变量高级知识点回顾Python中数据类型可以分为数字型和非数字型数字型整型(int)浮点型(float)布尔型(bool)真True非0数——非零即真假False0复数型(complex)主要用于科学计算,例如:平面场问题、波动问题、电感电容等问题非数字型字符串列表元组字典在Python中,所有非数字型变量都支持以下特点:都是一个序列sequence,也可以理解为容器取值[]遍历forin计算长度、最大/最小值、比

系统 2019-09-27 17:48:24 2077