搜索到与相关的文章
Python

Linux部署python爬虫脚本,并设置定时任务的方法

去年因项目需要,用python写了个爬虫。因爬到的数据需要存到生产环境的PG数据库。所以需要将脚本部署到CentOS服务器,并设置定时任务,自动启动脚本。实施步骤如下:1.安装pip(操作系统自带了python2.6可以直接用,但是没有pip)#下载pip安装包wget"https://pypi.python.org/packages/source/p/pip/pip-1.5.4.tar.gz#md5=834b2904f92d46aaa333267fb1c

系统 2019-09-27 17:53:15 2147

Python

在 Windows 上使用 Python 进行 web 开发

本文由葡萄城技术团队于原创并首发转载请注明出处:葡萄城官网,葡萄城为开发者提供专业的开发工具、解决方案和服务,赋能开发者。上一篇我们介绍了在Windows10下进行初学者入门开发Python的指南,在本篇中我们一起看一下看在Windows子系统(WSL)如何使用Python进行Web开发的循序渐进指南。设置开发环境我们建议在生成web应用程序时在WSL上安装Python。Pythonweb开发的许多教程和说明都是针对Linux用户编写的,并使用基于Linu

系统 2019-09-27 17:52:11 2147

Python

详解Python3 pandas.merge用法

摘要数据分析与建模的时候大部分时间在数据准备上,包括对数据的加载、清理、转换以及重塑。pandas提供了一组高级的、灵活的、高效的核心函数,能够轻松的将数据规整化。这节主要对pandas合并数据集的merge函数进行详解。(用过SQL或其他关系型数据库的可能会对这个方法比较熟悉。)码字不易,喜欢请点赞!!!1.merge函数的参数一览表2.创建两个DataFrame3.pd.merge()方法设置连接字段。默认参数how是inner内连接,并且会按照相同的

系统 2019-09-27 17:51:27 2147

Python

Python:Excel文件的写入

需要用到的库:操作xls格式的表格文件:读取:xlrd写入:xlwt修改(追加写入):xlutils操作Excel文件的实用工具,如复制、分割、筛选等操作xlsx格式的表格文件:读取/写入:openpyxl新建,写入内容,保存。#coding=utf-8importxlwtimportxlrdtry:#创建excel文件filename=xlwt.Workbook()#给工作表命名,testsheet=filename.add_sheet("test")#

系统 2019-09-27 17:51:19 2147

Python

python3.5 email实现发送邮件功能

本文实例为大家分享了python3.5email发送邮件的具体代码,供大家参考,具体内容如下直接套用代码即可fromemail.mime.textimportMIMETextfromemail.mime.imageimportMIMEImagefromemail.mime.baseimportMIMEBasefromemail.mime.multipartimportMIMEMultipartfromemailimportencodersimportsmt

系统 2019-09-27 17:51:12 2147

Python

Python——最美丽的编程语言

之前总听别人说Python有多厉害,有多好,我是不以为然的。但是当我开始接触Python的时候,我就知道它被誉为最美编程语言不是没有道理的。简短的代码,清晰明了的逻辑,方便快捷的编程工具让它注定会大放光彩。可能有人会说它的运行速度慢,但是在这个硬件配置不断更新换代的今天,这都不是问题。下面,让我们来一起了解Python语言。Python语言在计算生态的大背景下诞生、发展、再生,历时近30年,其简洁和面向生态的设计理念得到了广泛认同,形成了全球范围最大的单一

系统 2019-09-27 17:49:43 2147

Python

Python3.8技术手册

使用Python解释器1.1Python安装从源码编译安装python./configuremakemaketestsudomakeinstall默认python解释器安装在/usr/local/bin/python3.8,可以将/usr/local/bin放到path搜索路径中。在windows系统上,python一般安装在C:\Python38,在windows命令行中,执行命令setpath=%path%;C:\python38将该路径添加到path

系统 2019-09-27 17:49:19 2147

Python

【Python】flask框架 响应前端ajax请求

【Python】flask框架响应前端ajax请求前端JavaScript代码后端Python代码前端JavaScript代码//--------------------------------------------GET请求alert("GET");$.ajax(

系统 2019-09-27 17:49:16 2147

Python

【Python3爬虫】快就完事了--使用Celery加速你的爬虫

一、写在前面在上一篇博客中提到过对于网络爬虫这种包含大量网络请求的任务,是可以用Celery来做到加速爬取的,那么,这一篇博客就要具体说一下怎么用Celery来对我们的爬虫进行一个加速!二、知识补充1.classcelery.groupgroup这个类表示创建一组要并行执行的任务,不过一组任务是懒惰的,所以你需要运行并对其进行评估。要了解这个类,可以查看文档,或者在Pycharm中直接Ctrl+左键就能直接查看源码了,如下图:当然了,直接看源码还不够,最好

系统 2019-09-27 17:48:01 2147

Python

python+selenium自动化测试框架中页面操作总结

Python+selenium是当前常用的自动化测试环境之一,在自动化测试框架中,常用的是POM模型,下面是对常用的页面操作的总结:1、输入框:fromseleniumimportwebdriver#定位文本框tk=driver.get_element_by_id("id")#清空文本框tk.clear()#文本框中输入内容tk.send_keys("value")2、下拉选择框a、通过select进行定位下拉框------通过代码段定位#导入Select

系统 2019-09-27 17:47:53 2147