去年因项目需要，用python写了个爬虫。因爬到的数据需要存到生产环境的PG数据库。所以需要将脚本部署到CentOS服务器，并设置定时任务，自动启动脚本。实施步骤如下：1.安装pip（操作系统自带了python2.6可以直接用，但是没有pip）#下载pip安装包wget"https://pypi.python.org/packages/source/p/pip/pip-1.5.4.tar.gz#md5=834b2904f92d46aaa333267fb1c
系统 2019-09-27 17:53:15 2229
python的版本经过了python2.x和python3.x等版本，无论哪种版本，关于python爬虫相关的知识是融会贯通的，脚本之家关于爬虫这个方便整理过很多有价值的教程，小编通过本文章给大家做一个关于python爬虫相关知识的总结，以下就是全部内容：python爬虫的基础概述1.什么是爬虫网络爬虫，即WebSpider，是一个很形象的名字。把互联网比喻成一个蜘蛛网，那么Spider就是在网上爬来爬去的蜘蛛。网络蜘蛛是通过网页的链接地址来寻找网页的。从
系统 2019-09-27 17:52:41 2229
forwhile选择使用哪种循环技巧：不知道循环多少次的用while，知道循环多少次的用for能用for不用whileforiin"abc":print(i)第一次：取a存到i里面，然后执行for的代码块第二次：取b存到i里面，然后执行for的代码块第三次：取c存到i里面，然后执行for的代码块foriinrange(5):print(i)ifi==3:continueelse:print(“nobreak”)总结：只要循环体内部没有执行break就会执行
系统 2019-09-27 17:52:37 2229
密码算法程序设计实践选的SHA-1。在写的过程中遇到一丢丢关于python移位的问题，记录一下。SHA-1其中第一步需要填充消息。简单阐述一下sha1填充消息的过程：如输入消息“123”，先转成ascii码――313233，消息长度为3*8=24。即001100010011001000110011然后填充一个1占1bit，再填充447-24bit个0。10000000...00000000最后64bit加上消息长度24的二进制00011000二进制相当于是
系统 2019-09-27 17:52:18 2229
爬虫成果当你运行代码后,文件夹就会越来越多，如果爬完的话会有2000多个文件夹，20000多张图片。不过会很耗时间，可以在最后的代码设置爬取页码范围。本文目标熟悉Requests库，BeautifulSoup库熟悉多线程爬取送福利，妹子图网站结构我们从http://meizitu.com/a/more_1.html这个链接进去，界面如图一所示图一：可以看到是一组一组的套图，点击任何一组图片会进入到详情界面，如图二所示图二:可以看到图片是依次排开的，一般会有
系统 2019-09-27 17:51:31 2229
Python及Pycharm安装方法，供大家参考，具体内容如下1、任务简介为了学习Python我今天对它进行了安装，整个安装过程忘了截图，故我在虚拟机中重新安装了一遍，并将Python及Pycharm安装方法进行了分享，希望可以给大家一些帮助。注：虚拟机系统我未分盘，故均安装于虚拟机的系统盘C盘中，建议大家在实际安装过程中不要将软件安装到系统盘中。2、Python安装1）首先需要进入Python官网下载安装包，进入后点击Downloads然后选择Pytho
系统 2019-09-27 17:50:54 2229
今天向大家介绍app爬取。文章目录一：爬取主要流程简述二：抓包工具Charles1.Charles的使用2.安装(1)安装链接(2)须知(3)安装后3.证书配置(1)证书配置说明(2)windows系统安装证书配置(3)Android手机安装证书配置4.开启SSL监听5.原理6.抓包三：抓包工具mitmproxy(免费的)1.简介2.关联组件3.安装和证书配置(1)用pip安装(2)在GitHub或官网上安装3.证书配置(1)产生CA证书4.抓包原理5.设
系统 2019-09-27 17:50:36 2229
Python内置了多种类型的数据结构，常用的有：列表、元组、集合和字典。本文主要介绍列表和元组。列表(list)和元组(tuple)定义列表和元组，都是一个可以放置任意数据类型的有序集合。列表和元组的区别列表是动态的，长度大小不固定，可以随意增加、删减或者改变元素（mutable）。元组是静态的，长度大小固定，无法增加删减或改变（immutable）。如果要对已有的元组做任何“改变”，只能重新开辟一块内存，创建新的元组。#列表(list)list=[1,2
系统 2019-09-27 17:47:55 2229
摘要本文为系列博客tensorflow模型部署系列的一部分，用于实现通用模型的部署。通用主要体现在通过tensorboard图从已保存的模型中还原并查看模型详细结构，以及自定义模型的输入输出tensor。相关源码见链接引言本文为系列博客tensorflow模型部署系列的一部分，用于python语言实现通用模型的部署。通用主要体现在通过tensorboard图从已保存的模型中还原并查看模型详细结构，以及自定义模型的输入输出tensor。本文主要使用keras
系统 2019-09-27 17:47:35 2229
起因深夜忽然想下载一点电子书来扩充一下kindle，就想起来python学得太浅，什么“装饰器”啊、“多线程”啊都没有学到。想到廖雪峰大神的python教程很经典、很著名。就想找找有木有pdf版的下载，结果居然没找到！！CSDN有个不完整的还骗走了我一个积分！！尼玛！！怒了，准备写个程序直接去爬廖雪峰的教程，然后再html转成电子书。过程过程很有趣呢，用浅薄的python知识，写python程序，去爬python教程，来学习python。想想有点小激动……
系统 2019-09-27 17:47:00 2229
