搜索到与相关的文章
Python

python多线程+代理池爬取天天基金网、股票数据过程解析

简介提到爬虫,大部分人都会想到使用Scrapy工具,但是仅仅停留在会使用的阶段。为了增加对爬虫机制的理解,我们可以手动实现多线程的爬虫过程,同时,引入IP代理池进行基本的反爬操作。本次使用天天基金网进行爬虫,该网站具有反爬机制,同时数量足够大,多线程效果较为明显。技术路线IP代理池多线程爬虫与反爬编写思路首先,开始分析天天基金网的一些数据。经过抓包分析,可知:./fundcode_search.js包含所有基金的数据,同时,该地址具有反爬机制,多次访问将会

系统 2019-09-27 17:57:51 2539

Python

python的数据类型之字符串(一)

字符串(str)双引号或者单引号中的数据,就是字符串.注意事项1、反斜杠可以用来转义,使用r可以让反斜杠不发生转义。2、字符串可以用+运算符连接在一起,用*运算符重复。3、Python中的字符串有两种索引方式,从左往右以0开始,从右往左以-1开始。4、Python中的字符串不能改变“+”可以直接连接多个字符串“*”可以重复多个相同的字符串字符串的截取(切片)下标字符串的下标是从0开始的,列如字符串,"xiaose",x的下标则0,i的下标则为1,接下来的就

系统 2019-09-27 17:57:17 2539

Python

python实现在无须过多援引的情况下创建字典的方法

本文实例讲述了python实现在无须过多援引的情况下创建字典的方法。分享给大家供大家参考。具体实现方法如下:1.使用itertools模块importitertoolsthe_key=['ab','22',33]the_vale=['aaaa',"dddddddd",'22222222222']d=dict(itertools.izip(the_key,the_vale))printd2.加参数dict=dict(red=1,bule=2,yellow=3

系统 2019-09-27 17:56:32 2539

Python

django的优缺点总结 - Python Web开发面试必备

·Django是利用Python语言从事Web开发的首选框架。如果你以后想从事pythonweb开发工作,就必需了解其优缺点。这些都可能会是你将来的面试题哦。他采用了MVC模式,什么是MVC?大家不要着急,MVC这么好的东西我在下面会精细的讲一下!Django最初是被开发来用于管理劳伦斯出版集团下的一些以新闻为主内容的网站。一款CMS(内容管理系统)软件。并于2005年7月在BSD许可证下发布。这套框架是以比利时的吉普赛爵士吉他手DjangoReinhar

系统 2019-09-27 17:55:56 2539

Python

python模拟键盘输入 切换键盘布局过程解析

PostMessage()defkeyHwnd(hwndEx,char):"""向指定控件输入值:paramhwndEx:控件句柄:paramchar:字符串:return:TrueorFlase"""try:for_inchar:print('key:%sascii:%d'%(_,ord(_)))win32api.PostMessage(hwndEx,win32con.WM_CHAR,ord(_),0)time.sleep(random.uniform(

系统 2019-09-27 17:55:32 2539

Python

Python中查看变量的类型内存地址所占字节的大小

Python中查看变量的类型,内存地址,所占字节的大小查看变量的类型#利用内置type()函数>>>nfc=["Packers","49"]>>>afc=["Ravens","48"]>>>combine=zip(nfc,afc)>>>type(combine)查看变量的内存地址#利用内置函数id(),是以十进制显示>>>id(nfc)2646554913160>>>id(afc)2646554913544查看变量所占字节的大小>>>importsys>>

系统 2019-09-27 17:55:23 2539

Python

Python入门_浅谈for循环、while循环

Python中有两种循环,分别为:for循环和while循环。1.for循环for循环可以用来遍历某一对象(遍历:通俗点说,就是把这个循环中的第一个元素到最后一个元素依次访问一次)。for循环的基本结构如下:具体看这个案例:设计一个函数,在桌面创建10个文本,用数字从1-10依次给它们命名。deftext_create():path='/Users/duwangdan/Desktop/'fortext_nameinrange(1,11):#1-10的范围需

系统 2019-09-27 17:55:05 2539

Python

python爬取全国公交线路---bs4方法

这里主要讲了bs4解析方法和json方法,以8684网页为例子,爬取了全国公交线路importrequestsimporttimefrombs4importBeautifulSoupimportjsonfromxpinyinimportPinyinheaders={'User-Agent':'Mozilla/5.0(WindowsNT10.0;Win64;x64)AppleWebKit/537.36(KHTML,likeGecko)Chrome/76.0.

系统 2019-09-27 17:53:12 2539

Android

【Android基础】获取手机分辨率、状态栏、标题

在开发手机应用时,除了对API的掌握外,更重要的还是画面。对于画面,屏幕分辨率又是很重要的一个因素。由于手机屏幕尺寸各不相同,在画面布局时就需要考虑这个问题。Android可以设置为随着窗口大小调整缩放比例,但即便如此,手机程序设计人员还是必须知道手机屏幕边界,以免布局变形。下面我们就讲一下,如何通过代码获取手机屏幕的分辨率,代码其实很简单,关键是android.util.DisplayMetrics这个类。该类记录了一些常用信息,如显示信息、大小、维度、

系统 2019-08-29 23:39:53 2539

编程技术

DataRabbit 轻量的数据访问框架(03) -- IOr

本文将接着DataRabbit轻量的数据访问框架--IOrmAccesser继续介绍IOrmAccesser的一些高级功能。这些高级功能需要DataRabbit.ORM.ISmartEntity接口的支持。注意,对于Entityclass来说,该接口并不是强制的。(1)关于含自增字段的Entity插入:插入后,Entity中对应自增字段的属性将被正确地赋为数据库中自增结果值。如果Entityclass继承了ISmartEntity接口,那么这个Entity

系统 2019-08-29 23:24:37 2539