Stella981的头像 ID: 10708576052

Stella981

HelloWorld 社区成员

Stella981

文章16974
个人网站0
加入社区2026

Python的OO思想

想当年大二的时候,在学校学习Java,最牛逼的OO思想,用了3页纸就讲完了,还是清华大学出版社的呢。后来全凭自己啃视频,啃代码才搞懂什么叫做OO。现在学习Python,就用自己的方式,好好学习一次:OO的基本,是封装,继承,多态。首先是继承:定义一个类:classBird(object):have_fe

Python的Gevent框架的多进程模式

Gevent框架性能很高,但一直以来我都纠结在python的GIL模型导致的线程不能抢占多核资源上面。而启动多个python进程的这种利用多核的模式又需要增加前端负载均衡,比如lvs那些,有些麻烦。multiprocessing模块和os.fork又会使得两个进程重复在事件核心注册accept事件,导致文件句柄重复的异常。至于一个进程监听,多个进

Python的GUI编程(TK)

TK在大多数Unix平台、Windows平台和Macintosh系统都是预装好的,TKinter模块是TkGUI套件的标准Python接口。可实现Python的GUI编程。Tkinter模块("Tk接口")是python的标准TkGUI工具包的接口.Tk和Tkinter可以在大多数的Unix平台下使用,同样可以应用在Windows和Maci

Python生成词云

1概述利用Python生成简单的词云,需要的工具是cython,wordcloud与anaconda.2准备工作包括安装cython,wordcloud与anaconda.2.1安装anaconda下载官网(https://www.oschina.net/action/GoT

Python生成图片验证码

最近公司网站,需要在注册模块添加验证码,防止其他人频繁的恶意注册,我们后端使用的是python进行开发,所以研究了下python图片验证码的方法。最后确定使用python里面PIL库,通过Image,ImageDraw,ImageFont,ImageFilter的模块生成图片验证码设计思路(这里就不画图了):(1)用户填写用户名(必须先填)

Python环境搭建—安利Python小白的Python和Pycharm安装详细教程

人生苦短,我用Python。众所周知,Python目前越来越火,学习Python的小伙伴也越来越多。最近看到群里的小伙伴经常碰到不会安装Python或者不知道去哪下载Python安装包等系列问题,为了方便大家学习Python,小编整理了一套Python和Pycharm安装详细教程,只要大家按照这个步骤来,就可以轻松的搞定Python和Pycharm的安装了。

Python版的数据库查询构造器、ORM及动态迁移数据表。

OratorOrator提供一个简单和方便的数据库数据处理库。它的灵感来源于PHP的Laravel框架,借助其思想实现了python版的查询构造器和ORM。这是完整的文档:http://oratororm.com/docs(https://www.oschina.net/action/GoToLink?urlhttp%3A%2F

Python爬虫:现学现用xpath爬取豆瓣音乐

爬虫的抓取方式有好几种,正则表达式,Lxml(xpath)与BeautifulSoup,我在网上查了一下资料,了解到三者之间的使用难度与性能三种爬虫方式的对比。!(https://oscimg.oschina.net/oscnet/2daa493a02eeb49299b1ab6db462cb42124.png)这样一比较我我选择了Lx

Python爬虫:抓取手机APP的数据

1、抓取APP数据包方法详细可以参考这篇博文:http://my.oschina.net/jhao104/blog/605963(http://my.oschina.net/jhao104/blog/605963)得到超级课程表登录的地址:http://120.55.151.61/V2/StudentSkip/loginCheckV4.act

Python爬虫:一些常用的爬虫技巧总结

 用python也差不多一年多了,python应用最多的场景还是web快速开发、爬虫、自动化运维:写过简单网站、写过自动发帖脚本、写过收发邮件脚本、写过简单验证码识别脚本。爬虫在开发过程中也有很多复用的过程,这里总结一下,以后也能省些事情。1、基本抓取网页get方法import urllib2

Python爬虫,爬取实验楼全部课程

目的:使用requests库以及xpath解析进行实验楼所有课程,存入MySQL数据库中。准备工作:首先安装,requests库,lxml库,以及peewee库。在命令行模式,使用以下命令。pipinstallrequestspipinstalllxmlpipinstallpeew

Python爬虫需要注意的技巧

网络爬虫的要求有几点一. 一个好的网页解释器,python推荐BeautifulSoup,java推荐htmlparser。二.良好的性能,不能太慢,当遇上网络状况不大好的时候,慢更受不了,所以通常需要同时启动N个网络爬虫进行工作.使用队列可以很好解决这个问题。优化性能常见解决方案队列辅助多线程。三.

Python爬虫知识点全面梳理

学任何一门技术,都应该带着目标去学习,目标就像一座灯塔,指引你前进,很多人学着学着就学放弃了,很大部分原因是没有明确目标,所以,在你准备学爬虫前,先问问自己为什么要学习爬虫。有些人是为了一份工作,有些人是为了好玩,也有些人是为了实现某个黑科技功能。不过肯定的是,学会了爬虫,能给你的工作提供很多便利。作为零基础小白,大体上可分为三个阶段去实现,第一阶段是

Python爬虫教程

本篇是介绍在Anaconda环境下,创建Scrapy爬虫框架项目的步骤,且介绍比较详细Python爬虫教程31创建Scrapy爬虫框架项目首先说一下,本篇是在Anaconda环境下,所以如果没有安装Anaconda请先到官网下载安装Anaconda

Python爬虫实践 —— 4.好听音乐网轻音乐资源下载

第三章的requests库阶段性demo,爬取好听音乐网的榜上歌曲。此网站没有js混淆,音乐资源链接有规律,适合爬虫新手上手。首先观察首页和音乐榜的url链接关系,我们先手动模拟下载,chromef12获取response,可探查到url规律如下:1.!(https://oscimg.oschina.net/oscnet/485087a

Python爬虫实例:爬取猫眼电影——破解字体反爬

 字体反爬字体反爬也就是自定义字体反爬,通过调用自定义的字体文件来渲染网页中的文字,而网页中的文字不再是文字,而是相应的字体编码,通过复制或者简单的采集是无法采集到编码后的文字内容的。现在貌似不少网站都有采用这种反爬机制,我们通过猫眼的实际情况来解释一下。下图的是猫眼网页上的显示:!(https://oscimg.oschina.

Python爬虫原理与python爬虫实例大全

<divid"cnblogs\_post\_body"class"blogpostbody"<h2前言</h2<p简单来说互联网是由一个个站点和网络设备组成的大网,我们通过浏览器访问站点,站点把HTML、JS、CSS代码返回给浏览器,这些代码经过浏览器解析、渲染,将丰富多彩的网页呈现我们眼前;</p<p&nbsp;</p<h

Python爬虫初学

学习爬虫中,从最近自己写的爬虫小程序中抓截一点代码。加深下记忆。1.因为我已经安装了Python3,所以使用了urllib3库。2.要根据对应网页的数据格式进行解码,有的是utf8,有的是GB2312,当然可能还有其它。否则会报错。import urllib3import time因为我使用了Python3,所以使用urlli