samzhangjy samzhangjy
4年前
BaiduSpider:一个爬取百度的利器
BaiduSpider是一款基于Python的百度搜索结果爬虫,支持多种搜索结果。这篇文章将从多个方面介绍BaiduSpider。什么是BaiduSpider?BaiduSpider是一款强大但轻量的百度搜索结果提取器,基于BeautifulSoup4和requests。它支持多种搜索结果,包括百度网页搜索,百度图片搜索,百度知道搜索,百度视频搜索,百度资
Easter79 Easter79
3年前
tensorFlow
先介绍一下TensorFlow自带的数据格式:TensorFlow自带一种数据格式叫做tfrecords。你可以把你的输入转成专属与TensorFlow的tfrecords格式并保存在本地。\关于输入碎碎念:输入比如图片,可以有各种格式呀首先你从网上下载到的一般是png或者jpg格式的吧,你可以把它存成一个矩阵的形式(numpynda
Stella981 Stella981
3年前
Serverless Framework + OCR 快速搭建通用文字识别应用
在日常的工作生活中,文字识别与我们息息相关,比如身份证识别、随手拍扫描、纸质文档电子化等,无不显示着文字识别技术的重要性。为此,腾讯云通用文字识别产品GeneralOCR应运而生,基于行业前沿的深度学习技术,支持将图片上的文字内容智能识别为可编辑的文本,大幅提升信息处理效率。而ServerlessFramework与OCR的结合,则为用户提供
Stella981 Stella981
3年前
Python图像读写方法对比
  训练视觉相关的神经网络模型时,总是要用到图像的读写。方法有很多,比如matplotlib、cv2、PIL等。下面比较几种读写方式,旨在选出一个最快的方式,提升训练速度。实验标准  因为训练使用的框架是Pytorch,因此读取的实验标准如下:  1、读取分辨率都为1920x1080的5张图片(png格式一张,jpg格式四张)并保存到数
Wesley13 Wesley13
3年前
5分钟进阶3Par RAID
大家周三好。今天在贵阳和网友聚会未果(网友临时去紧急处理ORACLERAC问题去了,哎,IT都是苦逼的命啊)。西瓜哥空着肚子去了机场,发现机场居然有临时工位,太贴心了。本来打算写今天的文章,但是好像不能上传图片,罢了。回到帝都,发现空中看夜景真是漂亮,灯火通明,美轮美奂。可惜不能开手机拍照。看来APEC和风的效果一样,O(∩\_∩)O哈!
Stella981 Stella981
3年前
Flume架构以及应用介绍[转]
在具体介绍本文内容之前,先给大家看一下Hadoop业务的整体开发流程: !这里写图片描述(https://oscimg.oschina.net/oscnet/efca778a7edff4c4b6da9b25644f902d473.png)从Hadoop的业务开发流程图中可以看出,在大数据的业务处理过程中,对于数据的采集是十分重要的一步,也是不
Stella981 Stella981
3年前
Python js逆向 爬取X天下数据,好好看,好好学
本文的文字及图片来源于网络,仅供学习、交流使用,不具有任何商业用途,版权归原作者所有,如有问题请及时联系我们以作处理。之前讲过execjs这个库可以在python中运行js代码,这将极大的帮助我们解决逆向问题,找到加密位置不会重写怎么办、js代码太复杂怎么办,用execjs秒杀它。本次的受害者aHR0cHM6Ly9wYXNz
Stella981 Stella981
3年前
Django的View(视图)和路由系统
一、Django的View(视图)1、介绍一个视图函数(类),简称视图,是一个简单的Python函数(类),它接受Web请求并且返回Web响应。响应可以是一张网页的HTML内容,一个重定向,一个404错误,一个XML文档,或者一张图片。无论视图本身包含什么逻辑,都要返回响应。代码写在哪里也无所谓,只
Stella981 Stella981
3年前
Python之文件处理
Python之文件处理不同模式打开文件的完全列表:模式描述r以只读方式打开文件。文件的指针将会放在文件的开头。这是默认模式。rb以二进制格式打开一个文件用于只读。文件指针将会放在文件的开头。这是默认模式。一般用于非文本文件如图片等。r打开一个文件用于读写。文件指针将会放在文件的开头。r
Wesley13 Wesley13
3年前
Hadoop2.4编译 伪分布安装 集群安装笔记
安装hadoop的时候每次重新安装都有些配置会记不太清楚,要去查询很麻烦这次做了个笔记,在这里和大家分享下,如果内容有错误,请指正。因为是从word中复制出来的截的图片都没了,可以从下面链接中下载到word原版!之前没有写博客的习惯,以后会陆续分享一些之前的笔记!!微笑(http://static.oschina.net/uploads/img/2015