Python爬取免费IP代理时,无法解析到数据

Python进阶者
• 阅读 57

大家好,我是Python进阶者。

一、前言

前几天在Python最强王者交流群【ZXS】问了一个Python网络爬虫实战问题。问题如下:

我这里遇到一个问题:【爬取免费IP代理时,无法解析到数据】, 我通过 xpath,css定位到了元素,但是在运行时返回空列表,请问我该怎么解决呀 以下是解析数据的截图:

他自己提供了数据和写的代码如下:

Python爬取免费IP代理时,无法解析到数据

不过代码得到的结果不是自己想要的。

Python爬取免费IP代理时,无法解析到数据

二、实现过程

这里【吴超建】给了一个思路:css貌似写得不对。并且给出了对应html解析。

Python爬取免费IP代理时,无法解析到数据

后来才发现粉丝自己把网站搞错了,真是太尴尬了。

Python爬取免费IP代理时,无法解析到数据

不过针对粉丝当前的代码,不换网站的话,修改xpath后也是可以跑的通的。

Python爬取免费IP代理时,无法解析到数据

顺利地解决了粉丝的问题。

Python爬取免费IP代理时,无法解析到数据

如果你也有类似这种Python相关的小问题,欢迎随时来交流群学习交流哦,有问必答!

三、总结

大家好,我是Python进阶者。这篇文章主要盘点了一个Python库安装的问题,文中针对该问题,给出了具体的解析和代码实现,帮助粉丝顺利解决了问题。

最后感谢粉丝【ZXS】提出的问题,感谢【吴超建】给出的思路,感谢【莫生气】等人参与学习交流。

【提问补充】温馨提示,大家在群里提问的时候。可以注意下面几点:如果涉及到大文件数据,可以数据脱敏后,发点demo数据来(小文件的意思),然后贴点代码(可以复制的那种),记得发报错截图(截全)。代码不多的话,直接发代码文字即可,代码超过50行这样的话,发个.py文件就行。

Python爬取免费IP代理时,无法解析到数据

点赞
收藏
评论区
推荐文章
Karen110 Karen110
2年前
手把手教你使用XPath爬取免费代理IP
大家好,我是霖hero。前言可能有人说,初学者Python爬虫爬数据太难啦,构造正则表达式的时候,太烦琐了,眼睛都看花了,而且前一秒还可以愉快地爬取,下一秒IP就被封了,这还爬个屁啊,不爬了。哎,不要着急,这篇文章我们教你如何使用XPath来爬取快代理中的免费代理IP,告别眼花,告别IP被封的烦恼。XPath首先我们来简单了解一下XPath,想要了解更多
Python进阶者 Python进阶者
1年前
盘点一个Python网络爬虫+正则表达式处理案例
大家好,我是Python进阶者。一、前言前几天在Python白银交流群【鑫】问了一个Python网络爬虫的问题,提问截图如下:!(https://uploadimages.jianshu.io/upload_images/2623
Python进阶者 Python进阶者
1年前
该字段看上去是个列表字典嵌套,怎么只取出name对应的内容呢?
大家好,我是Python进阶者。一、前言前几天在Python最强王者交流群【WYM】问了一个Pandas处理的问题,提问截图如下:!(https://uploadimages.jianshu.io/upload_images/26
Python进阶者 Python进阶者
1年前
取出df3["text"]里 tblActors字段的内容,如果没有就填充一个值,怎么破?
大家好,我是Python进阶者。一、前言前几天在Python最强王者交流群【WYM】问了一个Pandas处理的问题,提问截图如下:!(https://uploadimages.jianshu.io/upload_images/26
Python进阶者 Python进阶者
2个月前
Python网络爬虫存储数据时,只有一页数据,后面的数据会把前面的数据覆盖?
大家好,我是Python进阶者。一、前言前几天在Python最强王者交流群【ZXS】问了一个Python网络爬虫实战问题。问题如下:我遇到了一个问题:【就是在存储数据时,只有一页数据,后面的数据会把前面的数据覆盖,而不是全部的数据】,【思路】:通过解析到的
Python进阶者 Python进阶者
1个月前
读取设置密码保护的excel文件,有没有更好的办法?
大家好,我是Python进阶者。一、前言前几天在Python最强王者交流群【wen】问了一个Python处理Excel加密文件读取问题。问题如下:请教:读取设置了密码保护的exlce文件,dfpd.readexcel(file,password'12345
Python进阶者 Python进阶者
1个月前
盘点一个Python基础的问题
大家好,我是Python进阶者。一、前言前几天在Python最强王者交流群【金光灿灿】问了一个Python基础的问题。问题如下:请问为什么我下面的代码,无论输入什么都是输出else里面的内容啊?kushuju"小明":"1","小红":"2","小方":"
Python进阶者 Python进阶者
4星期前
盘点一个dbeaver导入csv文件到sql server报错的一个问题
大家好,我是Python进阶者。一、前言前几天在Python最强王者交流群【金光灿灿】问了一个dbeaver导入csv文件到sqlserver报错的一个问题,问题如下:我在使用dbeaver导入csv文件到sqlserver时一直出现Can'tparsen
Python进阶者 Python进阶者
1星期前
python读取一个文件里面几百个csv数据集然后按照列名合并一个数据集
大家好,我是Python进阶者。一、前言前几天在Python最强王者交流群【FiNε】问了一个Python自动化办公,问题如下:python读取一个文件里面几百个csv数据集然后按照列名合并一个数据集。二、实现过程这里【隔壁😼山楂】给了一个解答,如下图所
Python进阶者 Python进阶者
4天前
有没有大佬知道这种数据应该怎么抓取呀?
大家好,我是Python进阶者。一、前言前几天在Python白银交流群【王者级混子】问了一个Python网络爬虫的问题。问题如下:有没有大佬知道这种数据应该怎么抓取呀?我鼠标移到上面才会出现的数据。二、实现过程这里【Crazy】和【此类生物】给了一个指导。