如何在爬取页面中嵌套的图片验证码时获取到图片内容?
时间:2024-12-14 12:13:05 130浏览 收藏
本篇文章给大家分享《如何在爬取页面中嵌套的图片验证码时获取到图片内容?》,覆盖了文章的常见基础知识,其实一个语言的全部知识点一篇文章是不可能说完的,但希望通过这些问题,让读者对自己的掌握程度有一定的认识(B 数),从而弥补自己的不足,更好的掌握它。
爬取页面中嵌套的图片验证码
在爬取图片验证码时,我们通常会直接抓取图片的url,然后保存本地。然而,有时我们会遇到这种情况,图片验证码并不会直接展示在页面上,而是通过其他方式加载。
如题中的例子所示,验证码通过一个单独的url进行加载,该url地址中包含了图片的日期信息。如何才能成功抓取到这种情况下的图片验证码呢?
这个问题可以用http请求头解决,通过带上网站的cookie信息,我们可以直接访问到jfif的返回内容,再将该二进制文件存入本地即可识别为图片。
在代码中,我们首先构造一个http请求,并在请求头中带上cookie信息,然后使用该请求发送至图片验证码url。最后,将获取到的二进制内容存入本地即可。
在java中实现代码大致如下:
URL url = new URL("http://jx.189.cn/public/v4/common/control/page/image.jsp?date=Wed%20May%2029%202019%2010:26:32%20GMT+0800%20(%E4%B8%AD%E5%9B%BD%E6%A0%87%E5%87%86%E6%97%B6%E9%97%B4)"); HttpURLConnection conn = (HttpURLConnection) url.openConnection(); conn.setRequestProperty("Cookie", "YOUR_COOKIE_HERE"); conn.connect(); InputStream is = conn.getInputStream(); FileOutputStream os = new FileOutputStream("captcha.jpg"); byte[] buffer = new byte[1024]; int len; while ((len = is.read(buffer)) > 0) { os.write(buffer, 0, len); } os.close(); is.close();
执行这段代码即可成功获取到图片验证码,并将其保存为本地文件。
好了,本文到此结束,带大家了解了《如何在爬取页面中嵌套的图片验证码时获取到图片内容?》,希望本文对你有所帮助!关注golang学习网公众号,给大家分享更多文章知识!
相关阅读
更多>
-
501 收藏
-
501 收藏
-
501 收藏
-
501 收藏
-
501 收藏
最新阅读
更多>
-
450 收藏
-
332 收藏
-
332 收藏
-
311 收藏
-
346 收藏
-
377 收藏
课程推荐
更多>
-
- 前端进阶之JavaScript设计模式
- 设计模式是开发人员在软件开发过程中面临一般问题时的解决方案,代表了最佳的实践。本课程的主打内容包括JS常见设计模式以及具体应用场景,打造一站式知识长龙服务,适合有JS基础的同学学习。
- 立即学习 542次学习
-
- GO语言核心编程课程
- 本课程采用真实案例,全面具体可落地,从理论到实践,一步一步将GO核心编程技术、编程思想、底层实现融会贯通,使学习者贴近时代脉搏,做IT互联网时代的弄潮儿。
- 立即学习 507次学习
-
- 简单聊聊mysql8与网络通信
- 如有问题加微信:Le-studyg;在课程中,我们将首先介绍MySQL8的新特性,包括性能优化、安全增强、新数据类型等,帮助学生快速熟悉MySQL8的最新功能。接着,我们将深入解析MySQL的网络通信机制,包括协议、连接管理、数据传输等,让
- 立即学习 497次学习
-
- JavaScript正则表达式基础与实战
- 在任何一门编程语言中,正则表达式,都是一项重要的知识,它提供了高效的字符串匹配与捕获机制,可以极大的简化程序设计。
- 立即学习 487次学习
-
- 从零制作响应式网站—Grid布局
- 本系列教程将展示从零制作一个假想的网络科技公司官网,分为导航,轮播,关于我们,成功案例,服务流程,团队介绍,数据部分,公司动态,底部信息等内容区块。网站整体采用CSSGrid布局,支持响应式,有流畅过渡和展现动画。
- 立即学习 484次学习