Python项目实战篇之常用验证码标注&识别(数据采集/预处理/字符图切割)

开发 后端
数据采集:根据图片验证码链接进行批量下载图片,最开始时下载个20张先进行手动改文件名进行标注,下载这块代码编写不难,这里不贴代码了,见image_download.py文件。

[[423249]]

大家好,我是Snowball。

一、前言

上一篇文章小编给大家讲解了需求分析和实现思路,Python项目实战篇——常用验证码标注和识别(需求分析和实现思路),这篇文章继续沿着上一篇文章的内容,给大家讲解下数据采集/预处理/字符图切割内容。

二、数据采集

数据采集:根据图片验证码链接进行批量下载图片,最开始时下载个20张先进行手动改文件名进行标注,下载这块代码编写不难,这里不贴代码了,见image_download.py文件。

三、预处理

预处理:根据需求分析中的字符切割描述,针对笔者的图片验证码案例情况,需要先进行常规验证码图片预处理,预处理通过OpenCV库实现,处理过程为:

  1. 原始图->灰度图->中值滤波->二值化->轮廓检测绘制(部分情况才可以加)->字符切割填充 

大概过程功能简单描述如下,详细原理可以参考OpenCV相关文章和视频,引用链接:

  1. [3.OpenCV文章专栏](https://blog.csdn.net/yukinoai/category_9283880.html) 
  2. [4.OpenCV-Python视频](https://www.bilibili.com/video/BV1tb4y1C7j7) 

原始图(RGB)转灰度图:去除颜色信息,减少图片大小,单通道值方便滤波处理。读者可以脑洞一下,不去除颜色信息,能提取到指定字符颜色的轮廓吗?

灰度图中值滤波:进行噪音去除,取中间像素平均值

二值化:只留下0、255二种值,方便轮廓检测

轮廓检测:这一步主要用于提取字符轮廓矩形坐标,不适合字符挨得特别紧的情况

字符切割填充:根据生成的字符轮廓图片矩形坐标进行切割再填充对齐到指定宽高

具体执行效果如下:

下面是预处理过程部分核心代码,详细代码见image_split.py文件。

  1. def pre_process_image(img, file_name): 
  2.     # 去除边缘 
  3.     img = img[2:-2, 2:-2] 
  4.     # print(img.shape) 
  5.  
  6.     #得到灰度图 
  7.     gray = cv2.cvtColor(img, cv2.COLOR_BGR2GRAY) 
  8.     # show("gray", gray) 
  9.  
  10.     #去除噪音 
  11.     blur = cv2.medianBlur(gray, 3) 
  12.     # show("blur", blur) 
  13.  
  14.     temp = gray.mean().item() 
  15.     #二值化 
  16.     ret, threshold = cv2.threshold(blur, temp, 255, cv2.THRESH_BINARY) 
  17.     # show("threshold", threshold) 
  18.  
  19.     #保存二值化图片 
  20.     if IS_SAVE_FILE: 
  21.         cv2.imwrite(DST_IMG_DIR + file_name + "_threshold.png", threshold) 
  22.     return threshold 

执行图片预处理程序后具体效果图1-3如下:

轮廓检测绘制结果1:

根据图片轮廓进行字符切割结果2:

根据字符切割图片进行文件分类结果3:

以上就是字符图片切割的全部过程了,核心过程代码如下:

  1. def split_image(file_path): 
  2.     file_name = get_file_name(file_path) 
  3.     img = read_image(file_path) 
  4.  
  5.     #验证码预处理 
  6.     threshold = pre_process_image(img, file_name) 
  7.  
  8.     #查找轮廓边界列表 
  9.     contours = find_counters(threshold) 
  10.  
  11.     #过滤合适的轮廓矩形列表 
  12.     rect_list,result_rect = get_filter_rect(contours, img, file_name) 
  13.  
  14.     #分割矩形图片 
  15.     return split_rect_img(file_path, threshold, rect_list, result_rect) 

详细代码可以阅读源码,这里说一下这个过程中笔者编写预处理代码遇到的几个问题:

  1. 部分图片轮廓检测可以检测到多个轮廓,部分图片只有1-2个轮廓,部分可能一个轮廓都没有,这里代码进行了相应的调整处理,比如过滤大的外部轮廓和较小的内部轮廓,根据剩下的轮廓进行坐标排序,根据部分坐标得到所有字符轮廓
  2. 得到4个字符轮廓图片后,每个图片大小不一致,需要进行大小补齐,这个宽高参数需要根据数据集进行调整

以上就是数据采集/预处理的实现过程了,这里稍微说下学习OpenCV相关知识过程的情况,笔者是采用文章+视频间断性学习,大概是20-40个小时左右,然后再开始写具体字符图片切割的代码,读者可根据自己的时间安排学习速度,建议工具类的东西是快速学习,现学现用。好的,接下来介绍高效率、可复用的通用图片验证码数据标注功能实现。

四、总结

我是Snowball。上一篇文章给大家分享了,Python项目实战篇——常用验证码标注和识别(需求分析和实现思路),这篇内容主要讲解了常用验证码标注&识别的数据采集/预处理的实现过程。下一篇文章,小编给大家介绍高效率、可复用的通用图片验证码数据标注功能实现。

 

小伙伴们,快快用实践一下吧!如果在学习过程中,有遇到任何问题,欢迎加我好友,我拉你进Python学习交流群共同探讨学习。

 

责任编辑:武晓燕 来源: Python爬虫与数据挖掘
相关推荐

2021-09-09 08:55:50

Python项目验证码

2021-09-16 07:52:18

Python项目实战

2021-09-18 09:15:39

Python神经网络Python基础

2013-06-19 10:19:59

2024-01-29 08:32:10

Python验证码识别

2020-12-29 05:33:03

Serverless验证码架构

2016-11-08 19:19:06

2016-11-03 13:33:31

2023-10-27 08:53:13

Python验证码图片识别

2019-05-21 14:33:01

2022-02-17 10:34:21

神经网络识别验证码

2022-05-11 07:41:31

Python验证码

2021-02-04 10:08:34

腾讯云验证码医疗影像

2016-11-14 15:40:01

Android

2021-06-16 06:58:09

TensorFlow识别验证码

2021-07-22 10:25:07

JS验证码前端

2014-04-24 10:09:05

验证码C#

2016-12-18 15:03:57

Python Scikit Lea数据

2016-12-20 16:07:13

Python数据预处理
点赞
收藏

51CTO技术栈公众号