一键抠图,毛发毕现:这个GitHub项目助你快速PS

新闻 前端
抠图是 PS 中的一项常用技术。但是要做到完美地将图像中的目标选取出来往往费时费力。近日,一个名为 PyMatting 的项目无疑能够帮助你。

 抠图是 PS 中的一项常用技术。但是要做到完美地将图像中的目标选取出来往往费时费力。近日,一个名为 PyMatting 的项目无疑能够帮助你。

项目地址:https://github.com/pymatting/pymatting

无需手动,一键抠图

抠图的 AI 应用场景是这样的:给定一张图像,通过划定一个区域,AI 应当能够估计到划定区域内的前景图目标,并将这个前景完整地抽取出来,用来替换到其他背景的图像中去。

因此,抠图需要两个 AI 能力:首先,AI 需要能够在划定的区域内识别目标。其次,AI 要能够完整地将目标抽取出来,没有划定错误的边缘、模糊的图像等问题。

一键抠图,毛发毕现:这个GitHub项目助你快速PS

上图为项目作者提供的示例。给定一只动物的图像(左上),以及人划定的区域(右上),算法应当能够获得划定区域内目标的阿尔法通道,即区分前景和背景的黑白轮廓(左下)。有了这一数据,就可以从原图中抠去目标,并移动到新的图像中去(右下)。

据项目介绍,PyMatting 具有以下特性。

首先,项目能够完成阿尔法抠图(Alpha Matting),其中包括 Closed-Form 抠图、大核抠图(Large Kernel Matting)、KNN 抠图、基于学习的数字抠图(Learning Based Digital Matting)、随机游走(Random Walk)抠图等算法。

同时,项目也能完成前景预估,包括 Clos Form 前景预估和多级别前景预估(基于 CPU、CUDA 和 OpenCL 等)算法。

该项目还可以进行快速多线程 KNN 搜索、不完全阈值化楚列斯基分解(incomplete thresholded Cholesky decomposition)、V 轮几何多网格预条件子(V-Cycle Geometric Multigrid preconditioner)等。

使用方法

在使用前,你需要保证电脑安装相应的 Python 环境(Python 3),同时需要以下安装包:

  • numpy>=1.16.0
  • pillow>=5.2.0
  • numba>=0.47.0
  • scipy>=1.1.0

由于项目需要 GPU,因此也需要 GPU 相关支持:

  • cupy-cuda90>=6.5.0 or similar
  • pyopencl>=2019.1.2

除此之外,为了进行测试,也需要:

  • pytest>=5.3.4

为了方便使用,作者提供了一些示例代码。例如,如下代码中,给定原始图像和抠图框,可以抽取出阿尔法前景:

  1. from pymatting import cutout 
  2.  
  3. cutout( 
  4.  
  5.     # input image path"data/lemur.png"
  6.  
  7.     # input trimap path"data/lemur_trimap.png"
  8.  
  9.     # output cutout path"lemur_cutout.png"

作者还提供了高级代码,直接进行抠图,生成新图像:

  1. image = load_image("../data/lemur/lemur.png""RGB", scale, "box"
  2.  
  3. trimap = load_image("../data/lemur/lemur_trimap.png""GRAY", scale, "nearest"
  4.  
  5. # estimate alpha from image and trimap 
  6.  
  7. alpha = estimate_alpha_cf(image, trimap) 
  8.  
  9. # make gray background 
  10.  
  11. new_background = np.zeros(image.shape) 
  12.  
  13. new_background[:, :] = [0.50.50.5
  14.  
  15. # estimate foreground from image and alpha 
  16.  
  17. foreground, background = estimate_foreground_ml(image, alpha, return_background=True) 
  18.  
  19. # blend foreground with background and alpha, less color bleeding 
  20.  
  21. new_image = blend(foreground, new_background, alpha) 

除了代码示例外,项目还提供了测试代码,可在主目录中运行:

  1. python3 tests/download_images.py 
  2.  
  3. pip3 install -r requirements_tests.txt 
  4.  
  5. pytest 

这一测试能够覆盖 89% 的代码。

除了项目外,作者还提供了不同的抠图算法的基准测试结果,如下所示:pytest>=5.3.4

一键抠图,毛发毕现:这个GitHub项目助你快速PS

不同算法在测试数据集上的均方误差大小。

可以看出,基于学习的算法和 Closed-Form 算法都能取得不错的效果。

完整的基准测试结果:https://pymatting.github.io/benchmark.html

 

责任编辑:张燕妮 来源: 机器之心
相关推荐

2019-10-30 15:05:44

AI 数据人工智能

2020-05-06 13:41:43

机器学习人工智能项目

2020-10-23 15:29:48

iPad抠图PC

2023-11-13 06:53:00

微软Windows

2023-04-06 13:44:41

抠图AI

2015-06-09 10:36:13

Cloud FoundAzurePaaS

2023-06-12 09:53:06

AI图片

2019-07-05 09:43:33

AI数据科技

2015-02-09 15:25:52

换肤

2020-06-18 15:53:06

Python代码抠图

2021-12-14 15:54:01

AI 数据人工智能

2021-05-06 07:56:22

电脑C盘系统垃圾软件

2020-08-19 10:30:46

Windows 功能开源

2023-11-18 10:19:52

微软Windows

2021-02-25 17:21:57

微软Word 文档PowerPoint

2020-12-16 16:13:49

人工智能机器学习技术

2015-11-03 15:29:49

ONOS开放网络操作系统SDN

2020-08-25 20:10:53

GitHub代码开发者

2019-12-16 09:53:29

技术研发指标
点赞
收藏

51CTO技术栈公众号