安卓手机「跑」Stable Diffusion创新纪录,15秒内出图

新闻 移动开发
让手机用户也能无门槛体验 Stable Diffusion 的绘图魅力。

我们知道,Stable Diffusion 是一种非常流行的文本到图像生成式 AI 模型,它能够在几十秒内为任何给定的输入文本创建逼真的图像。Stable Diffusion 的参数超过了 10 亿,直到现在,该模型主要在云端运行。

因此,如何在移动设备端运行 Stable Diffusion 吸引了圈内人士的极大兴趣。此前,有位作者开发了一个应用程序,通过 Stable Diffusion 来生成图像,然后按喜欢的方式编辑。该应用在最新的 iPhone 14 Pro 上生成图片仅需一分钟,使用大约 2GiB 的应用内存。

甚至苹果亲自下场优化,在 iPhone、iPad、Mac 等设备上以惊人速度运行 Stable Diffusion,在半分钟生成一张分辨率 512x512 的图像。如下为苹果设备上运行 Stable Diffusion 和 Core ML + diffusers 生成的图像。

图片

Stable Diffusion 实现最快安卓端运行

那么安卓手机上能不能也运行 Stable Diffusion 并快速出图呢?今日,高通的一则 Demo 视频演示了:安卓手机端使用 Stable Diffusion 实现了最快本地 AI 图像生成。

在如下 Demo 视频中,Stable Diffusion v1.5 在不到 15 秒的时间内生成分辨率 512x512 的图像。高通虽然没有明确说明是哪款手机,但表示该手机搭载了最新的骁龙 8 Gen2 旗舰芯片组。通过在软件层面进行各种自定义优化,使得 Stable Diffusion 以最佳方式实现了运行。

图片

高通在其测试设备上生成的一些示例图像如下所示,如「穿着盔甲的、超级可爱的、毛茸茸的猫武士」。

在智能手机端以如此快的速度运行 Stable Diffusion,这要归功于高通的全栈 AI 优化方案。该方案显著降低了运行时延迟和能耗,最终实现 Stable Diffusion 安全高效的运行。

图片

其实,在高通发布 Demo 视频之前,已经有开发者展示了在搭载高通骁龙 865 的 8G RAM 索尼 Xperia 5 II 上运行 Stable Diffusion。这位开发者名为 Ivon Huang,其博客中详细介绍了相关教程。不过,生成一张分辨率 512x512 的图像需要 1 个小时。与之相比,高通出图的速度实现了巨大的提升。

图片

博客地址:

​https://ivonblog.com/en-us/posts/android-stable-diffusion/​

责任编辑:张燕妮 来源: 机器之心
相关推荐

2023-04-27 15:32:48

谷歌模型

2020-05-22 23:33:11

腾讯AI人工智能

2011-10-31 11:13:27

2014-07-11 11:02:52

5G

2023-11-13 18:50:55

AI数据

2023-07-05 14:01:50

AI技术

2021-08-03 15:06:56

人工智能AI投资

2024-06-13 17:45:16

2011-12-23 13:54:19

Intel微处理器市场份额

2023-06-12 10:25:45

模型训练

2014-07-23 10:58:34

AnySDK

2009-10-26 11:52:13

Informatica数据平台

2023-11-17 15:50:27

AI训练

2011-07-25 17:16:05

2020-08-20 09:25:13

机器人火灾工业

2016-11-24 18:07:54

网易 猪肉

2023-06-19 14:09:43

2019-08-26 09:42:51

人工智能机器学习技术

2023-07-14 13:34:34

StableDiffusion模型
点赞
收藏

51CTO技术栈公众号