MediaPipe即将推出图像生成服务 - plus studio

MediaPipe即将推出图像生成服务

今天我逛GitHub Trending的时候突然发现MediaPipe的示例库被顶到了前排

image.png

这不对劲，我赶紧去mediapipe的储存库，发现7个小时前Google推送了新的内容 ImageGenerator Java API

image.png

原来MediaPipe也要推出文字生成图片内容啊，还是移动端设备上的，这让我想起来GitHub最近有人开始写stable-diffusion.cpp，一个使用了ggml量化加速的sd。

顺藤摸瓜我们可以找到MediaPipe的文档。

image.png

还是即将推出状态，但是给了一个简单示例。

用法超级简单，就是下载下面几个模型中的一个 - runwayml/stable-diffusion-v1-5 - justinpinkney/miniSD - hakurei/waifu-diffusion-v1-4 - Fictiverse/Stable_Diffusion_PaperCut_Model

安装依赖

pip install torch typing_extensions numpy Pillow requests pytorch_lightning absl-py

把这个文件copy下来,地址

然后

python3 convert.py --ckpt_path <ckpt_path> --output_path <output_path>

接着将文件夹内容<output_path>推送到 Android 设备。

adb shell rm -r /data/local/tmp/image_generator/ 

adb shell mkdir -p /data/local/tmp/image_generator/

adb push <output_path>/. /data/local/tmp/image_generator/bins

安装 Android 演示应用程序,在这里下载

adb install imagegenerator.apk