【补档】图像局部重绘工具，漫画翻译、去水印、批量编辑一把梭

DragonJay · 发表于 2026-6-2 11:58:18

AI Inpaint Studio：一个 Web 端 AI 局部重绘工具，专治漫画翻译被安全过滤拒绝

一个纯 Web、纯前端、可自部署的 AI 图像局部重绘工具。框选 → 输入提示词 → AI 修改 → 自动合成回原图。

支持 Gemini / OpenAI / Vertex / Sakura(本地LLM) / DeepL，全配置在浏览器里走，没有后端。

最常用的两个场景：

漫画翻译：圈出气泡 → 自动翻译嵌字。只发选区给模型，绕开全图安全过滤。
去水印 / 改细节 / 替换对象：常规局部重绘，比直接给整图发 prompt 精准得多。

GitHub：https://github.com/dragonjay-lyj/AI-Inpaint-Studio
在线体验：https://manages-delta.vercel.app/

为什么要做这个

最早是因为漫画翻译的痛点：

直接把一整页漫画图扔给 Gemini 让它"翻译并嵌字"——擦边页直接被安全过滤拦了。但 Gemini 自己其实没那么严，只发文字气泡那一小块就能过。

但市面上的漫画翻译工具普遍是 Python + 一堆本地模型（PaddleOCR/LaMa/...），部署门槛高、显卡要求高、体验割裂。我想要的是：打开网页就能用，配个 API Key 就跑。

于是开始做 AI Inpaint Studio。后来发现这个"局部重绘+合成"的能力本身价值很大——不只翻译，去水印、改表情、换发色、白天改夜晚，都能用。

核心功能

局部重绘主链路

多区域框选 — 一张图可以画多个不重叠选区
裁剪 + 合成 — 只发选区+padding 上下文给 AI，结果精确贴回原图（不污染选区外像素）
多模型 — Gemini 2.5 Flash Image / Gemini 3 Pro Image / GPT-4o / vLLM / Ollama
批量处理 — 文件夹上传、应用到所有图片、并发/串行模式、进度跟踪

漫画翻译流水线

自动文本检测 — 让 Gemini 输出气泡多边形（而不只是矩形 bbox），异形气泡也支持
智能 OCR — Gemini 视觉为主，启发式边缘检测做 fallback
prompt 模式选择 — 翻译 / 编辑 / 去水印 / 自动判断
自我审查循环 — 第一轮生成后用 OCR 自查"是不是还有日文残留"，有就追加约束重试一轮
跨页上下文 — 多章节维护"前 N 页译过的内容 + 术语表"，下一页翻译时注入 prompt
术语库 + 加权评分 — AI 一次性翻译候选词，按 BM25-style 评分挑相关术语进 prompt

编辑器

蒙版画笔/橡皮擦 — 像素级蒙版，半透明叠加显示
矩形抹字工具 — 拖框抹字，支持自动/手动模式、右键恢复、Ctrl+D 取消、Space 触发
修复画笔 — 蒙版优化（膨胀+模糊+二值化）后局部修复
多边形选区 — 异形选区，每个顶点独立编辑
富文本编辑 — Bold/Italic/Underline + 字体预设（漫画体/标题/SFX 等）+ 阴影/描边
撤销重做 — 选区操作历史栈
查找替换 — Ctrl+F 当前页 / Ctrl+G 全局 / Ctrl+H 替换，支持原文/译文/正则/区分大小写

工程化

可行性门控 — 调 API 前先校验模型名（比如 Gemini 模型必须含 `image`，否则直接拒绝并提示正确模型名）
优雅降级 — 每个 AI 调用都有 fallback 路径
置信度评分 — 每张图算 quality 分（0-1），缩略图底部显示彩色质量条，红黄绿一目了然
IndexedDB 持久化 — 刷新不丢图，所有上传过的图、画过的选区、生成结果、蒙版自动保存
批量断点续跑 — "继续未完成 (N)" 按钮，意外刷新或上次没跑完的批量任务一键续跑

UI/UX

5 种主题 — Light / Dark / Ocean / Rose / Forest
中英文 i18n — 一键切换
PSD/CBZ/Word 导出 — 含 ACBF 多语言层级
ZIP 全量下载 — 重名自动追加 -1/-2

技术栈

纯前端，无后端：

层	选型
框架	Next.js 16 + React 19 + TypeScript
样式	Tailwind CSS 4
状态	Zustand 5
持久化	IndexedDB（自定义 wrapper，无第三方依赖）
渲染	原生 Canvas 2D
AI	fetch 直连 Gemini / OpenAI / Vertex / Sakura / DeepL