比 PS 更懂你的 AI 图片剪辑器具——MagicQuill（魔法羽毛）来了！皇冠体育比分现金足球app(中国)官方网站

1 分钟出图：无须打字、毛糙勾勒几笔就能剪辑图片。

还守旧径直在 iPad 上在线剪辑！

琢磨团队来自香港科技大学、蚂鸠合团、浙江大学和香港大学等机构。

咱们先通盘看个例子感受一下——

有了 MagicQuill，刻下当你想要给东说念主物更换一稔时，就可以径直画出领子，它会自动帮你补全。

加条项链、去除路东说念主，几秒钟就束缚：

你还可以更换发色、让东说念主物戴上花环，致使转换花朵的激情：

只需要 1 分钟多的时分，就可以达成上头这样多剪辑后果，尤其是关于想要快速修改相片的用户来说，险些太简短了！

还有更多理由的例子，机器东说念主、汽车、蛋糕等，都可以快速修改！

有多位网友评敷陈，AI 图像剪辑确凿跳跃连忙，"能读懂用户心想"詈骂常具有将来感的用户体验。

致使还有网友说，震悚吧，PS！

MagicQuill 方向是和解细巧修改意图

诚然刻下 AI 图像剪辑器具是百花王人放，但想要达成细巧剪辑，许多器具的后果仍是相比令东说念主捉急。

MagicQuill 团队的方向是达成一个高效且精准的图像剪辑系统，省略在用户进行微小修改时提供更好的使用体验。

这不仅包括达成细粒度的图像剪辑适度、还要提供直不雅的用户界面、并及时瞻望用户意图。

最终团队遴荐基于扩散模子、文本和掩码的图像剪辑体式、以及多模态大型谈话模子（MLLMs） 进行达成，并盘算推算了从简实用的用户界面。

MagicQuill 的具体组成

通盘来望望 MagicQuill 系统的具体组成是什么样的。主要分为 3 个部分：

1. 剪辑处理器

剪辑处理器选择双分支架构，包括内容感知建树分支和结构迷惑分支。

内容感知建树分支诈欺 UNet 架构，合股掩码图像特征和预考试的扩散聚集进行像素级建树。

结构迷惑分支则通过 ControINet 插入条款适度，确保剪辑操作的精准性。

2. 绘画助手

绘画助手通过多模态大型谈话模子（MLLM）及时瞻望用户意图。

具体的任务称为" Draw&Guess "，也即是通过图像高下文讲解用户笔画并自动生成磋磨教唆。

团队选择的数据集通过生成边际图和模拟用户笔画进行构建，并使用 LLaMA 模子进行微调。

3. 创意聚集器

创意聚集器为用户提供了一个从险些不雅的界面，它兼容多个平台，团队也提供了在线 demo，你可以在电脑或 iPad 上径直使用！

界面主要包括教唆区、器具栏、图层束缚、主画布、生成图像预览区、实验按钮和参数转机区。

按钮盘算推算相当精真金不怕火，有上传图片、"增多"画笔、"减少"画笔、改激情画笔、橡皮等等。

下方的参数转机区域更适应有丰富的生图陶冶的专科东说念主士：

比如在 Base Model Name 里，你可以遴荐不同的基础模子，有适应生成真确格调的 SD1.5/realisticVisionV60B1_v51VAE.safetensors、适应生成幻想格调的 SD1.5/DreamShaper.safetensors 等。

你还可以转机 Negative Prompt 幸免生成部老实容、还有 Fine Edge 细巧边际转机、Grow Size 转机笔触大小等等。完满责任历程如下图所示。

本体后果何如呢？

为了更准确地测试 MagicQuill 的具体后果，团队还盘算推算了 3 个考据实验：

1. 可控生成评估

将 MagicQuill 与四个基线体式（SmartEdit、SketchEdit、BrushNet 过甚组合）进行相比，评估剪辑处理器的可控生成智商，尤其慈祥边际对王人和激情保真度。

末端暴露，MagicQuill 的剪辑处理器在统共宗旨上均优于基线体式，具有更高的边际对王人度和激情保真度。

2. 瞻望准确性评估

为了评估 MagicQuill 在模拟手绘输入下的语义瞻望准确性，团队将它的绘画助手与三种最先进的 MLLMs （LLaVA-1.5、LLaVA-Next、GPT-4o）进行了相比。

末端暴露，绘画助手在统共测试的 MLLMS 中发达最好，可以更准确地捕捉和瞻望用户绘制的语义含义。

3. 创意聚集器有用性评估

团队还通过用户琢磨评估了创意聚集器的效能和可用性，并相比了它与基线系统的互异。

用户琢磨末端暴露，MagicQuill 在统共评估维度上都权贵优于基线系统，包括复杂性和效能、一致性和集成、易用性以及总体幽闲度 4 个方面。

看来体验过的用户反应都可以呢！

将来责任

团队还暗意，这将是一个恒久的责任，将来他们的方向是膨胀系统功能，纳入更多的剪辑类型，如基于参考的剪辑，这将允许用户使用外部图像带领修改。

他们还谋略达成分层图像生成，可以让剪辑愈加生动、守旧更多复杂合成。

系统也会守旧排版，省略处理更多图像中的文本元素。

刻下 MagicQuill 的代码、论文和 Demo 都已上线，感酷爱酷爱的小伙伴可以速即试用起来了！统一就不才方。

参考统一：https://magicquill.art/demo/皇冠体育比分现金足球app(中国)官方网站