AI用32张图学废迪士尼插画师，网友：人家还活着呢，多唐突啊

liukang20242个月前 (05-05)吃瓜始末1031

金磊明敏发自凹非寺量子位 | 大众号 QbitAI

学废一位人类插画师，AI只用了32张著作。

故事的主人公叫做Hollie Mengert（霍姐），她自打2011年从艺校结业以来就从事着插画相关作业。

11年来的打拼，也让霍姐在插画上有了自己别出心裁的风格。

然鹅……

有天霍姐一觉醒来却收到朋友的来信：“姐~你现在成人家AI的模型了”。

于是乎，毫不知情的霍姐便去Reddit上看了看究竟是咋回事，成果——

有位小哥搞了个AI，只用了霍姐32张著作练习，就能仿照她的风格作画！

△左：霍姐著作；右：AI著作

好了，这下子我们都能用这个AI，画出霍姐风格的插画了。

而且更“丧命”的是，给AI输入的提示词有必要带上“holliemengert artstyle”（霍姐风）……

（多唐突啊……）

这波操作也是直接让网友炸了锅，纷繁留言为霍姐抱不平：

人家还活着呢……

你可把这位姐妹坑惨了。

然后跟着这事的逐步发酵，细节也逐步浮出了水面。

2.5小时炼出新模型，本钱不到15块

工作开始仅仅一位来自加拿大的工程师Ogbogu Kalu（卡哥），出于个人爱好做了个插画AI。

看着作用还不错，他就把模型发到了Reddit上，成果一会儿火了！

不少网友看了直呼：这是巨著！

本以为需求不计其数张图才干练习出好的作用，没想到这么点儿也能够。

而且练习本钱也很低，卡哥说自己做这个模型，仅仅在云端租了GPU、花2个半小时就搞定了。

折算本钱不到2美元（人民币约15块）。

不过，卡哥其时做出这个AI也实属意外，在此之前他并不了解霍姐的著作。挑选这一风格，仅仅由于他在帮其他网友微调模型，那位网友给出的风格和霍姐画风类似。

通过改善数据集，他一晚上便弄出了一个作用更好的新模型，命名为“hollie-mengert-artstyle”。并把代码也放了出来，人人都能免费试玩。

他用到的AI，主要是Stable Diffusion和DreamBooth。

后者是仿照风格精华的要害。

这是谷歌在本年8月发布的新AI。它只需3-5张图片，再加上文字表述，就能让指定物体迁移到其他场景或风格中去。

和Dall-E 2、Imagen等最大的不同是，DreamBooth能对选定目标忠诚复原。

具体办法是给物体加上“特别标识符”。

本来图画生成模型收到的指令仅仅一类物体，例如[cat]、[dog]等，但现在DreamBooth会在这类物体前加上一个特别标识符，变成[V][物体类别]。

以下图为例，将用户上传的三张狗子相片和相应的类名（如“狗”）作为输入信息，得到一个通过微调的文本-图画分散模型。

该分散模型用“a [V] dog”来特指用户上传图片中的狗子，再把其带入文字描述中，生成特定的图画，其间[V]便是那个特别标识符。

而且这种办法不局限于某个模型，Dall-E 2、Stable Diffusion等调整后也能完成如上作用。

比方之前亚马逊工程师就发布过一个DreamBooth-Stable-Diffusion。

Hugging Face上这类模型超级多，各种风格都有，如迪士尼、赛博朋克等等。

卡哥的模型也归于其间之一。

实际上，把DreamBooth用在Stable Diffusion不算难，油管就有现成教程。

有人用30张图微调模型，全程不到20分钟，而且作用是杠杠好，他的相片能够毫不违和地融入到各种风格中去。

（不过芝麻街这个很难判别作用究竟好不好doge）

“原作与此无关”

究竟这事在圈里被评论得甚是炽热，一位叫Andy Baio的吃瓜网友，就直接找到了两位当事人聊了聊。

首要，霍姐谈了谈她的观念：

我得知这件工作的榜首反响，便是觉得我姓名出现在这个东西里，有被得罪到。我对这件工作一窍不通，也没人寻求过我的定见。即使他过来问我“是否能够这么做”，我也不会容许的。

霍姐以为，给AI练习所用到的图画就触及到了版权问题。

由于开始她是和迪士尼等客户有协作，没有客户的答应，霍姐自己都不能随意在网上传达插画。

除此之外，霍姐还以为这个AI模型跟她的姓名挂钩，但并不能彻底展示她插画风格的独到之处：

作为一名艺术家，我觉得让我特别骄傲的当地，便是著作能有实在的表达、吸睛的规划，而且人物能够产生共鸣。但AI生成的插画，就挺难做到这些点的。

然后霍姐更详尽的对这个观念做打开：

我觉得AI能够仿照笔刷的纹路和烘托、挑选一些色彩和形状，但这并不代表就能担任一个值得被雇佣的插画家或规划师。由于烘托、笔触和色彩等，都是艺术最表层的部分。我以为人们终究会与艺术联络在一同，是由于一个心爱或让人产生共鸣的人物。

总而言之，霍姐个人觉得AI生成的著作跟自己的艺术水平仍是有很大的距离感。

但让她十分无法的是，自己的姓名确确实实就跟AI“绑缚”到了一同，成了东西的一部分。

那么站在工程师的视点，又怎么看待这件事呢？

Andy Baio也找到了卡哥聊了聊：

我以为AI的练习和图片的运用都是合法的，即使这事闹到法庭也很可能被判为“合理”，由于你是无法给一种画风请求版权的。100TB的练习数据压缩成一个4GB的模型，AI作画的方法也不能算“缝合”，更像是从生动回忆中提取并立异。而且这是技术发展不可避免的工作，像Adobe在PhotoShop里搞AI东西，微软也在自家规划套件里添加了图画生成器。

那这就意味着艺术家们对自己的著作就没有发言权了吗？Andy Baio持续追问道。

卡哥对此表明：

我觉得现在许多的对立定见是无解了AI的运作方法。AI生成的内容并不是根据艺术家著作的拼贴，而是发明了全新的图画，这是一种革新。对AI不行了解的人没有真实意义上的发言权。

不过后来，卡哥仍是把Hugging Face上模型的姓名，从开始的Hollie-mengert-artstyle，改成了更为通用的Illustration-Diffusion。

而且还特意弥补、强调了一句：

Hollie与此无关。

而在此数天之后，卡哥又发布了一个新模型。

这次他所选用的是另一位艺术家James Daly III的40张著作来练习：

△左：James Daly III著作；右：AI生成著作

……

那么关于这件事，你怎么看呢？

参阅链接：

[1]https://waxy.org/2022/11/invasive-diffusion-how-one-unwilling-illustrator-found-herself-turned-into-an-ai-model/[2]https://www.reddit.com/r/StableDiffusion/comments/yaquby/2d_illustration_styles_are_scarce_on_stable/[3]https://news.ycombinator.com/item?id=33422990[4]https://huggingface.co/ogkalu/Illustration-Diffusion

告发/反应