这个AI生图神器太好玩了,连提示词都不用写
2024-12-21 15:09

这个AI生图神器太好玩了,连提示词都不用写

本文来自微信公众号:APPSO (ID:appsolution),作者:APPSO,题图来自:AI生成

文章摘要
Google推出Whisk,通过图片生成有趣风格图像。

• 🎨 无需复杂提示词,仅靠图片组合生成创意图像

• 🎲 支持随机生成,提供丰富预设风格选项

• 🧠 结合视觉理解与生成能力,实现多样风格化效果

AI生图工具,已经多得泛滥了,但Google最新推出的Whisk,还是找到了一种很新的玩法,让见过世面的网友也直呼好玩。


只需输入三张图片,subject(主题)、scene(场景)、style(风格),Whisk就可以生成一张博采众长的图片。


图片来自:Google


举个例子,主题是老人,场景是藤蔓,风格是90年代复古动漫,写上“角色骑着飞行自行车”的提示词,等待一会儿,一张类似吉卜力画风的新图片诞生了。


图片来自:Google


老人还是那个老人,戴帽子,穿西装,拿着书,但他骑上了提示词里的车,场景和风格也都变成了参考图片的样子。


Whisk的长处便在这里——让我们在少写、不写提示词的同时,轻松玩转各种风格,妈妈再也不担心我不会写提示词了。


别写复杂的提示词了,直接把图片端上来就行


别看只需要几张图片,Whisk的玩法简单,却又无穷无尽。


刷刷刷上传三张图片——主题图片,麦当劳薯条;场景图片,莫奈画作《睡莲》;风格图片,像素风游戏《星露谷物语》。


不写提示词,直接生成,Whisk给出的结果,一张更比三张强。



除了上传自己的图片,我们也可以掷骰子,让Whisk随机生成主题、场景、风格。



其实,Whisk为我们提供的预设风格已经很够用,徽章、贴纸、刺绣、黏土、美漫、马赛克拼贴等等,特色鲜明,效果立竿见影。



只要有脑洞和想象力,无需一个字,仅仅通过不同图片的排列组合,我们可以不断地做完形填空的游戏——主题+场景+风格,而且不是每个空都必须填。


1.主题图片,熏鸡;2.场景图片,梵高《星月夜》画作;3.风格图片,日本木版画


1.主题图片,《戴珍珠耳环的少女》;2.场景图片,电影《千与千寻》剧照;3.风格图片,蒙德里安抽象画


1.主题图片,微信“死亡笑脸”表情包;2.场景图片,电影《星际穿越》剧照;3.风格图片,史努比漫画截图


1.主题图片,冲浪默认头像粉色恐龙momo;2.风格图片,Jellycat玩偶


另外,Whisk的每一次生成,场景和风格只能选择一个参考图片,但主题可以选择多个。这意味着什么?我们可以让多个角色同框了!


比如,让马斯克、奥特曼、扎克伯格通通变成珐琅徽章。



三位的服装、装饰、神态都还原得挺好,扎克伯格的话筒和项链都没漏掉,但人脸没法保持一致性,全部变成了大众脸。


虽然Whisk减少了写提示词的需求,但如果你需要写的话,Whisk也鼓励。


在对话框加上一句“角色们都举着一块告示牌,上面写着AGI”,徽章小人们轻轻松松地遵循了提示词。



如果我们需要某个场景或者某种风格,但一时找不到参考图,Whisk的预设也没有提供呢?


解决方式很简单,没有图片,那就写提示词,让Whisk临场发挥一个。



就像我需要一个让角色站上去的、像素风格的底座作为场景,就让Whisk帮我生成了。



然后,再把猫猫表情包作为主题图片,把像素小鸡作为风格图片,就可以得到一个有底座的像素猫猫。



总之,Whisk非常自由,像橡皮泥一样,怎么捏都可以。


既生图又识图,把复杂的工作流包装成有趣的“打蛋器”


Whisk,其实是Google多模态模型秀肌肉的一种方式。


为了让我们少写提示词,Whisk整合了视觉理解和图片生成能力。


Gemini模型负责识别图片,自动生成详细的描述,然后这些描述会被输入到Google的图片生成模型Imagen 3,由Imagen 3生图。


Whisk是这样的,用户只要上传和生成图片就可以了,但它自己要考虑的事情就很多了。



Whisk的每张图片,不管是上传的还是生成的,都写了很长的底层提示词,并且不藏着掩着,我们点开图片就能看,也可以上手修改。


如果把一个人作为主题图片,Whisk会详细地描述他的外貌特征,场景图片也是类似的。


Whisk对奥特曼的描述:“一个肤色较浅的男子,有着短而深棕色的卷发,从胸部以上展示。他有着浅色的眼睛。他穿着一件浅米色的针织圆领毛衣。背景是一面斑驳的灰色混凝土墙。男子的表情严肃而中性。光线有些昏暗,他的右脸有轻微的阴影。”


它对风格图片的处理则略有些不同,如果把一张动画截图作为风格参考,Whisk不会说画面里有三个人,而是描述这幅画的色彩、光线、线条……


Whisk对史努比画风的描述:“这张图片以卡通风格呈现,具有粗犷的轮廓和平面着色。色彩调色板有限,主要使用原色和柔和的次要颜色。光线均匀,缺乏强烈的阴影或高光,给人一种简单、几乎孩童般的质感。线条清晰且一致,带有轻微不均匀的质感,暗示手绘的效果。整体美学让人联想到经典的连环漫画或儿童动画。”


所以,Whisk不是精准地复制图片,而是提取图片的特点和精髓,将主题、场景、风格自然地融合在一起,各司其职,互不干扰。


同时,Whisk也叠了甲——只从图片中提取少量关键特征,结果可能和预期不同。这也解释了为什么Whisk做不到对人脸的精准还原。


所以,哪怕选择不那么抽象的复古胶片风格,三位大佬的脸也是和本尊都不挨着,但其他细节都很准确。



对于物体的图片生成也是一样,特斯拉的赛博皮卡,经过特征提取再生成之后,变得非常普通。



但如果是麦当劳薯条这种素材丰富的超级IP,生成的效果倒还不错,可以拿来当广告图了。试过一些迪士尼的角色,Whisk复刻得也原模原样,但图就不放上来了。



另外,Whisk还存在一个问题——没法做很细致的风格参考,模仿不了某种特定的画风。


当我让Whisk生成蒙娜丽莎的乐高小人,出来的结果让我两眼一黑,但多加一句提示词,“让角色更像乐高人物”,Whisk又能模仿个七八成。



某个漫画家的画风就更难模仿了,上传漫画截图让Whisk参考,它最终给出的是一个非常普通的漫画风格图片,就算通过提示词强调作品、角色、漫画家,也不起什么作用。


其实,Whisk好玩就够了,它更适合做一些不追求精准的创意探索,俗称整活。


Whisk可以翻译为“搅拌”或者“打蛋器”,Google的这个名字取得即视感很强,可不就是把食材都混搭在一起吗?


Whisk的不精准,也让它的定位和传统的图片编辑器不同,更像一种创意工具。有了什么脑洞,由它实现粗略的视觉效果。


Whisk生成,1.主题图片,《火影忍者》截图;2.风格图片,毛绒玩具


以前实现Whisk这种风格化的效果,跑通一整个图像生成的流程,我们可能需要在ComfyUI搭建工作流。


但现在有了Whisk,就像在玩抽卡游戏或者开盲盒,而且只要能登录(限美国地区),目前还免费(体验指路:https://labs.google/fx/zh/tools/whisk)


Google领先的模型能力固然是前提和基础,但要想设计出被大家需要的产品,仍然需要创造力和审美。


很喜欢Whisk的slogan:“prompt less,play more.”(少写提示词,多玩耍。)



Whisk出自Google labs,之前爆火的AI播客NotebookLM也是出自这里,后来慢慢发展为成熟的项目。这个实验室,本身就是这句slogan的最好注解。


强大的模型能力,有新意的产品,开放的心态,曾经似乎被OpenAI威胁的Google,风轻云淡地展现出了王者归来的姿态。


本文来自微信公众号:APPSO (ID:appsolution),作者:APPSO

本内容为作者独立观点,不代表虎嗅立场。未经允许不得转载,授权事宜请联系hezuo@huxiu.com
如对本稿件有异议或投诉,请联系tougao@huxiu.com
正在改变与想要改变世界的人,都在 虎嗅APP
赞赏
关闭赞赏 开启赞赏

支持一下   修改

确定