原文链接:
全文总字数:5490,阅读大约需要15分钟。文中落地项目中使用到的AI工具有:ChatGPT、Midjourney和Stable Diffusion。 AIGC全称AI Generated Content,是利用人工智能技术来生成内容,AIGC绘画属于AIGC的分支。 近半年,以Midjourney和Stable Diffusion为代表的AIGC绘画迎来爆发式发展,掀起了一场生产力革命。 Midjourney和Stable Diffusion强大的创造力和无与伦比的高效性,使设计师通过它们提升生产力成为了必然。然而Midjourney和Stable Diffusion作为开放性工具,本身具有随机性与不可控性,很多设计师很难在工作中运用,仅沦为娱乐工具。 本篇文章基于网易ASAK设计团队实际运用案例,带你破除AIGC绘画工具的不可控性,让它们成为你设计路上披荆斩棘的神器。 通过Midjourney和Stable Diffusion已落地项目类型分类,全文大纲如下: 01 设计提效 02 活动弹窗设计 03 勋章图标设计 04 IP设计 05 KV/海报设计 06 场景设计 07 动画分镜设计 08 物料设计 09 设计师后记设计提效
当未使用Midjourney和Stable Diffusion时,通常设计师流程如下:活动弹窗设计
先运用ChatGPT获取弹窗的设计思路,从多角度切入设计,使设计方案更完善,如下图所示:继续具象延伸,再添加宝石、荣耀感、坚硬感和钻石等关键词。为了让元素更加立体,可以带上3D和三维渲染器等相关关键词。 转化成对应的英文后,关键词如下: Prompt: Shining gemstone, high class, noble sense, glory sense, 3D, hard, diamond, Octane Render Negative prompt: Low saturation, deformity, sketch, blur 将初稿中的钻石图放进Stable Diffusion图生图功能。输入关键词,重复幅度调到5以下,反复多批量产出后筛选出想要的结果,如下图所示:
勋章图标设计
Midjourney和Stable Diffusion也可以制作勋章图标。 勋章一般需要简化版和精细版,用于不同尺寸的使用场景。 以网易大神梦幻西游武神坛勋章为例,借助Stable Diffusion,只需要输出简化版本的设计,让Stable Diffusion去深入刻画。 然后用生成最满意的图继续下一轮刻画,以达到最贴合自己需求的出图。 勋章自带荣誉感属性,因此可以从这个思路出发,得到宝石、金属质感、闪耀感和高级感等关键词。转化成对应的英文关键词如下: Prompt: Metallic texture, Shining gemstone, high class, noble sense, glory sense, 3D, hard, diamond, Octane Render Negative prompt: Low saturation, deformity, sketch, blur 输入对应的关键词后,得到设计图如下所示:IP设计
在设计IP前期,设计师需要先确定IP的应用场景,根据应用场景来确定IP的角色动作。 在这一阶段,设计师可以通过Stable Diffusion输入相关动作的关键词,来提取灵感参考。 以网易大神IP霸哥为例,讲解如何用Stable Diffusion制作IP素材。 下图1是设计师手绘草稿,下图2是最终Stable Diffusion完成的IP。第1步:绘制角色动作线稿
第2步:**选择并下载合适模型以及插件**
第3步:设置controlnet面板
第**4步:输入关键词并设置参数**
关键词如下图所示: Prompt:(masterpiece),(best quality),(ultra-detailed), black body, thick red lips, The body is a black ball with thin arms, wearing white gloves on its hands It has round black eyes, and short legs with red shoes, Wearing a display screen on the head, Holding a toy gun in its hand第**5步:产出图片/后期调整**
KV/海报设计
1.KV设计
2.海报设计
需求风格:暗黑哥特漫画风格手绘。 业务方希望设计交付时间为3-4天。然而一张纯手绘的时间需要2天(三张则是6天),时间完全不够,所以需要借助AIGC来提高效率,做到准时交付。 接到需求后,设计开始了前期提案。先用Midjourney完成我们的设计表达,让需求方更清晰直观地感觉到设计稿的风格感。 我们以倒计时还有1天的海报为例。
第1步:实现脑海画面
海报构思画面:狼人变身,一条光柱表示1的形式。关键词如下: A transformed beam of light soars into the sky, amazing Abigail Larson style, Illustration, Hand-Drawn, Macro, Depth of Field, Dichromatism, 2-Dimensional —iw 0.5 —s 1000 —ar 9:16 画面重点关键词:光柱
第2步:根据已确认方向,背景图制作
因为古堡和大月亮构图已较为常见,所以我们直接用Midjourney进行基础的背景绘制,关键词如下:Abigail Larson, an original painting of a scene, a broken village in the middle of the night, a white full moon in the night sky, clouds and mist around the moon, dark blue background —ar 2:4 画面重点关键词:古堡,月亮。
第3步:最终细化绘制,完成作品
从生成图中挑选数张,选取每一张突出的地方进行合成、重制笔触和添加细节后,得到如下图所示的背景图:场景设计
1.**倩女幽魂虚拟演播厅**
以倩女幽魂演播厅概念图设计为例,讲解Midjourney是如何定向控制,生成设计师和业务方想要的设计稿。 倩女幽魂这次的太一斗魂坛,需求方想要的风格元素是唐朝建筑、墨子机关元素和整体以红色建筑为主。
第1步:关键词生成概念图
开始以雄伟的中国式建筑和红色机关等关键词跑图。对应的关键描述如下: Chinese palaces surround the central stage, there are mechanical gears on the building, Chinese style, red, Volume cloud, Volume light
第2步:优化关键词
上述生成的概念图虽然有红色中国风建筑和机关元素,但擂台的感觉不够强烈,缺少建筑缠绕的感觉。 重新修改了关键词加入擂台和建筑环绕中心舞台等元素,关键词如下: Many red Chinese-style buildings surround the central stage, and there are mechanical gears on the buildings, Clear structure, Volume cloud as background, Magnificent atmosphere, Unreal Engine4, —ar 16:9
第3步:精选效果图合成初稿
上面几张概念图已经比较接近我们想要的效果。 最后设计师进行二次修改、合成和手绘后得到设计稿,如下图所示:
第4步:Midjourney快速修改
需求方审核后,需要临时调整整个构图,画面改成悬空建筑擂台,空中需要漂浮的岩石,所以我们修改了关键词为悬空擂台、漂浮在空中的中国风建筑等。关键词如下: A piece of Chinese architecture floating in the sky, the building is built on floating rocks, the center of the rock is a stage, and the buildings surround the stage —ar 16:9 这次改动如果不借助Midjourney,我们就要大面积重新制作,而使用Midjourney来制作浮空岛的场景,只需要将我们之前合成好的建筑场景后期替换进去。
第5步:AR虚拟搭建演播厅
AR部门搭建演播厅的设计图,如下所示:2.**AR氛围概念参考**
AR技术在电竞赛事应用中已经相当普及,AR即增强现实,为电竞提供了全新表现形式。 此次永劫无间赛事,由于场地空间的限制,设计师希望通过AR场景与舞台效果结合,让观众和用户有更好的观赛体验。第1步:投喂风格图
用前期赛事KV草图和官方概念图投喂到Midjourney中,下图为投喂图:
第2步:生成场景图
配合关键词如下: Mountain forest style, concept art, sunshine, been invaded, god ray, there is Tiger Mountain in the distance, and there is a waterfall on the mountain on the right, high detail, hyper quality, scene type, high resolution, with waterfall, forest style, sunshine, god ray, scene type, waterfall on the right, concept art, and stage in the mid shot, foreground close to water, wooden bridge in the foreground, dilapidated wooden bridge, tiger mountain and bandits in the foreground, —ar 16:9 我们成功地生成了山林主题的场景概念图,如下图所示:
第3步:合成初步效果
结合赛事舞台设计制作的渲染图,如下所示:
第4步:三维建模和UE场景搭建
在上述基础上,进行三维模型制作以及UE场景搭建,形成最终的赛事场景效果图,如下图所示:动画分镜设计
设计师手绘的动画分镜图,如下图所示:第1步:优化controlnet可识别范围
根据已有手绘分镜,按照应用场景使用controlnet插件功能:seg(语意分割)和canny(线稿)。这两个功能在脚本使用中频率较高。第2步:方式①使用controlnet的语意分割功能,实现画面分区
手绘分镜的P1/P5/P9/P10使用的是seg功能。通过在Photoshop中划分颜色来告诉AI这部分要的是什么物体。 以P8为例,两侧为墙壁 #787878,地面为地板#503232,中间为人物#96053e(可通过ADE20K_classes表格来获取色值信息)。第2步:方式②应用controlnet的线稿功能,进行区域上色
以手绘P12为例,我们使用的是canny(线稿)模式。直接把草图给到controlnet,优化词为:紫色的章鱼触手从地面出来、碎石、破碎、两颗棋子。翻译后得到英文关键词如下:Purple octopus tentacles come out of the ground, gravel, broken, two pawns
第3步:上色氛围分镜输出
运用Stable Diffusion来进行上色氛围,让需求方更直观地了解整个分镜效果,同时可以为后续视觉静态稿提供氛围参考。物料设计
游戏赛事中的奖杯是设计需求中不可或缺的一环。设计师可以利用Midjourney和Stable Diffusion进行大量的前期素材储备。 以下是需求之外,完成对赛事奖杯的素材储备。第1**步:**使用Midjourney生成灵感素材
下图是使用Midjourney生成的各种奖杯概念图。
第2步:绘制草图
根据Midjourney生成的概念图,设计师手绘生成奖品草图。第3**步:**Stable Diffusion二次创作
设计师后记
Midjourney和Stable Diffusion的崛起,导致很多设计师焦虑,担心被取代。通过上面的案例可以看出Midjourney和Stable Diffusion只能完成项目中的一部分,无法做到独立完成项目,都需要设计师二次创作。早期UI设计师的工具是Photoshop。后面出现高效的Sketch。到如今设计师使用更高效的协同工具Figma。 而AIGC本质上还是提效辅助工具,需要设计师去掌握更高超的操作技能。 决定设计的成败从来是人,而不是工具。