这个利用 3D 制作白膜然后 SD 重绘生成视频的项目，最后的效果非常好，同时作者给了相对详细的操作步骤。下面是他的工作流：基础渲染：首先在Cinema 4D软件中创建并动画化了一个3D虚拟角色，这个角色的体型和面部结构都是依照客户的样貌设计的。…

发布时间: 2024-03-12 22:21:31

1分

数据加载中

这个利用 3D 制作白膜然后 SD 重绘生成视频的项目，最后的效果非常好，同时作者给了相对详细的操作步骤。
下面是他的工作流：
基础渲染：
首先在Cinema 4D软件中创建并动画化了一个3D虚拟角色，这个角色的体型和面部结构都是依照客户的样貌设计的。…
IT技术
( twitter.com )

这个利用 3D 制作白膜然后 SD 重绘生成视频的项目，最后的效果非常好，同时作者给了相对详细的操作步骤。
下面是他的工作流：

基础渲染：

首先在Cinema 4D软件中创建并动画化了一个3D虚拟角色，这个角色的体型和面部结构都是依照客户的样貌设计的。

我还细致地给这个3D角色做了纹理处理，以便使用EbSynth软件更好地追踪角色身体的不同部位。这里还涉及到了我为角色设计的3D服装，我将它们作为一个独立的渲染通道，在后期合成阶段加入。

AI输出：

接着，我利用了一个AI模型（SD 1.5版本，当然是得到客户许可后进行的）来处理客户的相貌特征，并使用了一个名为Warp Fusion的技术来生成你现在看到的图像序列。使用Warp Fusion的过程非常耗时，主要是因为它需要不断地尝试和调整。

去闪烁：

这是最复杂的一个步骤。我使用EbSynth进行初步处理，然后通过Davinci Resolve和Topaz Video AI软件来平滑化Warp Fusion的输出结果，同时尽量保持细节。

此外，我还使用了Google Research的帧插值工具来优化角色脸部的某些动作（这些动作在EbSynth中无法得到很好的处理），然后在After Effects软件中把这些处理后的画面加入到视频中。

3D服装：

这一步主要是把之前“基础渲染”阶段制作的服装渲染通道加入进来，并尽可能地进行蒙版处理和合成。由于去闪烁过程对角色动作的插值有所改变，所以服装渲染并不完全同步于角色，但效果依然可以接受。

后期处理：

这个步骤主要是在After Effects中进行常规的视频合成工作。

Markdown支持

评论加载中...

您可能感兴趣的：更多

SD这个水墨风格的Lora太绝了，在Niji看见几张有点水墨的图，但是缺少细节笔触也比较少，拿到SD里面用这个Lora重绘了一下，太强了这个效果。
最后一张是Niji的原图，第三张是4K分辨率的。
Lora链接：…
IT技术
( twitter.com)

1年前 • 歸藏 • -- 点击 0 评论

ilumine AI 将Midjourney生成的图片转换成了可探索的3D场景。方法是现在SD control net中生成深度图，再将深度图应用在Unity顶点置换着色器。作者还准备根据这个方法制作一个自…
IT技术
( twitter.com)

1年前 • sundyme • -- 点击 0 评论

利用SD的插件，你可以从文本或者图片创建3D模型，效果看起来还不错，后面可以把创建的3D模型再利用ControlNet的深度图来做其他事情。
插件是基于OpenAI Shap-E的3D模型生成模型做的。
感兴趣可以装一个试试。
🔗…
IT技术
( twitter.com)

1年前 • 歸藏 • -- 点击 0 评论

怎么把简单手绘草稿变成 3D 世界

这个 Sketch-to-skybox 工具，可以把你手绘的草稿变成 3D 天空盒子，快速帮你生成一个逼真的 3D 世界

在很多 3D 设计…
IT技术
( twitter.com)

1年前 • 倪爽 • -- 点击 0 评论

如何做手绘风格的图片切换？
分享一个 SD Lora:
此 Lora 要搭配以下底座模型：
怎么对比前后两张图？在这里：
昨天看到 AI 绘画群在讨论上面两个问题，我试着用我仅有的一点 Stable Diffusion…
IT技术
( twitter.com)

8个月前 • 黄赟 • -- 点击 • 下载视频 0 评论

00:00:16

SD WebUI 保姆级攻略

这是我两周前开1.5倍速度刷的ai绘图教程，现在播放量已经180万了。

基本入门：很耐心，教如何部署sd webui，如何绘图，解释不少基本概念。

基本功能：文生图，图生图讲解，安装扩展。

利用模型：如何去c站下载模型，embedding，checkpoint，lora，如何使用，control…
时政
( twitter.com)

1年前 • 铁锤人 • -- 点击 0 评论

UIDraw ：在手机上绘制简单UI草图转换成网站。
使用 GPT-4 Vision 和 PencilKit/PKCanvasView （可绘制的画布）技术，用户可以绘制用户界面(UI)，然后将其转换成HTML代码。
GitHub：
IT技术
( github.com)

1年前 • 小互 • -- 点击 • 下载视频 0 评论

00:00:42

有人花费 3 个月时间，完全使用 SD 制作了一本漫画小说。
- 绘画模型是 iComix；
- 提示词中混合著名演员以保持人脸一致性；
- ControlNet Reference 模型实现服装一致性；
- ControlNet OpenPose 模型控制人物姿势；
- 使用 Photoshop 处理对话气泡。
原帖：
时政
( www.reddit.com)

5个月前 • 高军 • -- 点击 • 下载视频 0 评论

00:00:10

昨天答应的 ComfyUI 人像发色更换保姆级教程视频来了。
我会先大概讲一下原理，然后再讲对应节点的作用和参数。最后会发散一下其他的方式，比如更换美瞳以及换衣服。
工作流原理：
主要用到了 SD 中局部重绘的原理，关键在于如何选中我们需要选中的区域，这里的突破主要是 Yolo World…
IT技术
( twitter.com)

8个月前 • 歸藏 • -- 点击 • 下载视频 0 评论

00:05:12

IT技术

SD这个水墨风格的Lora太绝了，在Niji看见几张有点水墨的图，但是缺少细节笔触也比较少，拿到SD里面用这个Lora重绘了一下，太强了这个效果。 最后一张是Niji的原图，第三张是4K分辨率的。 Lora链接：… IT技术 ( twitter.com)

IT技术

ilumine AI 将Midjourney生成的图片转换成了可探索的3D场景。方法是现在SD control net中生成深度图，再将深度图应用在Unity顶点置换着色器。作者还准备根据这个方法制作一个自… IT技术 ( twitter.com)

IT技术

IT技术

怎么把简单手绘草稿变成 3D 世界 这个 Sketch-to-skybox 工具，可以把你手绘的草稿变成 3D 天空盒子，快速帮你生成一个逼真的 3D 世界 在很多 3D 设计… IT技术 ( twitter.com)

IT技术

如何做手绘风格的图片切换？ 分享一个 SD Lora: 此 Lora 要搭配以下底座模型： 怎么对比前后两张图？在这里： 昨天看到 AI 绘画群在讨论上面两个问题，我试着用我仅有的一点 Stable Diffusion… IT技术 ( twitter.com)

IT技术

时政

UIDraw ：在手机上绘制简单UI草图转换成网站。 使用 GPT-4 Vision 和 PencilKit/PKCanvasView （可绘制的画布）技术，用户可以绘制用户界面(UI)，然后将其转换成HTML代码。 GitHub： IT技术 ( github.com)

IT技术

时政

IT技术

创建一个新帐户

登录

SD这个水墨风格的Lora太绝了，在Niji看见几张有点水墨的图，但是缺少细节笔触也比较少，拿到SD里面用这个Lora重绘了一下，太强了这个效果。
最后一张是Niji的原图，第三张是4K分辨率的。
Lora链接：…
IT技术
( twitter.com)

ilumine AI 将Midjourney生成的图片转换成了可探索的3D场景。方法是现在SD control net中生成深度图，再将深度图应用在Unity顶点置换着色器。作者还准备根据这个方法制作一个自…
IT技术
( twitter.com)

怎么把简单手绘草稿变成 3D 世界

这个 Sketch-to-skybox 工具，可以把你手绘的草稿变成 3D 天空盒子，快速帮你生成一个逼真的 3D 世界

在很多 3D 设计…
IT技术
( twitter.com)

如何做手绘风格的图片切换？
分享一个 SD Lora:
此 Lora 要搭配以下底座模型：
怎么对比前后两张图？在这里：
昨天看到 AI 绘画群在讨论上面两个问题，我试着用我仅有的一点 Stable Diffusion…
IT技术
( twitter.com)

UIDraw ：在手机上绘制简单UI草图转换成网站。
使用 GPT-4 Vision 和 PencilKit/PKCanvasView （可绘制的画布）技术，用户可以绘制用户界面(UI)，然后将其转换成HTML代码。
GitHub：
IT技术
( github.com)