术语 | 解释 |
---|---|
Stable Diffusion | Stable diffusion 是一个基于Latent Diffusion Models(潜在扩散模型,LDMs)的文图生成(text-to-image)模型 |
LDM | 潜在扩散模型(Latent Diffusion Models) |
VAE | VAE (Variational Auto-Encoder 变分自动编码器)模型有两部分,分别是一个编码器和一个解码器,常用于AI图像生成。在StableDiffusion中说起VAE时,我们在谈论什么? |
Lora | |
pickle | Python object serialization 对象序列化,kle 模块不安全。只解 pickle 您信任的数据。 可以构造恶意 pickle 数据,在解 pickle 期间执行任意代码。永远不要解 pickle 可能来自不可信来源或可能被篡改的数据。 |
torch | 包 torch 包含了多维张量的数据结构以及基于其上的多种数学操作。另外,它也提供了多种工具,其中一些可以更有效地对张量和任意类型进行序列化 |
cuda | CUDA(Compute Unified Device Architecture),是显卡厂商NVIDIA推出的运算平台。有了cuda,可以让 pytorch 等框架直接在 gpu 上运行,速度当然更快。如果深度学习框架是车,那么 cuda 就是变速箱,可进行硬件加速,让深度学习计算任务更快。 |
ControlNet | |
conda | |
clip | |
Hypernetworks | Hypernetworks 是一种新颖的概念,用于在不触及任何权重的情况下微调模型。此项技术被广泛用于画风模仿中,和 Textual Inversion 相比,泛化效果更好 |
Text to 3D
- Magic3D: https://research.nvidia.com/labs/dir/magic3d/
- DreamFusion: https://dreamfusion3d.github.io/index.html