Что это?
Это официальный пакет PyTorch для дискретного вариационного автокодировщика (dVAE), который используется в модели генерации изображений DALL·E от OpenAI. Он содержит только компонент-кодировщик и декодер изображений, но не трансформер, который непосредственно создаёт картинки по тексту.
Это полная модель DALL·E или только её часть?
Это только компонент dVAE, который сжимает изображения в токены и восстанавливает их обратно. Трансформер, который генерирует изображения по текстовым запросам, в этот релиз явно не входит.
Нужно ли сначала установить Python и PyTorch?
Да, это Python-пакет на основе PyTorch, который устанавливается через pip.
Можно ли с помощью этого репозитория генерировать изображения по тексту?
Нет, так как трансформер, который превращает текст в изображения, здесь не опубликован, поэтому доступны только функции кодирования и декодирования (изображение в токены и токены в изображение).
Репозиторий поддерживается и обновляется?
Нет, репозиторий архивирован, так что это замороженный исторический релиз, а не активно развивающийся проект.
Где посмотреть, как пользоваться моделью?
В репозитории есть блокнот usage.ipynb, который показывает, как загрузить и запустить дискретный VAE.
What are similar projects?
DALLE2-pytorch, shap-e, dalle-mini, latent-diffusion, nanoGPT, generative-models, PyTorch-GAN, stable-diffusion
Which topics is it in?
vision, text-to-image, gpt, neural-network, transformer, image-generation, generative-ai, deprecated, computer-vision, pytorch, openai, deep-learning