Что это такое?
NarratoAI — это комплексный инструмент на основе ИИ для закадрового озвучивания фильмов и сериалов и автоматического монтажа видео: он использует LLM, чтобы написать сценарий закадрового текста, затем автоматически монтирует видео, генерирует озвучку и добавляет субтитры.
NarratoAI — это комплексный инструмент на основе ИИ для закадрового озвучивания фильмов и сериалов и автоматического монтажа видео: он использует LLM, чтобы написать сценарий закадрового текста, затем автоматически монтирует видео, генерирует озвучку и добавляет субтитры.Это десктопное приложение или то, чем я пользуюсь через браузер?Оно распространяется как загружаемый пакет интеграции для Windows/macOS, который запускает локальный сервер, а пользуетесь вы им через веб-интерфейс в браузере. Также есть отдельная облачная версия, размещённая на NarratoAI.co, если не хочется запускать всё самостоятельно.
Оно распространяется как загружаемый пакет интеграции для Windows/macOS, который запускает локальный сервер, а пользуетесь вы им через веб-интерфейс в браузере. Также есть отдельная облачная версия, размещённая на NarratoAI.co, если не хочется запускать всё самостоятельно.Как это запустить?Скачайте пакет интеграции для своей ОС (NarratoAI-windows-x64 или NarratoAI-macos-arm64), полностью распакуйте его, не перемещая внутренние папки, запустите скрипт обновления (update-windows.bat / update-macos.command), затем скрипт запуска и откройте веб-интерфейс в браузере. Также доступны развёртывание в Docker для macOS и обычный вариант локального запуска.
Скачайте пакет интеграции для своей ОС (NarratoAI-windows-x64 или NarratoAI-macos-arm64), полностью распакуйте его, не перемещая внутренние папки, запустите скрипт обновления (update-windows.bat / update-macos.command), затем скрипт запуска и откройте веб-интерфейс в браузере. Также доступны развёртывание в Docker для macOS и обычный вариант локального запуска.Что нужно иметь перед запуском?Нужны Python 3.12+, Windows 10/11 или macOS 11.0+, процессор не менее чем с 4 ядрами и 8 ГБ оперативной памяти; видеокарта (GPU) не требуется. Также понадобятся API-ключи для тех провайдеров LLM/TTS, которые вы настроите (например, DeepSeek, Gemini, Qwen2-VL).
Нужны Python 3.12+, Windows 10/11 или macOS 11.0+, процессор не менее чем с 4 ядрами и 8 ГБ оперативной памяти; видеокарта (GPU) не требуется. Также понадобятся API-ключи для тех провайдеров LLM/TTS, которые вы настроите (например, DeepSeek, Gemini, Qwen2-VL).Какие сейчас есть ограничения, о которых стоит знать?Версия пакета IndexTTS-2 MLX для клонирования голоса под Windows пока не выпущена (есть только версия для macOS). Кроме того, проект недавно отказался от зависимости LiteLLM и оставил только запросы, совместимые с OpenAI, из соображений безопасности.
Версия пакета IndexTTS-2 MLX для клонирования голоса под Windows пока не выпущена (есть только версия для macOS). Кроме того, проект недавно отказался от зависимости LiteLLM и оставил только запросы, совместимые с OpenAI, из соображений безопасности.Почему в README есть предупреждение о мошенниках?Сообщается, что этот бесплатный проект с открытым исходным кодом переименовывали и перепродавали в соцсетях вроде Douyin и Bilibili, поэтому авторы прямо предупреждают пользователей, чтобы те ничего за него не платили.
Сообщается, что этот бесплатный проект с открытым исходным кодом переименовывали и перепродавали в соцсетях вроде Douyin и Bilibili, поэтому авторы прямо предупреждают пользователей, чтобы те ничего за него не платили.Какие LLM могут написать сценарий закадрового текста?Поддерживаются DeepSeek R1/V3, Qwen2-VL от Alibaba для понимания видео, Gemini и другие провайдеры, совместимые с OpenAI. TwelveLabs Pegasus при желании можно использовать как бэкенд для понимания видео.
Поддерживаются DeepSeek R1/V3, Qwen2-VL от Alibaba для понимания видео, Gemini и другие провайдеры, совместимые с OpenAI. TwelveLabs Pegasus при желании можно использовать как бэкенд для понимания видео.Поддерживается ли клонирование голоса?Да, через IndexTTS-1.5, сборку IndexTTS-2 с ускорением MLX для Apple Silicon и движок OmniVoice, а также через обычные варианты TTS, например Tencent Cloud и Doubao.
Да, через IndexTTS-1.5, сборку IndexTTS-2 с ускорением MLX для Apple Silicon и движок OmniVoice, а также через обычные варианты TTS, например Tencent Cloud и Doubao.Что ещё оно умеет, помимо полноценного закадрового озвучивания?Оно также может автоматически собирать клипы из коротких драматических сериалов, в один клик создавать субтитры по речи, объединять исходные клипы, экспортировать черновики проектов Jianying (CapCut) и автоматически очищать свой кэш.
Оно также может автоматически собирать клипы из коротких драматических сериалов, в один клик создавать субтитры по речи, объединять исходные клипы, экспортировать черновики проектов Jianying (CapCut) и автоматически очищать свой кэш.What are similar projects?MoneyPrinterTurbo, kirara-ai, Pixelle-Video, pyvideotrans, AstrBot, Easel, WanGP, GPT-SoVITS
MoneyPrinterTurbo, kirara-ai, Pixelle-Video, pyvideotrans, AstrBot, Easel, WanGP, GPT-SoVITSWhich topics is it in?gemini-api, voice-cloning, video-editing, webui, discord, text-to-speech, qwen, video-generation, apple-silicon, deepseek, gemini, chinese
gemini-api, voice-cloning, video-editing, webui, discord, text-to-speech, qwen, video-generation, apple-silicon, deepseek, gemini, chinese