moondream README

The project's README from github.com/m87-labs/moondream. As one markdown file: README.md.

🌔 moondream

a tiny vision language model that kicks ass and runs anywhere

Website | Demo

Examples

Image Example
What is the girl doing?
The girl is sitting at a table and eating a large hamburger.

What color is the girl's hair?
The girl's hair is white.
What is this?
This is a computer server rack, which is a device used to store and manage multiple computer servers. The rack is filled with various computer servers, each with their own dedicated space and power supply. The servers are connected to the rack via multiple cables, indicating that they are part of a larger system. The rack is placed on a carpeted floor, and there is a couch nearby, suggesting that the setup is in a living or entertainment area.

What is behind the stand?
Behind the stand, there is a brick wall.

About

Moondream is a highly efficient open-source vision language model that combines powerful image understanding capabilities with a remarkably small footprint. It's designed to be versatile and accessible, capable of running on a wide range of devices and platforms.

The project offers two model variants:

How to use

Moondream can be run locally, or in the cloud. Please refer to the Getting Started page for details.

Special thanks

moondream (m87-labs/moondream)

Searching Database…

10.1K ·GitHub
Что это такое?Moondream — маленькая открытая vision language model, которая понимает изображения: описывает их, отвечает на вопросы о картинке и находит объекты. При этом она достаточно компактна, чтобы работать почти где угодно.
Это облачный сервис или модель, которую я запускаю сам?Это открытая предобученная модель, а не SaaS-продукт. Вы скачиваете её и запускаете сами, локально или в облаке. Есть два размера: Moondream 2B и Moondream 0.5B.
Как его запустить?В README есть ссылка на страницу 'Getting Started' с инструкциями по запуску локально или в облаке. Также отмечен Modal как способ запустить Moondream в облачной инфраструктуре всего в несколько строк Python.
Мне достаточно Python, чтобы запустить Moondream?Репозиторий написан на Python, но в обзоре README не перечислены конкретные зависимости pip. Точные требования к установке смотрите на странице Getting Started.
Нужно мощное железо, чтобы это запустить?Нет. Moondream 0.5B — модель на 500 миллионов параметров, которая специально создана как дистиллированная версия для edge-устройств, поэтому она рассчитана на работу с ограниченными ресурсами. Более крупная модель 2B жертвует частью эффективности ради более высокой точности в универсальных задачах.
На каких устройствах это может работать?Модель рассчитана на работу на самых разных устройствах и платформах: от edge-оборудования до облачных серверов.
Что Moondream умеет делать сразу после установки?Она умеет описывать изображения, отвечать на вопросы о них и находить объекты. В README есть примеры, например описание серверной стойки или ответы на вопросы о деталях фотографии.
В чём реальная разница между моделями 2B и 0.5B?Moondream 2B — основная модель с полным набором возможностей для общего понимания изображений. Moondream 0.5B — меньшая дистиллированная версия, созданная специально для эффективной работы на edge-устройствах.
Можно попробовать, не настраивая ничего?Да, в проекте есть ссылки на размещённое Demo и Website, где можно протестировать Moondream без установки.
Можно ли использовать это в коммерческом продукте бесплатно?Да, модель распространяется по лицензии Apache-2.0, которая разрешает коммерческое использование.
Creator
m87-labs
Size
45.9 MB
Stars
10.1K
Updated
CommitApr 20
Age
2y
Commits · 90 Days