) for the latest dataset / model updates to the Berkeley Function Calling Leaderboard!
Что это такое?
Gorilla — исследовательский проект Берклийского университета, который обучает и оценивает большие языковые модели (LLM) так, чтобы они правильно вызывали API и инструменты по запросам на естественном языке. Со временем он вырос в набор проектов: дообученные модели (OpenFunctions), Berkeley Function Calling Leaderboard (BFCL), среду выполнения (GoEx), рецепт дообучения RAG (RAFT) и CLI-инструмент.
Gorilla — исследовательский проект Берклийского университета, который обучает и оценивает большие языковые модели (LLM) так, чтобы они правильно вызывали API и инструменты по запросам на естественном языке. Со временем он вырос в набор проектов: дообученные модели (OpenFunctions), Berkeley Function Calling Leaderboard (BFCL), среду выполнения (GoEx), рецепт дообучения RAG (RAFT) и CLI-инструмент.Это один инструмент или набор нескольких связанных проектов?Это общий репозиторий для нескольких независимых, но связанных проектов: модели Gorilla/OpenFunctions, бенчмарк и таблица лидеров BFCL, среда выполнения GoEx, рецепт дообучения RAFT, Gorilla CLI и датасет API Zoo.
Это общий репозиторий для нескольких независимых, но связанных проектов: модели Gorilla/OpenFunctions, бенчмарк и таблица лидеров BFCL, среда выполнения GoEx, рецепт дообучения RAFT, Gorilla CLI и датасет API Zoo.Как попробовать без установки чего-либо?Базовую модель Gorilla и OpenFunctions можно попробовать в браузере через размещённые демо в Colab и Gradio, а для самого быстрого знакомства на практике можно установить Gorilla CLI локально.
Базовую модель Gorilla и OpenFunctions можно попробовать в браузере через размещённые демо в Colab и Gradio, а для самого быстрого знакомства на практике можно установить Gorilla CLI локально.Нужны ли мои собственные API-ключи, чтобы GoEx выполнял вызовы, которые генерирует Gorilla?Да — GoEx, среда выполнения, которая исполняет действия, сгенерированные LLM, сам проходит аутентификацию в целевых сервисах через OAuth2 или API-ключи перед выполнением вызова.
Да — GoEx, среда выполнения, которая исполняет действия, сгенерированные LLM, сам проходит аутентификацию в целевых сервисах через OAuth2 или API-ключи перед выполнением вызова.Нужен ли мне такой фреймворк, как LangChain, чтобы построить с его помощью настоящего агента?Gorilla только формирует правильный вызов API для запроса и сам не запускает цикл агента, поэтому его задумано подключать к фреймворкам для агентов, таким как LangChain, а не заменять их.
Gorilla только формирует правильный вызов API для запроса и сам не запускает цикл агента, поэтому его задумано подключать к фреймворкам для агентов, таким как LangChain, а не заменять их.Можно ли использовать это в коммерческих целях бесплатно?Да, весь проект, включая опубликованные модели Gorilla и OpenFunctions, распространяется под лицензией Apache 2.0, поэтому его можно использовать как в академических, так и в коммерческих целях без дополнительных обязательств.
Да, весь проект, включая опубликованные модели Gorilla и OpenFunctions, распространяется под лицензией Apache 2.0, поэтому его можно использовать как в академических, так и в коммерческих целях без дополнительных обязательств.Что такое Berkeley Function Calling Leaderboard (BFCL)?Это всесторонний бенчмарк и таблица лидеров, развиваемые сообществом; они сравнивают способности моделей к вызову функций в одношаговых, многошаговых и многоэтапных сценариях, включая метрики стоимости и задержки.
Это всесторонний бенчмарк и таблица лидеров, развиваемые сообществом; они сравнивают способности моделей к вызову функций в одношаговых, многошаговых и многоэтапных сценариях, включая метрики стоимости и задержки.Что именно делает GoEx?GoEx — среда выполнения для безопасного исполнения действий, сгенерированных LLM, таких как вызовы API и код. Она предлагает проверку после выполнения, а также механизмы отмены и ограничения ущерба, чтобы снизить риск ошибок автономных агентов.
GoEx — среда выполнения для безопасного исполнения действий, сгенерированных LLM, таких как вызовы API и код. Она предлагает проверку после выполнения, а также механизмы отмены и ограничения ущерба, чтобы снизить риск ошибок автономных агентов.Что такое RAFT?RAFT (Retrieval-Augmented Fine-Tuning) — рецепт дообучения LLM на предметно-специфичных задачах генерации с опорой на поиск. Модель обучается на «эталонных» и отвлекающих документах, а ответы с цепочкой рассуждений напрямую цитируют исходные документы.
RAFT (Retrieval-Augmented Fine-Tuning) — рецепт дообучения LLM на предметно-специфичных задачах генерации с опорой на поиск. Модель обучается на «эталонных» и отвлекающих документах, а ответы с цепочкой рассуждений напрямую цитируют исходные документы.Может ли Gorilla CLI помогать не только с вызовом веб-API, но и с командами для облачной инфраструктуры?Да, Gorilla CLI переводит запросы на естественном языке в команды примерно для 1500 API, включая Kubernetes, AWS и GCP, и требует явного подтверждения пользователя перед выполнением любой команды.
Да, Gorilla CLI переводит запросы на естественном языке в команды примерно для 1500 API, включая Kubernetes, AWS и GCP, и требует явного подтверждения пользователя перед выполнением любой команды.Which topics is it in?claude-api, api-documentation, function-calling, tool-calling, openai-api, retrieval-augmented-generation, agentic, tensorflow, oauth2, autonomous-agents, evaluation, sandbox
claude-api, api-documentation, function-calling, tool-calling, openai-api, retrieval-augmented-generation, agentic, tensorflow, oauth2, autonomous-agents, evaluation, sandbox