Открытый исходный код поискового агента Harness-1 с 20B параметрами: реализация состояния снаружи для сверхвысокой эффективности данных
Исследователи из UIUC, UC Berkeley и Chroma опубликовали открытый исходный код поискового агента Harness-1 с 200 миллиардами параметров. Модель использует инновационную архитектуру с вынесенным состоянием: память и задачи по организации в процессе поиска передаются на сторону среды, которая их поддерживает. Благодаря этому даже модели не на самом передовом масштабе могут с очень небольшим количеством обучающих данных демонстрировать производительность, близкую к уровню передовых моделей, в задачах дальнего поиска. Это означает, что разработчикам не нужно тратить огромные вычислительные ресурсы, чтобы построить эффективную систему генерации с расширенным поиском (RAG).
Почему это важно: Harness-1 доказывает, что архитектурные инновации могут компенсировать разницу в количестве параметров, позволяя небольшим командам создавать высокопроизводительные поисковые агенты и существенно снижать порог вычислительных затрат для разработки AI-приложений.
#AI #开源 #检索智能体 #RAG #人工智能
Исследователи из UIUC, UC Berkeley и Chroma опубликовали открытый исходный код поискового агента Harness-1 с 200 миллиардами параметров. Модель использует инновационную архитектуру с вынесенным состоянием: память и задачи по организации в процессе поиска передаются на сторону среды, которая их поддерживает. Благодаря этому даже модели не на самом передовом масштабе могут с очень небольшим количеством обучающих данных демонстрировать производительность, близкую к уровню передовых моделей, в задачах дальнего поиска. Это означает, что разработчикам не нужно тратить огромные вычислительные ресурсы, чтобы построить эффективную систему генерации с расширенным поиском (RAG).
Почему это важно: Harness-1 доказывает, что архитектурные инновации могут компенсировать разницу в количестве параметров, позволяя небольшим командам создавать высокопроизводительные поисковые агенты и существенно снижать порог вычислительных затрат для разработки AI-приложений.
#AI #开源 #检索智能体 #RAG #人工智能