Набор инструментов инженера по моделированию больших языков: подборка из 120+ полезных библиотечных ресурсов
В области искусственного интеллекта технология моделирования больших языков (Large Language Modelling, LLM) быстро меняется, и появляются различные библиотеки инструментов. Чтобы помочь разработчикам лучше справляться с задачами разработки LLM, в этой статье собран набор инструментов, содержащий более 120 полезных библиотек LLM, разделенных по функциональным категориям, чтобы инженеры могли быстро находить и применять их.

Быстрая навигация
Чтобы читателям было проще быстро найти нужные им ресурсы, здесь приведены быстрые ссылки на библиотеки инструментов для каждой категории:
| 🚀 Обучение и тонкая настройка LLM | 🧱 LLM Разработка приложений | 🩸 Генерирование усиления поиска LLM (RAG) |
| 🟩 рассуждения LLM | 🚧 Развертывание службы LLM | 📤 Извлечение данных для LLM |
| 🌠 Генерация данных LLM | 💎 LLM Интеллектуальное тело | ⚖️ Оценка уровня магистратуры |
| 🔍 Контроль и управление LLM | 📅 LLM Prompt Word Engineering | 📝 LLM Структурированный вывод |
| 🛑 Безопасность LLM | 💠 Встроенная модель LLM | ❇️ Другое |
Обучение и доработка LLM
| название библиотеки | описания | ссылка (на веб-сайте) |
|---|---|---|
| unsloth | Тонкая настройка LLM выполняется быстрее с меньшим объемом памяти. | ссылка (на веб-сайте) |
| PEFT | Расширенная библиотека для эффективной тонкой настройки параметров. | ссылка (на веб-сайте) |
| TRL | Обучение с использованием обучения с подкреплением трансформатор Моделирование языка. | ссылка (на веб-сайте) |
| Трансформеры | Transformers предоставляет тысячи предварительно обученных моделей для выполнения задач в различных модальностях, таких как текст, зрение и аудио. | ссылка (на веб-сайте) |
| Аксолотль | Инструменты, предназначенные для упрощения посттренингового обучения различных моделей ИИ. | ссылка (на веб-сайте) |
| LLMBox | Комплексная библиотека LLM, включающая унифицированный конвейер обучения и комплексную оценку моделей. | ссылка (на веб-сайте) |
| ЛитГПТ | Быстрое обучение и тонкая настройка LLM. | ссылка (на веб-сайте) |
| Mergoo | Библиотека для простого объединения нескольких экспертов LLM и эффективного обучения объединенного LLM. | ссылка (на веб-сайте) |
| Фабрика ламы | Простой и эффективный инструмент для тонкой настройки LLM. | ссылка (на веб-сайте) |
| Людвиг | Малокодовый фреймворк для создания пользовательских LLM, нейронных сетей и других моделей искусственного интеллекта. | ссылка (на веб-сайте) |
| Txtinstruct | Система обучения моделей настройки инструкций. | ссылка (на веб-сайте) |
| Lamini | Интегрированная платформа для вывода и настройки LLM. | ссылка (на веб-сайте) |
| XTuring | XTuring обеспечивает быструю, эффективную и простую тонкую настройку открытых LLM, таких как Mistral, LLaMA, GPT-J и других. | ссылка (на веб-сайте) |
| RL4LMs | Модульная библиотека RL для тонкой настройки языковых моделей в соответствии с предпочтениями человека. | ссылка (на веб-сайте) |
| DeepSpeed | DeepSpeed - это библиотека оптимизации глубокого обучения, которая делает распределенное обучение и выводы простыми, эффективными и результативными. | ссылка (на веб-сайте) |
| торхтун | Нативная библиотека PyTorch, созданная специально для тонкой настройки LLM. | ссылка (на веб-сайте) |
| PyTorch молния | Библиотека, предоставляющая высокоуровневый интерфейс для предварительного обучения и тонкой настройки LLM. | ссылка (на веб-сайте) |
Разработка приложений для LLM
рисунок
| название библиотеки | описания | ссылка (на веб-сайте) |
|---|---|---|
| LangChain | LangChain - это фреймворк для разработки приложений на основе Большой языковой модели (LLM). | ссылка (на веб-сайте) |
| Индекс ламы | LlamaIndex - это структура данных для приложений LLM. | ссылка (на веб-сайте) |
| HayStack | Haystack - это сквозной LLM-фреймворк, который позволяет пользователям создавать приложения на основе LLM, моделей Transformer, векторного поиска и многого другого. | ссылка (на веб-сайте) |
| Быстрый поток | Набор инструментов разработки, предназначенных для упрощения сквозного цикла разработки приложений ИИ на основе LLM. | ссылка (на веб-сайте) |
| Griptape | Модульный фреймворк на языке Python для создания приложений, управляемых искусственным интеллектом. | ссылка (на веб-сайте) |
| Плетение | Weave - это набор инструментов для разработки приложений генеративного ИИ. | ссылка (на веб-сайте) |
| Стек с ламой | Создайте приложение "Ллама". | ссылка (на веб-сайте) |
Многократный доступ к API
| название библиотеки | описания | ссылка (на веб-сайте) |
|---|---|---|
| LiteLLM | Библиотека из более чем 100 вызовов LLM API в формате OpenAI. | ссылка (на веб-сайте) |
| Шлюз искусственного интеллекта | Быстрый AI-шлюз с интегрированным ограждением. Маршруты к 200+ LLM, 50+ AI-заборам через 1 быстрый и дружественный API. | ссылка (на веб-сайте) |
Маршрутизатор (вычислительная техника)
| название библиотеки | описания | ссылка (на веб-сайте) |
|---|---|---|
| RouteLLM | Фреймворк для обслуживания и оценки маршрутизаторов LLM - экономия затрат на LLM без ущерба для качества Прямая замена клиентов OpenAI для маршрутизации более простых запросов к более дешевым моделям. | ссылка (на веб-сайте) |
запоминание
| название библиотеки | описания | ссылка (на веб-сайте) |
|---|---|---|
| память0 | Слой памяти для приложений искусственного интеллекта. | ссылка (на веб-сайте) |
| Memoripy | Слой памяти ИИ с краткосрочным и долгосрочным хранением, семантической кластеризацией и опциональным уменьшением памяти для контекстно-ориентированных приложений. | ссылка (на веб-сайте) |
интерфейсы
| название библиотеки | описания | ссылка (на веб-сайте) |
|---|---|---|
| Streamlit | Более быстрый способ создания приложений для работы с данными и обмена ими. Streamlit позволяет пользователям превращать скрипты Python в интерактивные веб-приложения за считанные минуты. | ссылка (на веб-сайте) |
| Gradio | Создавайте восхитительные приложения машинного обучения на языке Python и делитесь ими. | ссылка (на веб-сайте) |
| ПОЛЬЗОВАТЕЛЬСКИЙ ИНТЕРФЕЙС AI SDK | Создание чатов и генеративных пользовательских интерфейсов. | ссылка (на веб-сайте) |
| AI-Gradio | Создавайте приложения ИИ, поддерживаемые различными поставщиками услуг ИИ. | ссылка (на веб-сайте) |
| Симплеайхат | Пакеты Python для удобного взаимодействия с чат-приложениями с мощными возможностями и минимальной сложностью кода. | ссылка (на веб-сайте) |
| Chainlit | Создавайте готовые к производству приложения с разговорным ИИ за считанные минуты. | ссылка (на веб-сайте) |
низкий код
| название библиотеки | описания | ссылка (на веб-сайте) |
|---|---|---|
| LangFlow | LangFlow - это конструктор приложений с низким кодом для RAG и мультиагентных приложений ИИ. Он основан на Python и не зависит от каких-либо моделей, API или баз данных. | ссылка (на веб-сайте) |
(вычислительный) кэш
| название библиотеки | описания | ссылка (на веб-сайте) |
|---|---|---|
| GPTCache | Библиотека для создания семантических кэшей для LLM-запросов. Снижает стоимость LLM API в 10 раз💰 и увеличивает скорость в 100 раз. Полностью интегрирована с LangChain и LlamaIndex. | ссылка (на веб-сайте) |
LLM RAG
| название библиотеки | описания | ссылка (на веб-сайте) |
|---|---|---|
| FastGraph RAG | Упрощенная и быстродействующая система Fast GraphRAG предназначена для интерпретируемых, высокоточных, управляемых агентами поисковых рабочих процессов. | ссылка (на веб-сайте) |
| Чонки | Библиотека RAG chunking, легкая, чрезвычайно быстрая и простая в использовании. | ссылка (на веб-сайте) |
| RAGChecker | Тонкая структура для диагностики RAG. | ссылка (на веб-сайте) |
| RAG to Riches | Создавайте, расширяйте и развертывайте приложения для создания расширенного поиска. | ссылка (на веб-сайте) |
| BeyondLLM | Beyond LLM предоставляет универсальный набор инструментов для экспериментов, оценки и развертывания систем Retrieval Augmented Generation (RAG). | ссылка (на веб-сайте) |
| SQLite-Vec | Расширение SQLite для векторного поиска, которое работает где угодно! | ссылка (на веб-сайте) |
| fastRAG | fastRAG - это исследовательский фреймворк для эффективного и оптимизированного поиска по трубопроводам расширенного поколения, сочетающий в себе передовые методы LLM и информационного поиска. | ссылка (на веб-сайте) |
| FlashRAG | Инструментарий Python для эффективного исследования RAG. | ссылка (на веб-сайте) |
| Llmware | Унифицированная структура для построения корпоративных конвейеров RAG с использованием небольших, специально созданных моделей. | ссылка (на веб-сайте) |
| Реранкеры | Легкий унифицированный API для различных моделей переупорядочивания. | ссылка (на веб-сайте) |
| Vectara | Создайте приложение Agentic RAG. | ссылка (на веб-сайте) |
Рассуждения LLM
| название библиотеки | описания | ссылка (на веб-сайте) |
|---|---|---|
| Компрессор LLM | Transformers-совместимая библиотека для применения различных алгоритмов сжатия к LLM для оптимизации развертывания. | ссылка (на веб-сайте) |
| LightLLM | Основанный на Python фреймворк для выводов и сервисов LLM, известный своим легким дизайном, простотой масштабирования и высокой скоростью работы. | ссылка (на веб-сайте) |
| vLLM | Высокопроизводительный и эффективный с точки зрения памяти механизм вывода и обслуживания для LLM. | ссылка (на веб-сайте) |
| torchchat | Запускайте PyTorch LLM локально на серверах, настольных компьютерах и мобильных устройствах. | ссылка (на веб-сайте) |
| TensorRT-LLM | TensorRT-LLM - это библиотека для оптимизации вывода по большой языковой модели (LLM). | ссылка (на веб-сайте) |
| WebLLM | Высокопроизводительный браузерный механизм вывода LLM. | ссылка (на веб-сайте) |
Развертывание службы LLM
| название библиотеки | описания | ссылка (на веб-сайте) |
|---|---|---|
| Лангкорн | Используйте FastAPI для автоматизации обслуживания приложений и агентов LangChain LLM. | ссылка (на веб-сайте) |
| ЛитСерв | Чрезвычайно быстрый сервисный движок для любых моделей ИИ любого размера. Он расширяет FastAPI такими функциями, как пакетная обработка, потоковая передача и автомасштабирование GPU. | ссылка (на веб-сайте) |
Извлечение данных LLM
| название библиотеки | описания | ссылка (на веб-сайте) |
|---|---|---|
| Crawl4AI | Открытый исходный код LLM дружественных веб-краулер и ползунки инструмент . | ссылка (на веб-сайте) |
| ScrapeGraphAI | Python-библиотека для веб-ползания, использующая LLM и прямую графовую логику для создания конвейеров ползания по веб-сайтам и локальным документам (XML, HTML, JSON, Markdown и т.д.). | ссылка (на веб-сайте) |
| Доклинг | Docling анализирует документы и легко и быстро экспортирует их в нужный формат. | ссылка (на веб-сайте) |
| Разбор ламы | Родной парсер документов GenAI, который может анализировать сложные данные документов для любого последующего использования LLM (RAG, агент). | ссылка (на веб-сайте) |
| PyMuPDF4LLM | Библиотека PyMuPDF4LLM облегчает пользователям извлечение содержимого PDF в форматы, требуемые средами LLM и RAG. | ссылка (на веб-сайте) |
| Кроули | Библиотека автоматизации веб-краулера и браузера. | ссылка (на веб-сайте) |
| MegaParse | Парсер для каждого типа документа. | ссылка (на веб-сайте) |
| ExtractThinker | Интеллектуальная библиотека документов для LLM. | ссылка (на веб-сайте) |
Генерация данных LLM
| название библиотеки | описания | ссылка (на веб-сайте) |
|---|---|---|
| DataDreamer | DataDreamer - это мощная библиотека Python с открытым исходным кодом для создания подсказок, синтетических данных и рабочих процессов обучения. | ссылка (на веб-сайте) |
| изготовитель | Гибкий фреймворк с открытым исходным кодом для создания наборов данных с использованием больших языковых моделей. | ссылка (на веб-сайте) |
| Promptwright | Библиотека для создания синтетических наборов данных. | ссылка (на веб-сайте) |
| EasyInstruct | Простой в использовании фреймворк для обработки больших инструкций языковой модели. | ссылка (на веб-сайте) |
LLM Интеллектуальное тело
| название библиотеки | описания | ссылка (на веб-сайте) |
|---|---|---|
| CrewAI | Структура для организации ролевых игр, автономных агентов ИИ. | ссылка (на веб-сайте) |
| LangGraph | Постройте агент эластичного языка в виде графа. | ссылка (на веб-сайте) |
| Agno | Создавайте агентов ИИ с памятью, знаниями, инструментами и возможностями рассуждения. Общайтесь с ними с помощью красивого пользовательского интерфейса агента. | ссылка (на веб-сайте) |
| AutoGen | Фреймворк с открытым исходным кодом для создания агентных систем искусственного интеллекта. | ссылка (на веб-сайте) |
| Смолагенты | Библиотека для создания мощных агентов в нескольких строках кода. | ссылка (на веб-сайте) |
| Пидантик ИИ | Агентный фреймворк на языке Python для создания приложений производственного уровня с использованием генеративного ИИ. | ссылка (на веб-сайте) |
| gradio-tools | Библиотека Python для преобразования приложений Gradio в инструменты, которые могут быть использованы агентами на основе LLM для выполнения своих задач. | ссылка (на веб-сайте) |
| Composio | Готовый к производству набор инструментов для ИИ-агентов. | ссылка (на веб-сайте) |
| Атомные агенты | Атомарное построение агентов ИИ. | ссылка (на веб-сайте) |
| Мемари | Слой памяти с открытым исходным кодом для автономных агентов. | ссылка (на веб-сайте) |
| Использование браузеров | Сделайте сайт доступным для агентов искусственного интеллекта. | ссылка (на веб-сайте) |
| OpenWebAgent | Открытый инструментарий для создания веб-прокси на больших языковых моделях. | ссылка (на веб-сайте) |
| Lagent | Легкий фреймворк для создания агентов на основе LLM. | ссылка (на веб-сайте) |
| LazyLLM | Инструмент разработки с низким кодом для создания мультиагентных LLM-приложений. | ссылка (на веб-сайте) |
| Рои | Структура для мультиагентной оркестровки корпоративного класса, готовой к производству. | ссылка (на веб-сайте) |
| ChatArena | ChatArena - это библиотека, предоставляющая многоагентную языковую игровую среду и способствующая исследованиям автономных LLM-агентов и их социальных взаимодействий. | ссылка (на веб-сайте) |
| Рой | Исследование эргономичной, легкой, мультиагентной оркестрованной образовательной структуры. | ссылка (на веб-сайте) |
| AgentStack | Самый быстрый способ создания мощных агентов искусственного интеллекта. | ссылка (на веб-сайте) |
| Archgw | Интеллектуальный агентский шлюз. | ссылка (на веб-сайте) |
| Поток | Легкий движок задач для создания агентов ИИ. | ссылка (на веб-сайте) |
| AgentOps | Python SDK для мониторинга агентов искусственного интеллекта. | ссылка (на веб-сайте) |
| Лангроид | Многоагентная система. | ссылка (на веб-сайте) |
| Агентариум | Фреймворк для создания и управления симуляторами, которые наполняют агенты, управляемые искусственным интеллектом. | ссылка (на веб-сайте) |
| Upsonic | адъювант MCP основа для надежных агентов ИИ. | ссылка (на веб-сайте) |
Оценка LLM
| название библиотеки | описания | ссылка (на веб-сайте) |
|---|---|---|
| Рагас | Ragas - это универсальный набор инструментов для оценки и оптимизации приложений с большими языковыми моделями (LLM). | ссылка (на веб-сайте) |
| Giskard | Инструменты для оценки и тестирования систем ML и LLM с открытым исходным кодом. | ссылка (на веб-сайте) |
| DeepEval | Система оценки LLM | ссылка (на веб-сайте) |
| Lighteval | Универсальный набор инструментов для оценки LLM. | ссылка (на веб-сайте) |
| Trulens | Инструменты для оценки и отслеживания экспериментов LLM | ссылка (на веб-сайте) |
| PromptBench | Единая система оценки для крупномасштабного моделирования языка. | ссылка (на веб-сайте) |
| LangTest | Обеспечение надежных и достоверных языковых моделей. Более 60 типов тестов для сравнения моделей LLM и NLP с точки зрения точности, смещения, справедливости, надежности и т. д. | ссылка (на веб-сайте) |
| EvalPlus | Строгая система оценки для LLM4Code. | ссылка (на веб-сайте) |
| FastChat | Открытая платформа для обучения, обслуживания и оценки чат-ботов на основе больших языковых моделей. | ссылка (на веб-сайте) |
| судьи | Небольшой штат судей, специализирующихся на магистерских программах. | ссылка (на веб-сайте) |
| Эвалы | Evals - это основа для оценки LLM и LLM-систем, а также бенчмаркинга реестров с открытым исходным кодом. | ссылка (на веб-сайте) |
| АгентЭвалс | Оценщики и утилиты для оценки работы агентов. | ссылка (на веб-сайте) |
| LLMBox | Комплексная библиотека LLM, включающая унифицированный конвейер обучения и комплексную оценку моделей. | ссылка (на веб-сайте) |
| Opik | Платформа для разработки LLM с открытым исходным кодом, которая также включает в себя оценку LLM. | ссылка (на веб-сайте) |
Мониторинг LLM
| название библиотеки | описания | ссылка (на веб-сайте) |
|---|---|---|
| MLflow | Комплексная платформа MLOps/LLMOps с открытым исходным кодом для отслеживания, оценки и мониторинга LLM-приложений. | ссылка (на веб-сайте) |
| Opik | Платформа для сквозной разработки LLM с открытым исходным кодом, которая также включает в себя мониторинг LLM. | ссылка (на веб-сайте) |
| LangSmith | Предоставляет инструменты для документирования, мониторинга и улучшения приложений LLM. | ссылка (на веб-сайте) |
| Вес & Biases (W&B) | W&B предоставляет функциональность для отслеживания результатов работы LLM. | ссылка (на веб-сайте) |
| Геликон | Платформа наблюдаемости LLM с открытым исходным кодом для разработчиков. Интеграция в одну линию для мониторинга, метрик, оценки, отслеживания агентов, управления репликами, игровых площадок и многого другого. | ссылка (на веб-сайте) |
| Очевидно, | Фреймворк наблюдаемости ML и LLM с открытым исходным кодом. | ссылка (на веб-сайте) |
| Феникс | Платформа наблюдаемости ИИ с открытым исходным кодом, предназначенная для экспериментов, оценки и устранения неполадок. | ссылка (на веб-сайте) |
| Наблюдатели | Легкая библиотека для наблюдаемости ИИ. | ссылка (на веб-сайте) |
LLM Cue word engineering
| название библиотеки | описания | ссылка (на веб-сайте) |
|---|---|---|
| PCToolkit | Унифицированный набор инструментов для сжатия подсказок для больших языковых моделей. | ссылка (на веб-сайте) |
| Выборочный контекст | Selective Context сжимает подсказки и контекст пользователя, чтобы позволить LLM (например, ChatGPT) обрабатывать в 2 раза больше контента. | ссылка (на веб-сайте) |
| LLMLingua | Библиотека для сжатия подсказок для ускорения LLM-рассуждений. | ссылка (на веб-сайте) |
| betterprompt | Набор для тестирования подсказок LLM перед их внедрением в производственную среду. | ссылка (на веб-сайте) |
| Promptify | Решайте проблемы НЛП с помощью LLM и легко генерируйте различные подсказки к задачам НЛП для популярных генеративных моделей, таких как GPT, PaLM и т. д., с помощью Promptify. | ссылка (на веб-сайте) |
| PromptSource | PromptSource - это набор инструментов для создания, обмена и использования подсказок на естественном языке. | ссылка (на веб-сайте) |
| DSPy | DSPy - это фреймворк с открытым исходным кодом для программирования (не подсказки) языковых моделей. | ссылка (на веб-сайте) |
| Py-priompt | Включите библиотеку дизайна. | ссылка (на веб-сайте) |
| Promptimizer | Подсказки по оптимизации работы библиотеки. | ссылка (на веб-сайте) |
Структурированный вывод LLM
| название библиотеки | описания | ссылка (на веб-сайте) |
|---|---|---|
| Инструктор | Библиотека Python для обработки структурированного вывода больших языковых моделей (LLM). Построенная на основе Pydantic, она предоставляет простой, прозрачный и удобный API. | ссылка (на веб-сайте) |
| XGrammar | Библиотека с открытым исходным кодом для эффективной, гибкой и переносимой генерации структур. | ссылка (на веб-сайте) |
| Конспекты | Мощная генерация (структурированного) текста | ссылка (на веб-сайте) |
| Руководство | Руководство - это действующая парадигма программирования, используемая для управления языковой моделью. | ссылка (на веб-сайте) |
| LMQL | Язык для загрузки ограничений и эффективного программирования LLM. | ссылка (на веб-сайте) |
| Jsonformer | Безошибочный метод генерации структурированного JSON из языковых моделей. | ссылка (на веб-сайте) |
LLM Безопасность
| название библиотеки | описания | ссылка (на веб-сайте) |
|---|---|---|
| JailbreakEval | Коллекция автоматических оценщиков для оценки попыток джейлбрейка. | ссылка (на веб-сайте) |
| EasyJailbreak | Простой в использовании фреймворк на языке Python для генерации враждебных подсказок для джейлбрейка. | ссылка (на веб-сайте) |
| Ограждения | Добавление ограждений в большие языковые модели. | ссылка (на веб-сайте) |
| Охранник LLM | LLM Interactive Security Toolkit. | ссылка (на веб-сайте) |
| АудитНЛГ | AuditNLG - это библиотека с открытым исходным кодом, которая поможет снизить риски, связанные с использованием генеративных систем искусственного интеллекта для работы с языком. | ссылка (на веб-сайте) |
| Ограждения NeMo | NeMo Guardrails - это инструментарий с открытым исходным кодом, позволяющий легко добавлять программируемые ограждения в диалоговые системы на основе LLM. | ссылка (на веб-сайте) |
| Гарак | Сканер уязвимостей LLM | ссылка (на веб-сайте) |
Встроенная модель LLM
| название библиотеки | описания | ссылка (на веб-сайте) |
|---|---|---|
| Приговор-Трансформеры | Усовершенствованная модель встраивания текста | ссылка (на веб-сайте) |
| Model2Vec | Быстрые усовершенствованные статические модели встраивания | ссылка (на веб-сайте) |
| Выводы при встраивании текста | TEI обеспечивает высокопроизводительное извлечение для самых популярных моделей, включая FlagEmbedding, Ember, GTE и E5. | ссылка (на веб-сайте) |
остальное
| название библиотеки | описания | ссылка (на веб-сайте) |
|---|---|---|
| Текст Машины | Модульный и расширяемый фреймворк на языке Python, предназначенный для создания высококачественных и объективных наборов данных для построения надежных моделей для задач, связанных с MGT, таких как обнаружение, атрибуция и определение границ. | ссылка (на веб-сайте) |
| LLM Разумники | Библиотека для расширенных крупномасштабных рассуждений на основе языковых моделей. | ссылка (на веб-сайте) |
| EasyEdit | Простая в использовании система редактирования знаний для крупномасштабных языковых моделей. | ссылка (на веб-сайте) |
| CodeTF | CodeTF: универсальная библиотека-трансформер для расширенного LLM кода. | ссылка (на веб-сайте) |
| spacy-llm | Этот пакет интегрирует большую языковую модель (LLM) в spaCy с модульной системой для быстрого создания прототипов и подсказок и преобразует неструктурированные ответы в надежные результаты для различных задач NLP. | ссылка (на веб-сайте) |
| панды-ай | Чат с базой данных пользователя (SQL, CSV, pandas, polars, MongoDB, NoSQL и т. д.). | ссылка (на веб-сайте) |
| Инструмент прозрачности LLM | Интерактивный набор инструментов с открытым исходным кодом для анализа внутренней работы языковых моделей на основе трансформеров. | ссылка (на веб-сайте) |
| Ванна | Общайтесь с базами данных SQL ваших пользователей. Точная генерация текста в SQL с помощью RAG's LLM. | ссылка (на веб-сайте) |
| mergekit | Инструменты для объединения предварительно обученных крупномасштабных языковых моделей. | ссылка (на веб-сайте) |
| MarkLLM | Инструментарий с открытым исходным кодом для создания водяных знаков LLM. | ссылка (на веб-сайте) |
| LLMSanitize | Библиотека с открытым исходным кодом для обнаружения загрязнений в наборах данных NLP и больших языковых моделях (LLM). | ссылка (на веб-сайте) |
| Annotateai | Автоматическое аннотирование документов с помощью LLM. | ссылка (на веб-сайте) |
| LLM Reasoner | Пусть любой LLM, например OpenAI, o1 и DeepSeek Думайте как R1. | ссылка (на веб-сайте) |
© заявление об авторских правах
Авторское право на статью Круг обмена ИИ Пожалуйста, не воспроизводите без разрешения.
Похожие статьи
Нет комментариев...




