SFT-data-builder: создание обучающих данных ИИ с помощью бесплатного API больших моделей, создание обучающих данных больших моделей по 0 стоимости

Общее введение

SFT-data-builder - это проект с открытым исходным кодом, предназначенный для генерации высококачественных обучающих данных SFT путем объединения данных частного домена пользователя с помощью бесплатного Big Model API. Инструмент поддерживает различные форматы моделей ИИ и предоставляет функции генерации в один клик, пакетной генерации, гибкого редактирования и локального хранения, чтобы помочь пользователям быстро генерировать обучающие данные, подходящие для предварительного обучения, тонкой настройки, вызова функций и других сценариев.

Список функций

• Генерируйте обучающие данные одним щелчком мыши: Поддерживаются многочисленные вызовы формата OpenAI для локальных или облачных моделей.
• Пакетная генерация: Генерируйте обучающие данные сразу с нескольких точек зрения, поддерживайте пакетные URL-статьи для автоматической генерации данных.
• Гибкое редактирование: Все созданные данные можно редактировать и корректировать в любое время.
• локальное хранилище: Автоматическое сохранение всех данных в локальном режиме.
• Легко экспортировать: Экспорт файлов JSON стандартного формата одним щелчком мыши.
• Поддержка нескольких моделей: Поддерживает широкий спектр основных моделей ИИ, с возможностью настройки.
• Поддержка нескольких форматов: Поддержка PDF, Word, TXT и других форматов файлов.

Использование помощи

Процесс установки

1. Установка зависимостей: Запустить в каталоге проекта npm install.
2. Начало реализации проектов: Беги npm run start Запуск проекта.

Руководство по использованию

1. Настройка API::
   • Нажмите на кнопку "Открыть конфигурацию".
   • Установите адрес и ключ API.
   • Выберите или настройте модель искусственного интеллекта.
   • Устанавливает количество записей данных, генерируемых за один раз.
2. вход::
   • Загружайте файлы (поддерживаются форматы PDF, DOCX, TXT).
   • или введите текстовое содержимое напрямую.
3. Генерировать данные::
   • Нажмите кнопку Generate AI Response (Создать ответ ИИ).
   • Переключайтесь между несколькими сгенерированными результатами и редактируйте сгенерированный контент по мере необходимости.
4. Управленческие данные::
   • Добавьте в список данных.
   • Предварительный просмотр всех сгенерированных данных.
   • Удалите ненужные данные.
   • Экспорт в файл JSON.

Функции Поток операций

1. Генерируйте обучающие данные одним щелчком мыши::
   • Выберите или настройте модель искусственного интеллекта.
   • Введите или загрузите текстовое содержимое.
   • Нажмите кнопку "Generate AI Response", и система автоматически сгенерирует обучающие данные.
2. Пакетная генерация::
   • Установите параметры пакетной генерации на странице конфигурации.
   • Загрузите файл, содержащий несколько URL-адресов, или введите несколько URL-адресов.
   • Нажмите кнопку "Batch Generate", и система автоматически сгенерирует несколько обучающих данных.
3. Гибкое редактирование::
   • На экране "Сгенерированные результаты" щелкните запись данных, которую нужно отредактировать.
   • Измените содержимое в редакторе, чтобы сохранить изменения.
4. Локальное хранение и экспорт::
   • Все сгенерированные данные автоматически сохраняются в локальном хранилище.
   • На экране управления данными выберите данные, которые необходимо экспортировать, и нажмите кнопку "Экспорт в JSON".