gpt prompt engineer: Инструмент для разработки языковой модели подсказок | Оптимизация команд подсказок

Общее введение

gpt-prompt-engineer - это проект с открытым исходным кодом на GitHub, посвященный разработке подсказок для моделей GPT. Пользователи могут вводить описания задач и тестовые примеры, а этот инструмент способен генерировать, тестировать и ранжировать различные подсказки, чтобы найти лучшую. Проект использует большие языковые модели, такие как GPT-4 и GPT-3.5-Turbo, и применяет систему оценок ELO для оценки эффективности сгенерированных подсказок, с возможностью регистрации и отслеживания цепочки подсказок.

Конструирование наконечников сродни алхимии. Не существует четкого способа предсказать, что будет работать лучше всего. Нужно экспериментировать, пока не найдете нужный наконечник. gpt Tip Engineer - это инструмент, который выводит эксперименты на совершенно новый уровень.

Помогает генерировать, оптимизировать и тестировать подсказки, поддерживая GPT и Claude, и может оптимизировать Клод Слова-подсказки 3 Haiku помогают добиться отличных результатов. Стоит отметить, что Claude 3 Haiku стоит дешевле, чем GPT-3.5, но при этом хорошо работает и поддерживает визуальные модели.

Список функций

Генерация советов: генерируйте различные советы на основе примеров использования и тестовых примеров.
Тест киевки: эффективность киевки проверяется и оценивается по системе оценок ELO.
Система оценок ELO: динамическая корректировка оценок ELO путем сравнения эффективности ответов на тестовые задания.
Категоризированная версия: предназначена для заданий на категоризацию, дает тестовые баллы по каждой подсказке.
Дополнительные функции регистрации: поддерживается регистрация весов и погрешностей, а также регистрация инструментов Portkey.

Использование помощи

Откройте блокнот проекта в Google Colab или локальный блокнот Jupyter.
Добавьте в код секретный ключ API OpenAI.
Определите описания задач и тестовые примеры.
Настройте модель и выберите GPT-4 или GPT-3.5-Turbo в зависимости от необходимости.
Вызовите функцию generate_optimal_prompt(), чтобы сгенерировать, протестировать и оценить подсказки.