Kiln：简单的LLM模型微调和数据合成工具，0代码基础微调自己的小模型

综合介绍

Kiln 是一个开源工具，专注于大语言模型（LLM）的微调、合成数据生成和数据集协作。它提供了直观的桌面应用程序，支持Windows、MacOS和Linux系统，用户可以通过零代码实现对Llama、GPT4o和Mixtral等模型的微调，并自动进行无服务器部署。Kiln 还支持通过交互式可视化工具生成训练数据，提供基于Git的版本控制，方便团队协作处理结构化数据。其开放的Python库和OpenAPI REST API使得开发者可以轻松集成Kiln的数据集到自己的工作流程中。

功能列表

• 直观的桌面应用程序：支持Windows、MacOS和Linux系统，一键安装，设计直观。
• 零代码微调：支持Llama、GPT4o和Mixtral等模型的微调，自动无服务器部署。
• 合成数据生成：通过交互式可视化工具生成训练数据。
• 团队协作：基于Git的版本控制，方便团队成员协作处理数据集。
• 提示生成：自动从数据中生成提示，包括链式思维、少样本和多样本提示。
• 广泛的模型和提供商支持：支持Ollama、OpenAI、OpenRouter、Fireworks、Groq、AWS等。
• 开源库和API：提供MIT开源的Python库和OpenAPI REST API。
• 隐私优先：用户数据完全私密，支持本地运行和自带API密钥。
• 结构化数据支持：构建支持JSON的AI任务。
• 免费使用：桌面应用程序免费，开源库开放。

使用帮助

安装流程

1. 下载应用程序：访问Kiln GitHub页面，根据操作系统选择相应的安装包下载。
2. 安装应用程序：
   • Windows：运行下载的.exe文件，按照安装向导完成安装。
   • MacOS：下载.dmg文件，打开后将Kiln拖动到应用程序文件夹。
   • Linux：下载.tar.gz文件，解压后运行安装脚本。

使用指南

1. 启动应用程序：安装完成后，打开Kiln桌面应用程序。
2. 微调模型：
   • 选择“微调”功能模块。
   • 选择要微调的模型（如Llama、GPT4o、Mixtral）。
   • 上传训练数据或使用Kiln的合成数据生成工具创建数据集。
   • 配置微调参数，点击“开始微调”。
   • 微调完成后，模型将自动部署，无需额外操作。
3. 生成合成数据：
   • 选择“合成数据生成”功能模块。
   • 使用交互式可视化工具创建和编辑训练数据。
   • 保存生成的数据集，供后续微调使用。
4. 团队协作：
   • 选择“数据集协作”功能模块。
   • 使用Git版本控制管理数据集，方便团队成员协作。
   • 提供数据集的示例、提示、反馈等信息，便于团队成员共同处理。
5. 提示生成：
   • 选择“提示生成”功能模块。
   • 上传数据集，选择提示类型（如链式思维、少样本、多样本）。
   • 自动生成提示，供模型训练和推理使用。
6. 集成到工作流程：
   • 使用Kiln的Python库和OpenAPI REST API，将Kiln的数据集和功能集成到自己的工作流程中。
   • 参考Kiln的文档和示例代码，快速上手开发。

详细操作流程

• 微调模型：详细介绍如何选择模型、上传数据、配置参数和启动微调。
• 合成数据生成：详细介绍如何使用可视化工具创建和编辑数据。
• 团队协作：详细介绍如何使用Git版本控制管理数据集，如何提供和处理反馈。
• 提示生成：详细介绍如何选择提示类型、上传数据和生成提示。
• 集成到工作流程：详细介绍如何使用Python库和API进行集成，提供示例代码和使用场景。