Intern-S1 - Shanghai AI Lab's open source scientific multimodal macromodels

Intern-S1是什么

Intern-S1是上海人工智能实验室推出的科学多模态大模型。模型将语言和多模态能力深度融合，具备跨模态科学解析、语言与视觉融合、科学数据处理、科学问题解答、实验设计与优化等强大功能。模型首创“跨模态科学解析引擎”，能精准解读化学分子式、蛋白质序列、地震波信号等复杂科学模态数据，在多学科专业任务中超越顶尖闭源模型。Intern-S1基于动态Tokenizer和时序信号编码器，实现多种科学模态的深度融合，用通专融合的科学数据合成方法，具备强大的通用推理能力和顶尖专业能力，广泛应用在科研工具集成、图像与文本融合、复杂科学模态数据处理等场景。

Intern-S1的主要功能

• 跨模态科学解析：精准解读多种复杂科学模态数据，例如在化学领域预测化合物合成路径、判断化学反应可行性；在生物医学领域辅助解析蛋白质序列、发现药物靶点；在地球科学领域识别地震波信号并分析地震事件。
• 语言与视觉融合：结合语言和视觉信息，完成复杂的多模态任务。
• 科学数据处理：支持多种复杂科学模态数据输入，如材料科学中的光变曲线、天文学中的引力波信号等，实现数据的深度融合与高效处理。
• 科学问题解答：基于强大的知识库和推理能力，为用户提供准确的科学问题解答。
• 实验设计与优化：辅助科研人员设计实验方案、优化实验流程，提高科研效率。
• multi-intelligence unit (MIM) synergy：支持多智能体系统，与其他智能体协同工作，共同完成复杂的科研任务。
• 自主学习与进化：具备自主学习能力，基于与环境交互不断优化自身性能。
• Data processing and analysis：提供数据处理和分析工具，帮助科研人员快速处理和分析科学数据。
• 模型部署与应用：支持本地部署和云端服务，方便在不同场景中使用。

Intern-S1的官网地址

• Project website：https://intern-ai.org.cn/
• Github repository：https://github.com/InternLM/Intern-S1
• HuggingFace Model Library：https://huggingface.co/internlm/Intern-S1-FP8

如何使用Intern-S1

• Online Experience Platform
  • Access platforms：打开浏览器，访问项目官网，体验Intern-S1模型。
  • Starting a conversation：在输入框中输入问题或请求，提交获得Intern-S1的响应。
  • 使用特色功能：根据感兴趣的功能，如有机化学，按照平台的指示进行操作。
• GitHub repository
  • clone warehouse：在命令行中输入以下命令克隆仓库：

git clone https://github.com/InternLM/Intern-S1.git

• • Installation of dependencies：进入仓库目录并安装Python依赖：

cd Intern-S1
pip install -r requirements.txt

• • operational model：根据仓库中的README文件或示例代码运行模型。通常，您可以使用Python脚本：

python script_name.py

• Hugging Face Model Library
  • Loading Models：在Python环境中使用以下代码加载模型和分词器：

from transformers import AutoModelForCausalLM, AutoTokenizer

model_name = "internlm/Intern-S1-FP8"
tokenizer = AutoTokenizer.from_pretrained(model_name)
model = AutoModelForCausalLM.from_pretrained(model_name)

• • Generate Text：使用模型生成文本或执行其他任务：

inputs = tokenizer("Tell me about an interesting physical phenomenon.", return_tensors="pt")
output = model.generate(**inputs, max_length=100)
print(tokenizer.decode(output[0], skip_special_tokens=True))

• • 使用模型API：如果Hugging Face提供API服务，直接通过API调用模型：

import requests

url = "https://api-inference.huggingface.co/models/internlm/Intern-S1-FP8"
headers = {"Authorization": "Bearer YOUR_HUGGINGFACE_API_TOKEN"}
data = {"inputs": "Tell me about an interesting physical phenomenon."}

response = requests.post(url, headers=headers, json=data)
print(response.json()["generated_text"])

Intern-S1的核心优势

• multimodal capability：结合强大的语言理解和视觉处理能力，能处理和理解文本、图像等多种类型的数据。
• 科学任务优化：模型在科学领域的任务上表现卓越，如解读化学结构、理解蛋白质序列和规划化合物合成路径。
• 大规模预训练：基于一个2350亿参数的MoE（Mixture of Experts）语言模型和一个60亿参数的视觉编码器构建，经过5万亿token的多模态数据预训练，其中超过2.5万亿token来自科学领域。
• 动态Tokenizer：模型基于动态Tokenizer，支持原生理解分子公式、蛋白质序列和地震信号等专业数据。
• 跨模态科学解析引擎：Intern-S1首创的跨模态科学解析引擎能精准解读多种复杂科学模态数据，展现卓越的科学推理与理解能力。
• 通用推理与专业能力：基于通专融合的科学数据合成方法，Intern-S1具备强大的通用推理能力，拥有多项顶尖专业能力。
• 自主学习和进化：模型具备自主学习能力，能通过与环境的交互不断优化自身性能。
• multi-intelligence unit (MIM) synergy：支持多智能体系统，能与其他智能体协同工作，共同完成复杂的科研任务。
• Data processing and analysis：提供数据处理和分析工具，帮助科研人员快速处理和分析科学数据。

Intern-S1的适用人群

• (scientific) researcher：在化学、生物学、物理学和地球科学等领域进行复杂数据分析和实验设计的研究人员。
• Data Analyst：从大量科学数据中提取有价值信息支持决策制定的专业人士。
• software developer：将高级多模态分析能力集成到自己应用程序中的软件工程师。
• Educators and students：在学术环境中用模型辅助教学或进行科学研究的教师和学生。
• Corporate decision makers：依据数据分析结果做出关键业务决策的商业领袖。