OpenMAIC:基于多智能体协作引擎的 AI 互动课堂平台项目

一键生成沉浸式多智能体互动课堂。

English | 简体中文
在线体验 · 快速开始 · Lemonade · FunASR · 功能特性 · 使用场景 · OpenClaw

🗞️ 动态

• 2026-08-14 — v0.3.2 发布！ 视频导出加固（确定性 Quiz/PBL 封面、保真度打磨、交互 HTML 捕获、CPU 资源配置）；服务端持久化完成（文档全量切换、一条命令 Postgres 栈、增量保存）并落地资产注册中心；新增 @openmaic/generation 包；四种新语言（fr-FR / es-MX / vi-VN 及 432 条审校 zh-TW）；新增 Amazon Bedrock / Atlas Cloud / Claude 搜索与 FunASR 语音识别。查看更新日志。
• 2026-07-21 — v0.3.1 发布！ 一键导出 MP4 课程视频；服务端课堂运行时存储（含 Postgres 参考服务）；编辑器直接操作幻灯片元素（拖拽、缩放、旋转、框选多选）；“Edit with AI”升级（校验式 JSON Patch 编辑、多会话历史）；文档解析扩展（多格式上传、音视频抽取、阿里 DocMind、MinerU）；新增 Azure OpenAI / SearXNG / ComfyUI 与 GPT-5.6 系列模型；动作级播放导航；SSRF 安全加固。查看更新日志。
• 2026-06-28 — v0.3.0 发布！ 项目式学习（PBL）v2 与课堂界面；“Edit with AI”专业模式编辑智能体；@openmaic/* SDK 系列（DSL/渲染器/导入器）发布至 npm；可选的分阶段模型路由；新增 GLM-5.2 / Kimi K2.7 Code / Qwen3.7 Plus·Max 等模型；职业学习任务引擎；新增韩语（ko-KR）；并将开源协议由 AGPL-3.0 调整为 MIT。查看更新日志。
• 2026-06-02 — v0.2.2 发布！ MAIC Editor（v0）专业模式，可轻量编辑生成的幻灯片；生成前可编辑大纲；交互课堂离线导出；新增 Brave/百度/博查/MiniMax 搜索与 Azure STT；新增 Claude Opus 4.8 / MiniMax M3 / Gemini 3.5 Flash 等模型；新增繁体中文（zh-TW）与巴西葡萄牙语（pt-BR）。查看更新日志。
• 2026-04-26 — v0.2.1 发布！ 接入 VoxCPM2 TTS，支持音色克隆与自动生成音色；新增按模型思考配置；新增课程完成页与作答状态持久化；新增 DeepSeek-V4 / GPT-5.5 / GPT-Image-2 / 小米 MiMo / Hy3 等最新发布的模型。查看更新日志。
• 2026-04-20 — v0.2.0 发布！ 深度交互模式 — 3D 可视化、模拟实验、游戏、思维导图、在线编程，动手学习新体验。详见功能特性。
• 2026-04-14 — v0.1.1 发布！ 自动语言推断、ACCESS_CODE 站点认证、课堂 ZIP 导入导出、自定义 TTS/ASR、Ollama 支持等。查看更新日志。
• 2026-03-26 — v0.1.0 发布！ 讨论语音、沉浸模式、键盘快捷键、白板增强、新 provider 等。查看更新日志。

📖 项目简介

OpenMAIC（Open Multi-Agent Interactive Classroom）是一个开源的 AI 互动课堂平台，能够将任何主题或文档转化为丰富的互动学习体验。基于多智能体协作引擎，它可以自动生成演示幻灯片、测验、交互式模拟实验和项目制学习活动——由 AI 教师和 AI 同学进行语音讲解、白板绘图，并与你展开实时讨论。内置 OpenClaw 集成，你还可以直接在飞书、Slack、Telegram 等聊天应用中生成课堂。

https://github.com/user-attachments/assets/dbd013f6-9fab-43c5-a788-b47126cff7a8

核心亮点

• 一键生成课堂 — 描述一个主题或附上学习材料，AI 几分钟内构建完整课堂
• 多智能体课堂 — AI 老师和智能体同学实时授课、讨论、互动
• 丰富的场景类型 — 幻灯片、测验、HTML 交互式模拟、项目制学习（PBL）
• 白板 & 语音 — 智能体实时绘制图表、书写公式、语音讲解
• 灵活导出 — 下载可编辑的 .pptx 幻灯片或交互式 .html 网页
• OpenClaw 集成 — 通过 AI 助手在飞书、Slack、Telegram 等 20+ 聊天应用中直接生成课堂

🚀 快速开始

环境要求

• Node.js >= 20
• pnpm >= 10

1. 克隆 & 安装

git clone https://github.com/THU-MAIC/OpenMAIC.git
cd OpenMAIC
pnpm install

2. 配置

cp .env.example .env.local

至少填写一个 LLM 服务商的 API Key：

OPENAI_API_KEY=sk-...
AZURE_OPENAI_API_KEY=...
AZURE_OPENAI_BASE_URL=https://YOUR-RESOURCE.openai.azure.com/openai
AZURE_OPENAI_MODELS=YOUR-DEPLOYMENT-NAME
ANTHROPIC_API_KEY=sk-ant-...
GOOGLE_API_KEY=...
GROK_API_KEY=xai-...
OPENROUTER_API_KEY=sk-or-...
TENCENT_API_KEY=sk-...
XIAOMI_API_KEY=...
# 或使用 AWS 凭证和 BEDROCK_REGION 配置 Amazon Bedrock。

也可以通过 server-providers.yml 配置服务商：

providers:
  openai:
    apiKey: sk-...
  azure:
    apiKey: ...
    baseUrl: https://YOUR-RESOURCE.openai.azure.com/openai
    models:
      - YOUR-DEPLOYMENT-NAME
  anthropic:
    apiKey: sk-ant-...
  bedrock:
    models:
      - us.anthropic.claude-sonnet-5
      - us.anthropic.claude-opus-4-8

支持的服务商：OpenAI、Azure OpenAI、Anthropic、Amazon Bedrock、Google Gemini、DeepSeek、通义千问 Qwen、Kimi、MiniMax、Grok (xAI)、OpenRouter、豆包、腾讯混元 / TokenHub、小米 MiMo、智谱 GLM、Ollama（本地）、Lemonade（本地 LLM / 图像 / TTS / ASR）、FunASR（本地 ASR）以及任何兼容 OpenAI API 的服务。

Amazon Bedrock 快速示例：

BEDROCK_REGION=us-east-1
BEDROCK_MODELS=us.anthropic.claude-sonnet-5,us.anthropic.claude-opus-4-8
DEFAULT_MODEL=bedrock:us.anthropic.claude-sonnet-5

Bedrock 使用 AWS 环境凭证或 AWS SDK 凭证链。临时凭证可设置 AWS_ACCESS_KEY_ID、AWS_SECRET_ACCESS_KEY 和 AWS_SESSION_TOKEN，也可以使用运行环境可用的 AWS profile / role。

可选：Lemonade（本地 AI 服务商）

OpenMAIC 支持将 Lemonade 作为本地 OpenAI 兼容服务商使用，可用于 LLM、图像生成、TTS 和 ASR，不需要 API Key。

本地启动 Lemonade 后，在 OpenMAIC 中配置：

LEMONADE_BASE_URL=http://localhost:13305/v1
TTS_LEMONADE_BASE_URL=http://localhost:13305/v1
ASR_LEMONADE_BASE_URL=http://localhost:13305/v1
IMAGE_LEMONADE_BASE_URL=http://localhost:13305/v1

可选：FunASR（本地语音识别）

OpenMAIC 可以通过 FunASR 的 OpenAI 兼容服务完成本地转写。内置 provider 支持 SenseVoiceSmall、Paraformer 和 Fun-ASR-Nano，无需 API Key。

python -m pip install torch torchaudio
python -m pip install "funasr==1.4.0" fastapi uvicorn python-multipart
# NVIDIA GPU 上运行 Fun-ASR-Nano 时再安装 vLLM
python -m pip install vllm
funasr-server --device cuda --model fun-asr-nano

将 OpenMAIC 指向该服务：

ASR_FUNASR_BASE_URL=http://localhost:8000/v1

纯 CPU 环境可运行 funasr-server --device cpu --model sensevoice。生产部署方式参见 FunASR 部署指南。

OpenAI 快速示例：

OPENAI_API_KEY=sk-...
DEFAULT_MODEL=openai:gpt-5.5

MiniMax 快速示例：

MINIMAX_API_KEY=...
MINIMAX_BASE_URL=https://api.minimaxi.com/anthropic/v1
DEFAULT_MODEL=minimax:MiniMax-M2.7-highspeed

TTS_MINIMAX_API_KEY=...
TTS_MINIMAX_BASE_URL=https://api.minimaxi.com

IMAGE_MINIMAX_API_KEY=...
IMAGE_MINIMAX_BASE_URL=https://api.minimaxi.com

IMAGE_OPENAI_API_KEY=...
IMAGE_OPENAI_BASE_URL=https://api.openai.com/v1

VIDEO_MINIMAX_API_KEY=...
VIDEO_MINIMAX_BASE_URL=https://api.minimaxi.com

小米 MiMo Token Plan 快速示例：

MIMO_API_KEY=tp-...
MIMO_BASE_URL=https://token-plan-cn.xiaomimimo.com/v1
DEFAULT_MODEL=xiaomi:mimo-v2.5-pro

新加坡或欧洲 Token Plan 集群可分别使用 https://token-plan-sgp.xiaomimimo.com/v1、https://token-plan-ams.xiaomimimo.com/v1。

智谱 GLM 快速示例：

# 国内站（默认）
GLM_API_KEY=...
GLM_BASE_URL=https://open.bigmodel.cn/api/paas/v4

# 国际站（z.ai）
GLM_API_KEY=...
GLM_BASE_URL=https://api.z.ai/api/paas/v4

DEFAULT_MODEL=glm:glm-5.1

推荐模型： Gemini 3 Flash — 效果与速度的最佳平衡。追求最高质量可选 Gemini 3.1 Pro（速度较慢）。

如果希望 OpenMAIC 服务端默认走 Gemini，还需要额外设置 DEFAULT_MODEL=google:gemini-3-flash-preview。

如果希望默认走 MiniMax，可设置 DEFAULT_MODEL=minimax:MiniMax-M2.7-highspeed。

3. 启动

pnpm dev

打开 http://localhost:3000 开始学习！

4. 生产环境构建

pnpm build && pnpm start

可选：ACCESS_CODE（共享部署）

为部署添加站点级密码保护，在 .env.local 中设置：

ACCESS_CODE=your-secret-code

设置后，访客需要输入密码才能使用，所有 API 路由也会受到保护。不设置则无影响。

Vercel 部署

或者手动部署：

1. Fork 本仓库
2. 导入到 Vercel
3. 配置环境变量（至少一个 LLM API Key）
4. 部署

Docker 部署

cp .env.example .env.local
# 编辑 .env.local 填入你的 API Key，然后：
docker compose up --build

慢速网络 / 中国大陆构建加速

Docker 构建支持两个可选参数。两者默认均为空，因此上面的标准命令仍会使用 Alpine 和 npm 的上游软件源。

• ALPINE_MIRROR 接收不带 https:// 的 Alpine 镜像站主机名。
• NPM_REGISTRY 接收完整的 npm registry URL。

这些构建参数仅用于公共镜像地址。请勿在其中嵌入用户名、密码或访问令牌，因为 Docker 可能把构建参数记录到镜像元数据或构建证明中。

使用 Docker Compose：

ALPINE_MIRROR=mirrors.tuna.tsinghua.edu.cn \
NPM_REGISTRY=https://registry.npmmirror.com \
docker compose up --build

直接构建镜像：

docker build \
  --build-arg ALPINE_MIRROR=mirrors.tuna.tsinghua.edu.cn \
  --build-arg NPM_REGISTRY=https://registry.npmmirror.com \
  -t openmaic:local .

这些参数不会加速 Docker Hub 拉取，包括 Dockerfile frontend 和 node:22-alpine 基础镜像。若这些步骤较慢，需要单独配置 Docker daemon 的 registry mirror。同一个 BuildKit builder 会在常规缓存清理前跨构建复用 pnpm store；缓存只用于提升性能，不是正确完成构建的必要条件。

可选：MinerU（增强文档解析）

MinerU 提供更强的表格、公式和 OCR 解析能力。你可以使用 MinerU 官方 API 或自行部署。

在 .env.local 中设置 PDF_MINERU_BASE_URL（如需认证则同时设置 PDF_MINERU_API_KEY）。

可选：VoxCPM2（自托管 TTS，支持音色克隆）

VoxCPM2 是 OpenBMB 开源的 TTS 模型，支持声音克隆。OpenMAIC 自带适配器，把 VoxCPM 跑在自己机器上即可对接。

1. 部署 VoxCPM 后端。 三种部署形态，背后是同一套 OpenMAIC 适配器，在设置里切换即可。

每种后端的具体启动步骤见 VoxCPM 仓库。

2. 在 OpenMAIC 中配置。 打开 设置 → 语音合成 → VoxCPM2，选择后端类型并填入 Base URL，下方的 Request URL 预览会显示实际请求地址。

也可以通过环境变量预先配置（不需要 API Key）：

TTS_VOXCPM_BASE_URL=http://localhost:8000/v1

3. 管理音色。 三种音色模式，都在 设置 → 语音合成 → VoxCPM2 → VoxCPM 音色 里。

• Auto Voice（默认）：合成时根据每个智能体的人设动态生成 voice prompt，零配置。
• Prompt 音色：用自然语言描述音色，例如 "温暖的女性教师嗓音，平静而鼓励，中等音调"。
• Clone 音色：上传一段参考音频或在浏览器里录一段。音频存在 IndexedDB 中，每次合成时发给后端。

✨ 功能特性

深度交互模式（新功能）

被动听讲？❌ 动手探索！✅

爱因斯坦说过："玩耍是最高形式的研究。"

标准模式快速生成课堂内容，而深度交互模式更进一步——创建交互式、可探索、动手的学习体验。学生不只是观看知识，而是调整实验、观察模拟、主动探索原理。

五种交互界面

🌐 3D 可视化 三维可视化呈现，让抽象结构更直观。	⚙️ 模拟实验 流程模拟和实验环境，观察动态变化和结果。
🎮 游戏 知识小游戏，通过交互挑战加深理解和记忆。	🧭 思维导图 结构化知识组织，帮助学习者建立整体概念框架。
💻 在线编程 浏览器内编码和即时运行，边写边学边迭代。

AI 教师引导

AI 教师可以主动操作界面引导学生——高亮关键区域、设置条件、提供提示、在恰当时机引导注意力。

多设备适配

所有生成的交互界面完全响应式——桌面、平板、手机均可使用。

桌面	手机
iPad

需要更完整、更专业的 UI 生成体验？

如果你希望获得功能维度更丰富、交互能力更强，并面向高质量教育界面生产进行深度优化的完整版本，欢迎访问 MAIC-UI。

课堂生成

描述你想学习的内容，或附上参考材料。OpenMAIC 的两阶段流水线自动完成剩余工作：

课堂组件

🎓 幻灯片（Slides） AI 老师配合聚光灯和激光笔动作进行语音讲解——如同真实课堂。	🧪 测验（Quiz） 交互式测验（单选 / 多选 / 简答），支持 AI 实时判分和反馈。
🔬 交互式模拟（Interactive） 基于 HTML 的交互实验，用于可视化、动手学习——物理模拟器、流程图等。	🏗️ 项目制学习（PBL） 选择一个角色，与 AI 智能体协作完成结构化项目，包含里程碑和交付物。

多智能体互动

课堂讨论 — 智能体主动发起讨论话题，你可以随时加入或被点名互动 圆桌辩论 — 多个不同人设的智能体围绕话题展开讨论，配合白板讲解 自由问答 — 随时提问，AI 老师通过幻灯片、图表或白板进行解答 白板 — AI 智能体在共享白板上实时绘图——逐步推导方程、绘制流程图、直观讲解概念

OpenClaw 集成

OpenMAIC 集成了 OpenClaw——一个连接你日常使用的消息平台（飞书、Slack、Discord、Telegram、WhatsApp 等）的个人 AI 助手。通过这个集成，你可以直接在聊天应用中生成和查看互动课堂，无需碰命令行。

只需告诉你的 OpenClaw 助手你想学什么——剩下的它来搞定：

• 托管模式 — 在 open.maic.chat 获取访问码，保存到配置文件，即可直接生成课堂——无需本地部署
• 本地部署模式 — clone、安装依赖、配置 API Key、启动服务——Skill 逐步引导你完成
• 跟踪进度 — 自动轮询异步生成任务，完成后把链接发给你

每一步都会先征求你的确认，不会黑盒执行。

clawhub install openmaic

mkdir -p ~/.openclaw/skills
cp -R /path/to/OpenMAIC/skills/openmaic ~/.openclaw/skills/openmaic

{
  "skills": {
    "entries": {
      "openmaic": {
        "config": {
          // 托管模式：粘贴从 open.maic.chat 获取的访问码
          "accessCode": "sk-xxx",
          // 本地部署模式：本地仓库路径和地址
          "repoDir": "/path/to/OpenMAIC",
          "url": "http://localhost:3000"
        }
      }
    }
  }
}

导出

离线 / 内网课堂： 导出课堂（.maic.zip）或资源包时，OpenMAIC 会把互动场景引用的外部资源（KaTeX、Three.js 含 three/addons、Tailwind CDN、Google Fonts、图片）以 data: URI 形式内联进导出的 HTML。导出的课程在导入到内网/离线实例后即可完全离线播放，播放时不再访问任何公网 CDN。导出时无法抓取的资源（如开启了 CORS 限制的图床）会被记录并保留为原始 URL。本功能上线之前导出的课堂仍引用 CDN，需要重新导出才能离线播放。

更多功能

• 语音合成（TTS） — 多种语音服务商，支持自定义音色
• 语音识别 — 通过麦克风与 AI 老师对话
• 网络搜索 — 智能体在课堂中搜索网络获取最新信息
• 国际化 — 界面支持 11 种语言、12 个区域设置：简体中文、繁体中文、英文、日文、韩文、俄文、阿拉伯文、葡萄牙文（巴西）、西班牙文（墨西哥）、法文、越南文、德文
• 暗色模式 — 深夜学习更护眼

💡 使用场景

"零基础文科生，30 分钟学会 Python"	"如何上手阿瓦隆桌游"
"分析一下智谱和 MiniMax 的股价"	"DeepSeek 最新论文解析"

🤝 参与贡献

我们欢迎社区的贡献！无论是 Bug 报告、功能建议还是 Pull Request，都非常感谢。

项目结构

OpenMAIC/
├── app/                        # Next.js App Router
│   ├── api/                    #   服务端 API 路由（约 18 个端点）
│   │   ├── generate/           #     场景生成流水线（大纲、内容、图片、TTS…）
│   │   ├── generate-classroom/ #     异步课堂生成提交与轮询
│   │   ├── chat/               #     多智能体讨论（SSE 流式传输）
│   │   ├── pbl/                #     项目制学习端点
│   │   └── ...                 #     quiz-grade, parse-pdf, web-search, transcription 等
│   ├── classroom/[id]/         #   课堂回放页面
│   └── page.tsx                #   首页（生成输入）
│
├── lib/                        # 核心业务逻辑
│   ├── generation/             #   两阶段课堂生成流水线
│   ├── orchestration/          #   LangGraph 多智能体编排（导演图）
│   ├── playback/               #   回放状态机（idle → playing → live）
│   ├── action/                 #   动作执行引擎（语音、白板、特效）
│   ├── ai/                     #   LLM 服务商抽象层
│   ├── api/                    #   Stage API 门面（幻灯片/画布/场景操作）
│   ├── store/                  #   Zustand 状态管理
│   ├── types/                  #   集中式 TypeScript 类型定义
│   ├── audio/                  #   TTS & ASR 服务商
│   ├── media/                  #   图片 & 视频生成服务商
│   ├── export/                 #   PPTX & HTML 导出
│   ├── hooks/                  #   React 自定义 Hooks（55+）
│   ├── i18n/                   #   国际化（zh-CN, zh-TW, en-US, ja-JP, ko-KR, ru-RU, ar-SA, pt-BR, es-MX, fr-FR, vi-VN, de-DE）
│   └── ...                     #   prosemirror, storage, pdf, web-search, utils
│
├── components/                 # React UI 组件
│   ├── slide-renderer/         #   基于 Canvas 的幻灯片编辑器和渲染器
│   │   ├── Editor/Canvas/      #     交互式编辑画布
│   │   └── components/element/ #     元素渲染器（文本、图片、形状、表格、图表…）
│   ├── scene-renderers/        #   测验、交互、PBL 场景渲染器
│   ├── generation/             #   课堂生成工具栏和进度
│   ├── chat/                   #   聊天区域和会话管理
│   ├── settings/               #   设置面板（服务商、TTS、ASR、媒体…）
│   ├── whiteboard/             #   基于 SVG 的白板绘图
│   ├── agent/                  #   智能体头像、配置、信息栏
│   ├── ui/                     #   基础 UI 组件（shadcn/ui + Radix）
│   └── ...                     #   audio, roundtable, stage, ai-elements
│
├── packages/                   # 工作区子包
│   ├── pptxgenjs/              #   定制化 PowerPoint 生成
│   └── mathml2omml/            #   MathML → Office Math 转换
│
├── skills/                     # OpenClaw / ClawHub skills
│   └── openmaic/               #   OpenMAIC 引导式 SOP skill
│       ├── SKILL.md            #   轻量路由层 + 确认规则
│       └── references/         #   按需加载的 SOP 分段
│
├── configs/                    # 共享常量（形状、字体、快捷键、主题…）
└── public/                     # 静态资源（logo、头像）

核心架构

• 生成流水线 (@openmaic/generation) — 两阶段：大纲生成 → 场景内容生成
• 多智能体编排 (lib/orchestration/) — 基于 LangGraph 的状态机，管理智能体轮次和讨论
• 回放引擎 (lib/playback/) — 驱动课堂回放和实时互动的状态机
• 动作引擎 (lib/action/) — 执行 28+ 种动作类型（语音、白板绘图/文字/形状/图表、聚光灯、激光笔…）

贡献流程

1. Fork 本仓库
2. 创建你的功能分支 (git checkout -b feature/amazing-feature)
3. 提交你的更改 (git commit -m 'Add amazing feature')
4. 推送到分支 (git push origin feature/amazing-feature)
5. 提交 Pull Request

💼 商业合作

本项目基于 MIT 协议开源，可免费商用。商业合作或共建请联系：thu_maic@mail.tsinghua.edu.cn

📝 引用

如果 OpenMAIC 对您的研究有帮助，请考虑引用：

@Article{JCST-2509-16000,
  title = {From MOOC to MAIC: Reimagine Online Teaching and Learning through LLM-driven Agents},
  journal = {Journal of Computer Science and Technology},
  volume = {},
  number = {},
  pages = {},
  year = {2026},
  issn = {1000-9000(Print) /1860-4749(Online)},
  doi = {10.1007/s11390-025-6000-0},
  url = {https://jcst.ict.ac.cn/en/article/doi/10.1007/s11390-025-6000-0},
  author = {Ji-Fan Yu and Daniel Zhang-Li and Zhe-Yuan Zhang and Yu-Cheng Wang and Hao-Xuan Li and Joy Jia Yin Lim and Zhan-Xin Hao and Shang-Qing Tu and Lu Zhang and Xu-Sheng Dai and Jian-Xiao Jiang and Shen Yang and Fei Qin and Ze-Kun Li and Xin Cong and Bin Xu and Lei Hou and Man-Li Li and Juan-Zi Li and Hui-Qin Liu and Yu Zhang and Zhi-Yuan Liu and Mao-Song Sun}
}

⭐ Star History

📄 许可证

本项目基于 MIT License 开源。

第三方组件

仓库内置的以下工作区子包不受根目录 MIT 许可证覆盖，各自保留原有协议：

• packages/mathml2omml —— LGPL-3.0-or-later
• packages/pptxgenjs —— MIT（第三方）

整体再分发本仓库时，上述子包内文件适用其各自的协议。