多模态AI教学智能体
EduPilot 是一套已完成端到端开发的多模态教学智能体系统,定位于“教师备课共创助手”。项目不是停留在单轮文案生成,而是形成了可运行的业务闭环:输入需求与资料、系统生成课件与教案、教师反馈后定向改写、最终标准化导出。
当前版本已落地的核心成果如下:
1. 双通道交互输入:前端同时支持文字输入与语音输入;在浏览器语音识别不可用时,可自动切换录音上传并调用后端转写接口。
2. 多模态资料接入:支持上传并解析 PDF、Word、PPT、图片、视频等资料,形成结构化参考信息。
3. 参考资料与意图绑定:前端将 reference_materials 与 intent_bindings 一并提交,后端按绑定关系参与研究与生成。
4. 多智能体协同生成:系统采用 planner、researcher、designer、writer、coder 五节点主链路,支持首次生成与反馈再生成两种工作模式。
5. 检索增强可配置:提供 hybrid、local_only、web_only 三种研究模式,可按课堂场景切换本地知识库与联网检索策略。
6. 多产物交付:主流程自动输出 AST 与 HTML 课件;通过导出接口可生成 PPT、Word、PDF 等交付物。
7. 实时进度与断线容错:WebSocket 推送节点状态,连接中断时可通过待发消息队列与 resume/feedback 接口继续任务。
在线教育
人工智能