新二医小助手是一个基于多模态大语言模型开发的医疗健康助手,
旨在帮助用户进行基本的疾病诊断、病历分析、专业知识答疑等功能。
项目融合了图片识别、视频生成、图片生成、PPT/Word生成、多轮对
话、检索增强对话、语音输入/输出、知识图谱增强、知识库增强和联
网检索增强等多种功能,通过AI智能体判断任务种类,将多个模型整合
工作,解决复杂问题。项目功能:病历识别: 识别病历中的图像和文字
信息。
新二医小助手是一个基于多模态大语言模型开发的医疗健康助手,
旨在帮助用户进行基本的疾病诊断、病历分析、专业知识答疑等功能。
项目融合了图片识别、视频生成、图片生成、PPT/Word生成、多轮对
话、检索增强对话、语音输入/输出、知识图谱增强、知识库增强和联
网检索增强等多种功能,通过AI智能体判断任务种类,将多个模型整合
工作,解决复杂问题。项目功能:病历识别: 识别病历中的图像和文字
信息。
PPT/Word生成: 自动生成固定格式的文档。
知识图谱检索: 基于知识图谱进行信息检索和问答。
联网搜索: 检索网络上的相关信息,增强模型知识。
技术栈:项目使用了Python、PyTorch、Transformers、
Gradio、Langchain、modelscope、huggingface、RAG、Neo4j、
TTS (edge-tts)、STT (whisper)等技术和框架。
新二医小助手是一个基于多模态大语言模型开发的医疗健康助手,
旨在帮助用户进行基本的疾病诊断、病历分析、专业知识答疑等功能。
项目融合了图片识别、视频生成、图片生成、PPT/Word生成、多轮对
话、检索增强对话、语音输入/输出、知识图谱增强、知识库增强和联
网检索增强等多种功能,通过AI智能体判断任务种类,将多个模型整合
工作,解决复杂问题。项目功能:病历识别: 识别病历中的图像和文字
信息。
PPT/Word生成: 自动生成固定格式的文档。
知识图谱检索: 基于知识图谱进行信息检索和问答。
联网搜索: 检索网络上的相关信息,增强模型知识。
技术栈:项目使用了Python、PyTorch、Transformers、
Gradio、Langchain、modelscope、huggingface、RAG、Neo4j、
TTS (edge-tts)、STT (whisper)等技术和框架。