- 博客(8)
- 收藏
- 关注
RSS订阅原创 山东大学软件学院创新项目实训记录 —— 基于UE与LLM的医患沟通模拟与评价系统（八）
本文介绍了基于UE5开发的医患沟通模拟系统前端功能实现，重点阐述滑动菜单和语音交互模块的开发。系统为医学生提供AI辅助问诊训练，包含可收展式滑动菜单（集成病历查阅和AI指导功能）与实时语音反馈界面。通过事件委托机制实现菜单与主界面的松耦合通信，采用动态可视化提示优化语音输入体验（包括录音状态显示和AI处理等待提示）。病历数据采用JSON格式存储于GameInstance，AI建议功能通过角色化提示词工程实现引导式教学。这些设计显著提升了系统的交互确定性和训练沉浸感。
2026-06-19 03:15:29
177
原创 山东大学软件学院创新项目实训记录 —— 基于UE与LLM的医患沟通模拟与评价系统（七）
本文介绍了医患沟通模拟系统前端开发中左侧滑动菜单的优化工作。针对UI交互中的高频闪烁和"死亡断层"问题，开发团队通过重构碰撞响应链、重写边界事件和组件化封装实现了平滑的菜单滑出/收回效果。采用蓝图接口和事件驱动模式解决了模块间通信问题，确保了系统的稳定性和扩展性。目前已完成核心交互功能开发，下一步将接入病历数据和AI问答接口，进一步丰富系统功能。这些优化为提升医学生的沉浸式沟通实训体验打下了良好基础。
2026-06-12 15:23:14
323
原创 山东大学软件学院创新项目实训记录 —— 基于UE与LLM的医患沟通模拟与评价系统（六）
本项目研发面向医学教育的医患沟通模拟与评价系统，基于大模型实现智能交互、个性化病例模拟和评分，为医学生提供沉浸式医患沟通实训场景，解决线下标准化病人资源稀缺的问题，提升医学生医患沟通实操能力。本人负责UE5前端工作，语音输入、语音输出功能的制作、UI面板的搭建（主场景、SEGUE评分面板、聊天框等）。本周进行的工作为添加Home界面，完善主菜单界面的一系列功能，以及SEGUE评分面板的完善。
2026-06-02 22:59:35
167
原创 山东大学软件学院创新项目实训记录 —— 基于UE与LLM的医患沟通模拟与评价系统（五）
本项目 研发面向医学教育的医患沟通模拟与评价系统，基于大模型实现智能交互、个性化病例模拟与评分，为医学生提供沉浸式医患沟通实训场景，旨在解决线下标准化病人资源稀缺的问题，提升医学生的医患沟通实操能力。本人负责UE5前端开发工作，包括语音输入/输出功能的实现，以及主场景、SEGUE评分面板、聊天框等UI面板的搭建。本周重点完成了医患交流面板的消息气泡功能，同时优化了部分UI，实现了整体UI的统一。
2026-05-21 20:25:57
57
原创 山东大学软件学院创新项目实训记录 —— 基于UE与LLM的医患沟通模拟与评价系统（四）
本项目开发医患沟通模拟系统，基于大模型技术为医学生提供沉浸式实训平台。作者负责UE5前端开发，本周重点完成三大UI模块的视觉风格统一：主菜单采用蓝白医疗配色，优化按钮交互反馈；聊天界面重构消息气泡样式，区分医患对话；评分面板规范控件样式，提升操作流畅度。系统实现了语音交互、病例模拟与沟通评分功能，解决了传统医学教育中标准化病人资源不足的问题。后续将接入语音API、完善交互细节并测试多端适配，为医学生提供更真实的沟通训练体验。
2026-05-06 10:59:30
202
原创 山东大学软件学院创新项目实训记录 —— 基于UE与LLM的医患沟通模拟与评价系统（三）
本项目开发基于UE5的医患沟通模拟系统，通过大模型技术实现智能交互与实训评估。作者负责前端开发，已完成三大核心UI界面搭建：1）主菜单界面实现场景选择功能；2）聊天界面完成消息展示区、输入区及设置面板交互；3）SEGUE评分面板实现量表框架布局与动态切换。系统支持文本对话交互，后续将重点集成语音输入输出功能，优化消息气泡显示，并实现评分数据与后端对接。该解决方案有效弥补标准化病人资源不足的问题，为医学生提供沉浸式沟通训练环境。
2026-04-23 11:28:03
195
原创 山东大学软件学院创新项目实训记录 —— 基于UE与LLM的医患沟通模拟与评价系统（二）
本文介绍了基于UE5引擎开发的医患沟通模拟系统关键技术实现。重点阐述了语音输入功能的技术重构方案：前端采用AudioCapture插件实现录音功能，通过自定义C++插件将音频转为二进制数据传输至后端；后端使用FastAPI框架接收音频路径，利用soundfile读取文件并通过Whisper模型实现语音转文字功能。系统UI界面经过全面优化，整合了语音/文本双输入模式，改进了主场景布局和功能面板设计。
2026-04-11 00:39:07
268
原创 山东大学软件学院创新项目实训记录 —— 基于UE与LLM的医患沟通模拟与评价系统（一）
本项目开发医患沟通模拟系统，利用大模型实现智能交互和病例模拟，解决医学教育中标准化病人资源不足问题。本人负责UE5前端开发，包括语音输入输出功能实现和UI界面搭建。本周完成UI面板初步搭建和语音输入功能开发，实现麦克风音频采集功能，最终将音频传输至python后端。系统为医学生提供沉浸式实训环境，提升医患沟通实操能力。
2026-03-23 16:47:07
63
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人