💡 关于我
我目前是广东技术师范大学的大四学生，专注于多模态情感分析、医学多模态数据融合等研究方向。我正在积极寻求实习机会，如果您正在寻找实习生，请随时通过邮件联系我 yueshenghuang@stu.gpnu.edu.cn。我就读于广东技术师范大学计算机科学学院物联网工程系，师从黎嘉文助理教授。我探索并自学了许多研究课题。在2024年，我获得了广东省年度人物奖（全省仅10名获奖者）和人民日报国家奖学金学生代表（广东省仅4名获奖者）。我的研究兴趣包括医学人工智能、社会计算等。由于尚未深入研究，我发表的论文水平较低。我很荣幸多次担任IJCNN国际会议的审稿人之一。
🔥 新闻
- 2024.12: 🎉🎉 我被评为2023年度广东省年度大学生人物。广东省仅选出10人。我是同年度最年轻的获奖者，也是唯一一位2021级在校本科生，其余均为硕博和本科毕业生。
- 2024.05: 🎉🎉 我作为100名本科生国家奖学金获得者代表之一被人民日报报道，其中广东省仅4名。
📝 发表论文
CMC 2024
Jiawen Li, Yuesheng Huang, Yayi Lu, Leijun Wang*, Yongqi Ren and Rongjun Chen
GB/T
Li J, Huang Y, Lu Y, et al. Sentiment Analysis Using E-Commerce Review Keyword-Generated Image with a Hybrid Machine Learning-Based Model[J]. Computers, Materials & Continua, 2024, 80(1).
MLA
Li, Jiawen, et al. "Sentiment Analysis Using E-Commerce Review Keyword-Generated Image with a Hybrid Machine Learning-Based Model." Computers, Materials & Continua 80.1 (2024).
APA
Li, J., Huang, Y., Lu, Y., Wang, L., Ren, Y., & Chen, R. (2024). Sentiment Analysis Using E-Commerce Review Keyword-Generated Image with a Hybrid Machine Learning-Based Model. Computers, Materials & Continua, 80(1).
Engineering Letters
Yuesheng Huang, Jiawen Li, Yushan Li, Routing Lin, Jingru Wu, Leijun Wang, and Rongjun Chen
GB/T
Huang Y, Li J, Li Y, et al. An Improved Hybrid CNN-LSTM-Attention Model with Kepler Optimization Algorithm for Wind Speed Prediction[J]. Engineering Letters, 2024, 32(10).
MLA
Huang, Yuesheng, et al. "An Improved Hybrid CNN-LSTM-Attention Model with Kepler Optimization Algorithm for Wind Speed Prediction." Engineering Letters 32.10 (2024).
APA
Huang, Y., Li, J., Li Y., Lin, R., Wu, J., Wang, L., & Chen, R. (2024). An Improved Hybrid CNN-LSTM-Attention Model with Kepler Optimization Algorithm for Wind Speed Prediction. Engineering Letters, 32(10).
ISCTIS 2024 A FinBERT Framework for Sentiment Analysis of Chinese Financial News, Yuesheng Huang, Renyi Lin, Jiawen Li, et al. EIECT 2023 An Ensemble Learning Approach for Wind Power Forecasting, Yuesheng Huang, Sida Chen, Qilin Wu, et al. 🏆 荣誉和奖项
- 2025.02 中国大学生技术创新创业大赛信息技术、医疗健康、现代服务赛道三赛道一等奖。
- 2024.05 美国大学生数学建模竞赛E题Finalist奖（全球前2%），COMAP。
- 2023.12 获得国家奖学金。
- 2023.11 中国大学生数学建模竞赛广东赛区一等奖
- 2023.08 中国大学生计算机设计大赛广东赛区一等奖
- 2023.08 国际高校数学建模竞赛特等奖。
- 2023.08 中国大学生生物医学工程创新设计竞赛全国总决赛三等奖。
- 2021.12 Kaggle Lux AI竞赛银牌。
🎓 教育背景
- 2021.09 - 2025.06, 物联网工程 工学学士学位（ESI前1%）, 计算机科学学院, 广东技术师范大学。（GPA:92.3/100, 排名:1/111）
- 毕业设计: 基于多模态数据与大模型赋能的学生情感智能分析与监测系统设计
摘要
随着人工智能与深度学习技术的深入发展，多模态情感分析在教育领域的应用潜力日益显现。传统单模态情感识别方法在捕捉学生复杂情绪状态方面存在局限，而多模态分析通过整合面部表情、语音信息与生理信号，能显著提升情感识别的准确性。当前教育信息化背景下，学生心理健康监测需求迫切，但现有方法存在时效性差、主观性强、难以规模化等问题，限制了其在校园环境的普及。
针对上述挑战，本文提出并实现了一套基于ESP32与ESP32S3硬件平台，结合轻量化多模态融合算法及大语言模型的学生情感智能分析与监测系统。该系统旨在利用低成本、高集成度的嵌入式技术，融合面部、语音、心率等多源数据，为教育工作者、家长及学生提供实时、准确、便捷的情感监测与支持工具。
在硬件层面，采用ESP32与ESP32S3双主板分布式架构。ESP32主板集成ESP32CAM、心率传感器等，实现面部表情识别、生理数据采集及基础反馈；ESP32S3主板集成数字麦克风、音频功放、显示屏等，实现基于百度文心一言API的智能对话功能。软件层面，基于Node.js构建服务端，采用SQLite进行数据存储，开发了面向教师、学生、家长的多角色Web应用界面。算法层面，设计了基于Deepface的面部情绪识别、基于文心一言API的语音情感分析，设计了动态权重决策级多模态融合算法，并引入基于数据量的多模型情绪趋势预测方法。同时，利用提示词优化了大模型在情感支持对话任务中的表现。
设计完成后，完成了系统硬件平台的搭建与调试，并对软件系统进行了全面的功能测试与验证，包括白盒测试与黑盒测试。测试结果表明，系统各模块运行稳定，功能符合设计要求，能够有效整合多模态数据进行学生情感状态分析与监测，验证了该设计的可行性与有效性。
关键词：多模态情感分析；学生情感监测；ESP32；大语言模型；数据融合 - 2018.09 - 2021.06, 普通高中, 韶关市翁源中学
📖 研究课题
- 2023.05-2024.05, “基于高斯树的MIMO系统检测算法研究与实现”, 中国大学生创新创业计划项目, 主持。(项目已完成)
- 2024.01-2026-01, “基于深度学习的多模态数据融合细粒度情感分析研究”, 广东省科技创新资金, 45,000元, 主持。(项目已完成)
- 2024.05-2025.05, “Neurodetective：用于神经退行性疾病诊断的可解释多模态对比学习框架”, 中国大学生创新创业计划项目, 主持。(项目已完成)
- 2024.05-2025.05, “水产共生，生态共荣：一种用于数字水产养殖鱼塘系统的通用农业视觉大模型DASAM”, 中国大学生创新创业计划项目, 第二完成人。(项目已完成)
- 2025.05-2026.05, “基于混合专家（MoE）多模态模型的阿尔茨海默病早期诊断系统”, 中国大学生创新创业计划项目, 第二参与人。
- 2025.05-2026.05, “扩散模型赋能的多模态决策：突破AI辅助诊断平台中罕见病医学图像短缺的瓶颈”, 中国大学生创新创业计划项目, 第二参与人。
©️ 专利与版权
- 2024, “基于Flask的医学图像分割平台V1.0”, 中国软件著作权, 2024SR0877362
- 2023, “医学葡聚糖信息检测系统V1.0”, 中国软件著作权, 2023SR1635698
- 2023, “基于声波感知的多臂障碍物检测与运动规划软件V1.0”, 中国软件著作权, 2023SR1657692