融合多级语义的中文医疗短文本分类模型OA
A Chinese Medical Short Text Classification Model with Multi-level Semantic Fusion
针对医疗短文本分类中关键语义信息提取不足与模型鲁棒性下降的问题,提出了融合多级语义信息的文本分类模型.首先,利用预训练模型捕获文本的初步语义特征.其次,通过胶囊网络提取关键语义信息,确保模型能够有效学习到短文本中的核心语义;采用注意力池化技术聚焦文本中的文档级信息,增强对医学专业术语和概念的识别与理解.最后,引入对抗训练策略,提升模型在面对模糊表达或扰动输入时的稳定性和准确性.在 CHIP-CTC、KUAKE_QIC和 VSQ三个医疗文本分类数据集上验证了模型的有效性,结果表明,相较于现有模型,所提模型在三个数据集上的 F1 值均有所提升,显著增强了中文医疗短文本的分类性能.
To address the issues of insufficient extraction of key semantic information and decreased ro-bustness in medical short text classification,a text classification model that incorporated multi-level se-mantic information was proposed.Firstly,preliminary semantic features of the text were captured by using a pretrained model.Secondly,critical semantic information was extracted through a capsule network,en-suring that the model could effectively learn the core semantics of short texts.Attention pooling tech-niques were applied to focus on document-level information,thereby enhancing the recognition and un-derstanding of medical terminology and concepts.Finally,an adversarial training strategy was introduced to improve the stability and accuracy of the model when faced with ambiguous expressions or perturbed in-puts.The effectiveness of the model was validated on three medical text classification datasets,CHIP-CTC,KUAKE_QIC and VSQ.The results showed that compared to the existing models,the F1 values of the proposed model increased on the three datasets,significantly enhancing the classification performance of Chinese medical short texts.
杨杰;刘纳;郑国风;李晨;道路
北方民族大学 计算机科学与工程学院 宁夏 银川 750021||北方民族大学 图像图形智能处理国家民委重点实验室 宁夏 银川 750021北方民族大学 计算机科学与工程学院 宁夏 银川 750021||北方民族大学 图像图形智能处理国家民委重点实验室 宁夏 银川 750021北方民族大学 计算机科学与工程学院 宁夏 银川 750021||北方民族大学 图像图形智能处理国家民委重点实验室 宁夏 银川 750021北方民族大学 计算机科学与工程学院 宁夏 银川 750021||北方民族大学 图像图形智能处理国家民委重点实验室 宁夏 银川 750021北方民族大学 计算机科学与工程学院 宁夏 银川 750021||北方民族大学 图像图形智能处理国家民委重点实验室 宁夏 银川 750021
信息技术与安全科学
中文医疗数据短文本分类语义融合胶囊网络注意力池化
Chinese medical datashort text classificationsemantic fusioncapsule networkattention pooling
《郑州大学学报(理学版)》 2026 (1)
51-57,7
国家自然科学基金项目(62162001)宁夏自然科学基金项目(2021AAC03224)北方民族大学校级科研项目(2024XYZJK01)
评论