国内刊号:32-1668/N
国际刊号:1671-7775
发布日期:
作者:王进,徐巍,丁一,孙开伟,王利蕾
单位:1. 重庆邮电大学 数据工程与可视计算重点实验室, 重庆 400065; 2. 南京大学 电子科学与工程学院, 江苏 南京 210023<br />
关键词:多标签,文本分类,序列到序列模型,图嵌入,区域注意力,循环神经网络
基金:国家自然科学基金青年科学基金资助项目(61806033); 重庆市自然科学基金资助面上项目(cstc2019jcyjmsxmX0021)<br />
针对传统多标签文本分类模型未考虑标签之间以及标签与文本各个部分之间的相关性、低频标签预测效果不佳的问题,使用图嵌入和区域注意力技术来挖掘标签之间以及标签和文本之间的关系,提出了编码器图嵌入和区域注意力机制解码器模型来处理多标签分类任务.采用BiLSTM作为编码器,使用图嵌入技术生成标签嵌入矩阵;利用区域注意力机制结合单词级别与区域级别的信息,使得模型在预测每个标签时考虑文本不同部分的信息,挖掘了文本与标签之间的潜在关联;使用循环神经网络和多层感知机作为解码器结合随机策略梯度算法,减少训练损失,改善多标签分类效果.在AAPD和RCV1V2多标签文本分类数据集上进行试验,根据数据集特征设置相关参数,以microF1和Hamming Loss作为评价指标,对比所提出模型与LP、卷积神经网络等9个经典模型.结果表明,所提出模型能够根据高频标签预测出低频标签,在2个数据集上的microF1和Hamming Loss均优于经典模型.
来源:2022年第3期
《江苏大学学报(自然科学版)》期刊编辑部