《電子技術應用》
您所在的位置:首頁 > 人工智能 > 设计应用 > 基于混合粒度全局图的多标签文本分类方法
基于混合粒度全局图的多标签文本分类方法
网络安全与数据治理
王哲,温秀梅
河北建筑工程学院信息工程学院
摘要: 多标签文本分类旨在为每个文本实例分配多个标签。传统多标签文本分类方法通常依赖于粗粒度的特征表示,忽视了文本中多层次、多尺度的语义信息。为了解决该问题,提出一种基于混合粒度全局图的多标签文本分类方法,通过MHA提取细粒度的文本特征,捕捉词与标签之间的交互信息,同时使用BiLSTM提取粗粒度的文本特征。随后,通过门控融合机制将两种特征融合得到具有多层次语义的混合粒度特征。将混合粒度词表示、文本和标签作为节点构建全局图,并通过图卷积网络处理全局图以进行分类。在AAPD、RCV1V2两个数据集上进行实验,实验结果表明,所提出方法能有效提升模型性能。
中圖分類號:TP393文獻標識碼:ADOI:10.19358/j.issn.2097-1788.2025.06.006
引用格式:王哲,溫秀梅. 基于混合粒度全局圖的多標簽文本分類方法[J].網絡安全與數據治理,2025,44(6):42-48.
A multi-label text classification method based on a mixed-granularity global graph
Wang Zhe,Wen Xiumei
College of Information Engineering,Hebei University of Architecture
Abstract: Multi-label text classification is designed to assign multiple labels to each instance of text. Traditional multi-label text classification methods usually rely on coarse-grained feature representations, ignoring the multi-level and multi-scale semantic information in the text. In order to solve this problem, this paper proposes a multilabel text classification method based on mixed granularity global graph, which extracts fine-grained text features through MHA to capture the interaction information between words and labels, and uses Bi-LSTM to extract coarse-grained text features. Subsequently, the two features are fused through the gated fusion mechanism to obtain mixed granular features with multi-level semantics. The fused mixed granular word representations, texts, and labels are used together to construct a global graph, and the global graph is processed through a graph convolutional network for classification. Experiments are carried out on two datasets, AAPD and RCV1-V2, and the experimental results show that the proposed method can effectively improve the performance of the model.
Key words : multi-label text classification; multi-head attention mechanism; bidirectional long short-term memory network; gated fusion mechanism; graph convolutional networks

引言

多標簽文本分類是一項基本的文本挖掘任務。在許多應用程序中,文本可能對應于多個相互排斥的標簽[1]。多標簽文本分類可以有效地降低人工成本,具有廣泛的應用前景[2]。與傳統的單標簽分類任務不同,多標簽文本分類旨在為每個文本實例同時分配多個標簽。多標簽文本分類任務可以廣泛應用于情感分析[3]、檔案管理[4]、期刊分類[5]、新聞過濾[6]等領域,尤其在處理復雜、信息密集的文本時展現出獨特的優勢。例如,在情感分析任務中,一個文本可能同時表達多個情感,而在新聞處理中,一個事件可能涉及多個主題,因此需要高效的多標簽分類方法來捕捉文本中的多層次語義信息。

盡管深度學習方法在自然語言處理任務中取得了顯著進展,但現有的多標簽文本分類方法依然面臨許多挑戰。大多數方法仍然依賴于詞袋(Bag of Words,BoW)[7]和n元語法(ngram)[8]模型或簡單的深度學習架構,如卷積神經網絡(Convolutional Neural Network,CNN)[9]和長短期記憶網絡(Long ShortTerm Memory Network,LSTM)[10]。這些方法主要關注從文本中提取低級特征,忽視了文本中的高層次語義關系與標簽之間的潛在關聯性。在多標簽分類任務中,標簽之間的相關性非常復雜,不同標簽之間往往存在一定的依賴關系和上下游信息,這使得現有方法在處理長文本或包含多重語義關系的復雜任務時,表現出信息丟失和語義理解不足的問題。

一方面,傳統的基于特征的淺層模型無法有效捕捉文本中的上下文信息和語義層次,因此其分類效果在多標簽任務中往往較差。另一方面,雖然現代的深度學習模型如BERT[11-12]、GPT[13]等在單標簽分類任務中取得了很大成功,但由于其關注點過于集中在文本本身的語言表達上,仍未能充分考慮標簽之間的關聯性。此外,許多現有方法采用的是逐標簽獨立學習的策略,即每個標簽的預測都是基于輸入文本的獨立決策,這種做法未能充分挖掘標簽間的共現和相互影響。

為了應對這些挑戰,本文提出了一種基于混合粒度全局圖(Hybrid Granularity Global Graph, HGG)的多標簽文本分類方法。本文的核心創新在于引入了一個混合粒度特征提取機制,該機制結合了細粒度和粗粒度兩種層次的文本特征,從而能夠更全面地理解文本中的復雜語義。具體來說,細粒度特征提取通過捕捉單詞、短語以及句子層次的語義信息,幫助模型更好地理解細節和局部語境;而粗粒度特征提取則通過全局信息建模,使得模型能夠從宏觀層面理解文本的主要內容和潛在意圖。這種結合不同粒度特征的方式,有助于更好地平衡局部與全局信息,從而提高多標簽文本分類的精度。

近年來,圖神經網絡(Graph Neural Network,GNN)在推薦系統[14]、計算機視覺[15]等領域得到廣泛應用,許多改進的模型被相繼提出,例如圖卷積網絡(Graph Convolutional Network,GCN)[16]、圖注意力網絡(Graph Attention Network,GAT)[17]等,它們在不同的應用場景中展現了出色的表現。在多標簽文本分類任務中,GNN能夠通過構建標簽之間的關聯圖,捕捉標簽間的共現關系和依賴性,進而提升標簽預測的準確性和全面性。特別是在多標簽任務中,通過GNN的圖結構傳播機制,可以有效地增強標簽之間的相互影響,從而提升多標簽分類模型的性能。此外,GNN的可擴展性和靈活性使得它能夠適應多樣化的數據結構,成為處理復雜數據和任務的一種理想工具。

因此,本文還提出了一種全局圖結構,并利用GCN來捕捉文本和混合粒度詞表示之間的全局關系。通過構建全局圖,能夠捕捉到標簽間的潛在關聯,并通過GCN的傳播機制,強化節點之間的相互影響,從而提升模型的分類效果。

綜上所述,本文的主要貢獻為以下幾點:

(1)針對現有模型通常只考慮文本粗粒度的特征,本文在文本特征提取階段,采用多頭注意力機制(MultiHead Attention, MHA)提取包含詞與標簽交互信息的細粒度文本特征。

(2)設計一種門控融合機制,將粗粒度文本特征與細粒度文本特征融合得到混合粒度的文本特征。

(3)將詞的混合粒度表示、文本和標簽作為節點構建全局圖,并通過GCN處理全局圖,以捕捉文本中詞語、標簽與文本之間的潛在語義關聯和全局結構信息。

(4)在AAPD和RCV1-V2兩個公開數據集上進行多標簽文本分類任務驗證本文方法的有效性。


本文詳細內容請下載:

http://www.tom3567.com/resource/share/2000006579


作者信息:

王哲,溫秀梅

(河北建筑工程學院信息工程學院,河北張家口075000)


Magazine.Subscription.jpg

此內容為AET網站原創,未經授權禁止轉載。
主站蜘蛛池模板: 欧美日韩精品综合| 国产精品女视频| 欧美日韩精品免费看| 国产综合欧美在线看| 国产精品久久久久不卡| 日本亚洲精品在线观看| 美女精品久久久| 国产欧美日韩高清| 国产高清自拍99| 99精品在线直播| 亚洲人精品午夜射精日韩| 久久偷窥视频| 欧美日韩一区二区三区在线观看免 | 色综合久久av| 国产精品美女av| 日韩视频精品在线| 91免费精品视频| 精品国偷自产一区二区三区| 国产精品97在线| 91国在线高清视频| 亚洲自拍欧美另类| 国产精品入口免费视频一| 午夜精品在线观看| 97精品国产97久久久久久| 国产在线视频91| 欧美激情精品久久久久久黑人| 欧美日韩国产精品一区二区| 久久久精品日本| 国产日韩欧美精品在线观看| 国产精品一区二区3区| 午夜精品在线视频| 久久99久国产精品黄毛片入口| 国产精品久久久久久久久婷婷| 久久精品国产亚洲精品2020| 日韩激情久久| 久久777国产线看观看精品| 久久精品视频免费播放| 日韩欧美一区二区三区四区五区| 久久99久久精品国产| 久久久国产精品一区| 国产极品尤物在线|