首頁 > 期刊 > 自然科學與工程技術 > 信息科技 > 計算機軟件及計算機應用 > 智能計算機與應用 > 基于序列到序列模型的文本到信息框生成的研究 【正文】
基于序列到序列模型的文本到信息框生成的研究
鮑軍威; 周明; 趙鐵軍 哈爾濱工業大學計算機科學與技術學院; 哈爾濱150001; 微軟亞洲研究院; 北京100080
- 文本到信息框生成
- 序列到序列模型
- 注意力機制
- 拷貝機制
摘要：本文展示了一種序列到序列的模型(Seq2Seq)來基于文本生成信息框(Infobox),信息框指的是一組"屬性-值"對。該模型以端到端的方式工作,可利用一個編碼器將一個文本段落表示成一個隱向量序列,然后通過解碼器來生成信息框。本文在WIKIBIO數據集上進行實驗。研究提出的序列到序列模型取得了58.2的F1值,該結果比流水線式的基準方法顯著提升了21.0個百分點。實驗結果表明,本模型具有以生成序列的方式來生成"屬性-值"對的能力。引入注意力與拷貝機制可以提升模型的準確率。更重要的是,研究觀察到該拷貝機制有能力從輸入文本中拷貝稀有詞來生成目標端信息框中的"值"。
- 文本到信息框生成
- 序列到序列模型
- 注意力機制
- 拷貝機制
摘要：本文展示了一種序列到序列的模型(Seq2Seq)來基于文本生成信息框(Infobox),信息框指的是一組"屬性-值"對。該模型以端到端的方式工作,可利用一個編碼器將一個文本段落表示成一個隱向量序列,然后通過解碼器來生成信息框。本文在WIKIBIO數據集上進行實驗。研究提出的序列到序列模型取得了58.2的F1值,該結果比流水線式的基準方法顯著提升了21.0個百分點。實驗結果表明,本模型具有以生成序列的方式來生成"屬性-值"對的能力。引入注意力與拷貝機制可以提升模型的準確率。更重要的是,研究觀察到該拷貝機制有能力從輸入文本中拷貝稀有詞來生成目標端信息框中的"值"。
注：因版權方要求，不能公開全文，如需全文，請咨詢雜志社
