CN116561339B 知識圖譜實體鏈接方法、裝置、計算機設備及存儲介質 （之江實驗室）

圖譜實體和對應的知識圖譜實體鄰接子圖輸入2基于所述知識圖譜實體正樣本在所述知識圖譜中的實基于所述問題樣本、所述實體提及樣本、知識圖譜實體負樣基于所述訓練數(shù)據(jù)正樣本、訓練數(shù)據(jù)負樣本對實體鏈接初始將用戶問題、實體提及、候選知識圖譜實體和對應的知識體鄰接子圖基于所述候選知識圖譜實體在所述知識圖譜中的實將所述訓練數(shù)據(jù)正樣本和訓練數(shù)據(jù)負樣本輸入所述實體鏈接將所述問題樣本、知識圖譜實體樣本輸入所述文本嵌入模塊，輸基于所述樣本問題向量，獲取所述實體圖網(wǎng)絡嵌入模塊中實體樣本向量的注意力權將所述知識圖譜實體鄰接子圖樣本輸入所述實體圖網(wǎng)絡嵌入模塊，5.根據(jù)權利要求4所述的方法，其特征在于，所述文本嵌入模塊還包括多層感知機模3獲取所述實體提及樣本的開始位置所對應的所述BERT模型對所述第一輸出向量、第二輸出向量和第三輸出向量進行拼接，基于所述第一輸出向量，對所述知識圖譜實體鄰接子圖樣本進將所述實體樣本向量輸入所述實體圖網(wǎng)絡嵌入模塊，基于所述注實體鄰接子圖樣本基于所述知識圖譜實體正樣本在所述知識圖譜中的述知識圖譜中與所述實體提及樣本不存在標注關系的實體訓練模塊，用于基于所述訓練數(shù)據(jù)正樣本、訓練數(shù)子圖輸入訓練完成的所述實體鏈接模型，確定與所述實體提及鏈接的目標知識圖譜實體；述知識圖譜實體鄰接子圖基于所述候選知識圖譜實體在所述知識圖譜中的實體關權利要求1至7中任一項所述的知識圖譜實體鏈接方法的步4[0002]實體鏈接是指將文本中出現(xiàn)的實體提及(mention)和知識圖譜中相應的實體鏈接樣本基于所述知識圖譜實體正樣本在所述知識圖譜中的實體關譜實體鄰接子圖基于所述候選知識圖譜實體在所述知識圖譜中的實體關系5[0021]基于所述CLS標志位對應的所述BERT模型的第一輸出向量，確定所述樣本問題向所述實體提及樣本的結束位置所對應的所述BERT模型的第6于所述知識圖譜中與所述實體提及樣本不存在標注關所述知識圖譜實體鄰接子圖基于所述候選知識圖譜實體在所述知識圖譜中的實體關系獲被處理器執(zhí)行時實現(xiàn)上述第一個方面所述的知識圖譜實體鏈接7[0043]圖3是本申請一些實施例的基于訓練數(shù)據(jù)樣本對實體鏈接初始模型進行訓練的流[0044]圖4是本申請一些實施例的基于訓練數(shù)據(jù)樣本輸出樣本實體提及向量和樣本實體[0045]圖5是本申請一些實施例的基于問題樣本、知識圖譜實體樣本獲得樣本問題向量[0046]圖6是本申請一些實施例的基于問題樣本、知識圖譜實體樣本獲得樣本實體提及[0047]圖7是本申請一些實施例的基于知識圖譜實體鄰接子圖樣本獲得樣本實體圖卷積等類似的詞并不表示數(shù)量上的限制，它們可以是單數(shù)或者復數(shù)。在本申請中所涉及的術語括但不限于微處理器MCU或可編程邏輯器件FPGA等的處理裝置。上述終端還可以包括用于8實施例中的知識圖譜實體鏈接方法對應的計算機程序，處理器102通過運行存儲在存儲器或者其他非易失性固態(tài)存儲器。在一些實施例中，存儲器104可進一步包括相對于處理器[0055]傳輸設備106用于經(jīng)由一個網(wǎng)絡接收或者發(fā)送數(shù)據(jù)。上述的網(wǎng)絡包括通信供應商提供的無線網(wǎng)絡。在一個實例中，傳輸設備106包括一個網(wǎng)絡適配器(NetworkInterface[0056]在本實施例中提供了一種知識圖譜實體鏈接方法，圖2是本申請一些實施例的知本基于該知識圖譜實體正樣本在該知識圖譜中的實體關邊(關系)，定義實體ei在知識圖譜G中的鄰接子圖為ei的一跳鄰接結點組成的子圖，記作[0062]從知識圖譜中隨機抽取實體并濾除正樣本中出現(xiàn)的實體集合E，記作E*=9子圖基于候選知識圖譜實體在知識圖譜中的實體關系[0066]當一個新的用戶問題輸入，可以通過NER模型等實體識別模型提取用戶問題中的[0069]在其中的一些實施例中，圖3是本申請一些實施例的基于訓練數(shù)據(jù)樣本對實體鏈[0074]樣本實體提及向量與樣本實體圖卷積向量分別表達了實體提及樣本和對應的知對應的知識圖譜實體樣本之間的語義相似度，也可以體現(xiàn)實體鏈接初始模型的訓練效果。樣本標記參數(shù)用于體現(xiàn)訓練數(shù)據(jù)正樣本和訓練數(shù)據(jù)負樣本對實體鏈接模型訓練效果的差模塊，圖4是本申請一些實施例的基于訓練數(shù)據(jù)正負樣本輸出樣本實體提及向量和樣本實[0083]文本嵌入模塊是通過文本嵌入方式將問題樣本中的實體提及樣本映射為對應的體提及樣本和知識圖譜實體樣本，其中實體提及樣本包含在問題樣本中輸入文本嵌入模[0085]實體圖網(wǎng)絡嵌入模塊是通過實體圖嵌入的方式將實體圖網(wǎng)絡映射為對應的表征[0101]步驟S502，基于該CLS標志位對應的BERT模型的第一輸出向量，確定樣本問題向[0103]通過上述步驟S501～S502，通過基于預定格式對問題樣本、知識圖譜實體樣本、及實體提及樣本的結束位置所對應的BERT[0106]實體提及樣本的開始位置即實體提及樣本在輸入BERT模型的問題樣本中的開始位置，實體提及樣本的結束位置即實體提及樣本在輸入BERT模型的問題樣本中的結束位實體提及樣本的開始位置和結束位置對應的向量進行進一步處理；通過對第一輸出向量、[0110]在其中的一些實施例中，圖7是本申請一些實施例的基于知識圖譜實體鄰接子圖[0121]下面通過優(yōu)選實施例對本實施例進行描述和說明。圖8是本優(yōu)選實施例的實體鏈[0125]步驟S903，將訓練數(shù)據(jù)四元組中的用戶問題和知識圖譜實體拼接為[CLS]用戶問[0127]步驟S905，將Bert在[CLS]位置輸出的向量作為知識圖譜實體鄰接子圖中實體的4=4,其中j∈Ni合，是實體ei通過關系r鏈接的鄰接結點的數(shù)量，w;表示關系r對應的權重矩樣本實體圖卷積向量更準確地表征知識圖譜中的實體關系；基于Bert在[CLS]位置輸出的鄰接子圖樣本基于該知識圖譜實體正樣本在知識圖譜中的圖譜中與該實體提及樣本不存在標注關系的實實體鄰接子圖輸入訓練完成的實體鏈接模型，確定與實體提及鏈接的目標知識圖譜實體；鄰接子圖基于候選知識圖譜實體在知識圖譜[0153]在一些實施例中，實體鏈接初始模型包括文本嵌入模塊和實體圖網(wǎng)絡嵌入模塊，模型的第二輸出向量，以及實體提及樣本的結束位置所對應的BERT模型的第三輸出向量；