CN116486423B 一種基于圖像識(shí)別的金融票務(wù)數(shù)據(jù)處理方法 （包頭稀土產(chǎn)品交易所有限公司）

土開發(fā)區(qū)黃河大街98號(hào)金融廣場1-一種基于圖像識(shí)別的金融票務(wù)數(shù)據(jù)處理方法本發(fā)明公開了一種基于圖像識(shí)別的金融票2獲得多個(gè)銷售方的文本信息和購買方的文本信息，將多個(gè)銷將基本模版發(fā)票按照其功能進(jìn)行區(qū)域劃分，進(jìn)而得到劃分的各子2，...k，...v，進(jìn)而獲取各子區(qū)域?qū)?yīng)的位置，并構(gòu)建各子區(qū)域位置集合W(W1,W2, 對當(dāng)前整張發(fā)票的版面執(zhí)行掃描處理操作時(shí)，并獲得掃描后的掃描執(zhí)行掃描信息篩選處理操作：獲取進(jìn)而調(diào)用當(dāng)前整張發(fā)票的表區(qū)域表征信息與銷售方文本集合對比，如果存在不匹配則判定子區(qū)域視為非正常子區(qū)域，將掃描到的當(dāng)前重疊發(fā)票的圖像信息進(jìn)行分割，獲取最上層的一根據(jù)掃描識(shí)別目標(biāo)圖像中的表格區(qū)的表格邊緣得到表格長邊邊緣線與表格短邊邊緣若掃描識(shí)別表格長邊邊緣線不平行于表格長邊邊緣線的對照線，則對目標(biāo)獲取表格區(qū)區(qū)內(nèi)的連續(xù)兩個(gè)當(dāng)前字符的字符邊界確定兩個(gè)連續(xù)若判斷兩個(gè)連續(xù)字符語義具有金融票據(jù)關(guān)聯(lián)語義，則確定上伸向量方向平行的目標(biāo)圖像中目標(biāo)表格區(qū)的表格長邊邊緣線為目標(biāo)圖像的目標(biāo)表格區(qū)第確定與目標(biāo)圖像的目標(biāo)表格區(qū)第一邊緣的垂直線為表格第二邊緣3同時(shí)實(shí)時(shí)檢測旋轉(zhuǎn)后的目標(biāo)圖像的目標(biāo)表格區(qū)第一邊緣是否平行于預(yù)設(shè)水平線，若所述第二初始條件是指同一行的任意的當(dāng)前連續(xù)兩個(gè)字符的間距與預(yù)設(shè)字符間距值一致且同一行的任意的當(dāng)前連續(xù)兩個(gè)字符的語義符合金預(yù)設(shè)多個(gè)金融票據(jù)相關(guān)詞匯集合并由多個(gè)金融票據(jù)相關(guān)詞匯集合構(gòu)建首先獲取當(dāng)前兩個(gè)連續(xù)字符，根據(jù)當(dāng)前兩個(gè)連續(xù)字符與當(dāng)前將掃描到的當(dāng)前重疊發(fā)票的圖像信息進(jìn)行分割，獲取最上層的一根據(jù)掃描識(shí)別目標(biāo)圖像中的表格區(qū)的表格邊緣得到表格長邊邊緣線與表格短邊邊緣若掃描識(shí)別表格長邊邊緣線不平行于表格長邊邊緣線的對照線，則對目標(biāo)獲取表格區(qū)區(qū)內(nèi)的連續(xù)兩個(gè)當(dāng)前字符的字符邊界確定兩個(gè)連續(xù)若判斷同一行內(nèi)多個(gè)不連續(xù)的詞組具有金融票據(jù)關(guān)聯(lián)語義，則到第二字符的字符延伸向量方向平行的目標(biāo)圖像中目標(biāo)表格區(qū)的表格長邊邊緣線為目標(biāo)確定與目標(biāo)圖像的目標(biāo)表格區(qū)第一邊緣的垂直線為表格第二邊緣同時(shí)實(shí)時(shí)檢測旋轉(zhuǎn)后的目標(biāo)圖像的目標(biāo)表格區(qū)第一邊緣是否平行于預(yù)設(shè)水平線，若所述第二初始條件是指同一行的任意的當(dāng)前連續(xù)兩個(gè)字符的間距與預(yù)設(shè)字符間距值4預(yù)設(shè)多個(gè)金融票據(jù)相關(guān)詞匯集合并由多個(gè)金融票據(jù)相關(guān)詞匯集合構(gòu)建首先獲取同一行內(nèi)多個(gè)不連續(xù)的詞組，根據(jù)同一行內(nèi)多個(gè)不連續(xù)7.根據(jù)權(quán)利要求2或者4所述的一種基于圖像識(shí)別的金融票務(wù)處理方法，其特征在于，定義表格區(qū)的第一邊緣與表格區(qū)的第二邊緣分別為X軸、Y軸，以先對連續(xù)兩個(gè)字符中的一個(gè)字符Z1的字符邊界進(jìn)行掃描遍歷，如果掃描的當(dāng)前像素點(diǎn)1B_11由此得到Z1的上邊界點(diǎn)的坐標(biāo)C1；1處理器執(zhí)行時(shí)實(shí)現(xiàn)權(quán)利要求1至8中任一項(xiàng)所述方5 6[0012]根據(jù)掃描識(shí)別目標(biāo)圖像中的表格區(qū)的表格邊緣得到表格長邊邊緣線與表格短邊兩個(gè)連續(xù)的字符間距是否等于預(yù)設(shè)字符間距值，若是則視為當(dāng)前連續(xù)兩個(gè)字符為同一行，字符到第二字符的字符延伸向量方向平行的目標(biāo)圖像中目標(biāo)表格區(qū)的表格長邊邊緣線為[0018]同時(shí)實(shí)時(shí)檢測旋轉(zhuǎn)后的目標(biāo)圖像的目標(biāo)表格區(qū)第一邊緣是否平行于預(yù)設(shè)水平線符間距值一致且同一行內(nèi)多個(gè)不連續(xù)的詞組符合金7定第一字符到第二字符向量方向平行的表格長邊邊緣為Z1為第一字符邊界坐標(biāo)。序被處理器執(zhí)行時(shí)實(shí)現(xiàn)所述基于圖像識(shí)別的金融基于圖像識(shí)別的金融票務(wù)處理方法通過整張發(fā)票的掃描識(shí)別出整張發(fā)票中的文字信息與果遇到發(fā)票重疊尤其是重點(diǎn)子區(qū)域(例如表格區(qū)的銷售方或者購買方子區(qū)域)則需要重點(diǎn)[0038]圖1為本發(fā)明實(shí)施例提供的基于圖像識(shí)別的金融票務(wù)處理方法的主要實(shí)施步驟流8[0039]圖2為本發(fā)明實(shí)施例提供的基于圖像識(shí)別的金融票務(wù)處理方法中檢測子區(qū)域中對[0040]圖3為本發(fā)明實(shí)施例提供的基于圖像識(shí)別的金融票務(wù)處理方法中發(fā)票掃描窗口示[0041]圖4為本發(fā)明實(shí)施例提供基于圖像識(shí)別的金融票務(wù)處理方法中掃描窗口內(nèi)多張發(fā)[0042]圖5為本發(fā)明實(shí)施例提供的基于圖像識(shí)別的金融票務(wù)處理方法的表格長邊邊緣線不平行于表格長邊邊緣線的對照線時(shí)對目標(biāo)圖像處理實(shí)施步驟實(shí)施方[0043]圖6為本發(fā)明實(shí)施例提供的基于圖像識(shí)別的金融票務(wù)處理方法的判斷兩個(gè)連續(xù)字符語義具有金融票據(jù)關(guān)聯(lián)語義實(shí)施步驟實(shí)施方[0044]圖7為本發(fā)明實(shí)施例提供的基于圖像識(shí)別的金融票務(wù)處理方法中檢測子區(qū)域中對[0045]圖8為本發(fā)明實(shí)施例提供的基于圖像識(shí)別的金融票務(wù)處理方法的表格長邊邊緣線不平行于表格長邊邊緣線的對照線時(shí)對目標(biāo)圖像處理實(shí)施步驟實(shí)施方[0046]圖9為本發(fā)明實(shí)施例提供的基于圖像識(shí)別的金融票務(wù)處理方法的判斷兩個(gè)連續(xù)字符語義具有金融票據(jù)關(guān)聯(lián)語義實(shí)施步驟實(shí)施方[0047]圖10為本發(fā)明實(shí)施例提供的基于圖像識(shí)別的金融票務(wù)處理方法的通過邊緣檢測[0048]圖11為本發(fā)明實(shí)施例提供的基于圖像識(shí)別的金融票務(wù)處理方法的通過邊緣檢測本技術(shù)領(lǐng)域的技術(shù)人員對所描述的具體實(shí)施例做各種各樣的修改或補(bǔ)充或采用類似的方稅控設(shè)備對多個(gè)發(fā)票的購買方和各銷售方進(jìn)行初始化的采集是通過數(shù)據(jù)接口方式直接獲9而獲取各子區(qū)域?qū)?yīng)的區(qū)域表征信息，進(jìn)而構(gòu)建各子區(qū)域信息集合H(H1,H2,Hk,表購買方的子區(qū)域?qū)?yīng)的區(qū)域表征信息與購買方文本集合中的某個(gè)購買方信息文本相似域進(jìn)行過濾(若匹配則代表銷售方的子區(qū)域?qū)?yīng)其他區(qū)域例如密碼區(qū)被遮擋或重疊了，當(dāng)然利潤密碼區(qū)的匹配也可以識(shí)別出來發(fā)票重疊，的整張發(fā)票的子區(qū)域的對應(yīng)的區(qū)域表征信息與對應(yīng)位置的文本集合不對應(yīng))，則對掃描到[0060]上述基于圖像識(shí)別的金融票務(wù)處理方法通過整張發(fā)票的掃描識(shí)別出整張發(fā)票中[0061]分析上述技術(shù)方案可知：本發(fā)明涉及的一種基于圖像識(shí)掃描到的當(dāng)前重疊發(fā)票的圖像信息進(jìn)行分割，獲取最上層的一張發(fā)票圖像作為目標(biāo)圖像；[0068]步驟S52：掃描識(shí)別目標(biāo)圖像中的表格區(qū)的表格邊緣得到表格長邊邊緣線與表格位置的第一初始條件(即如果表格長邊邊緣目標(biāo)圖像的表格區(qū)有可能符合對正位置條件，即完全對正或者完全翻轉(zhuǎn)180度后這種時(shí)候定第一字符到第二字符的字符延伸向量方向(字符延伸向量方向)平行的目標(biāo)圖像中目標(biāo)表格區(qū)的表格長邊邊緣線為目標(biāo)圖像的目標(biāo)表[0073]步驟S534：確定與目標(biāo)圖像的目標(biāo)表格區(qū)第一邊緣的垂直線為表格第二邊緣(即可確定多個(gè)連續(xù)字符任意兩個(gè)字符延伸向量方向平行的目標(biāo)圖像中目標(biāo)表格區(qū)的表格長[0077]同時(shí)，實(shí)時(shí)檢測旋轉(zhuǎn)后的目標(biāo)圖像的表格區(qū)第一邊緣線[0079]步驟S5331、預(yù)設(shè)多個(gè)金融票據(jù)相關(guān)詞匯集合并由多個(gè)金融票據(jù)相關(guān)詞匯集合構(gòu)當(dāng)前兩個(gè)連續(xù)字符匹配成功的對應(yīng)的金融票據(jù)相關(guān)定第一字符到第二字符向量方向平行的表格長邊邊緣意第一字符到第一字符到第二字符向量方向平行的表格長邊邊緣線為[0086]步驟S55：根據(jù)掃描識(shí)別目標(biāo)圖像中的表格區(qū)的表格邊緣得到表格長邊邊緣線與步確定第一字符到第二字符的字符延伸向量方向平行的目標(biāo)圖像中目標(biāo)表格區(qū)的表格長[0093]所述第二初始條件是指同一行的任意的當(dāng)前連續(xù)兩個(gè)字符的間距與預(yù)設(shè)字符間距值一致且同一行內(nèi)多個(gè)不連續(xù)的詞組符合[0095]步驟S5631：預(yù)設(shè)多個(gè)金融票據(jù)相關(guān)詞匯集合并由多個(gè)金融票據(jù)相關(guān)詞匯集合構(gòu)先對連續(xù)兩個(gè)字符中的一個(gè)字符Z1的字符邊界進(jìn)行掃描遍歷，如果掃描的當(dāng)前像素點(diǎn)RGB點(diǎn)C1的X軸數(shù)值不變，同時(shí)原坐標(biāo)點(diǎn)C1的Y軸數(shù)值+1得到坐標(biāo)點(diǎn)C1+1的Y軸數(shù)值)處開始縱向Y軸交叉點(diǎn)位原點(diǎn)開始依次遍歷每個(gè)像素點(diǎn)，獲取兩個(gè)連續(xù)字符的一個(gè)字符Z1邊界點(diǎn)的坐Z1邊界點(diǎn)的坐標(biāo)從而獲取兩個(gè)連續(xù)字符中另Z1為第一字符邊界坐標(biāo)。致發(fā)票信息獲取不準(zhǔn)確情況下，通過對掃描到的發(fā)票圖像分割得到最上一層為目標(biāo)圖像序被處理器執(zhí)行時(shí)實(shí)現(xiàn)實(shí)施例一中的所述基于圖像識(shí)別的金融