春季是繁忙的播種季,學生黨迎來了開學季和緊張的研究生復試,職場人士也需要處理新簽業(yè)務帶來的大量不同類型的文件,比如合同、發(fā)票、檔案等。這些文件在被拍照、掃描成電子文檔的過程中,時常存在漏字、錯位現(xiàn)象。究其原因,有個看似“冷門”卻關鍵的技術點極大地影響了文字識別效果,這個技術便是“版面分析”。
近期,人工智能及大數(shù)據(jù)科技企業(yè)合合信息持續(xù)突破版面分析技術在版面分割、區(qū)域間的邏輯關系處理等方面的難題,通過智能文字識別、智能圖像處理等核心技術,助力使用者從各類復雜的圖片文檔中精準獲取信息。
深度學習助力版面分析“泛化”難題突破
版面分析的目的是讓機器“看懂”文檔結構,即將文檔圖像分割成不同類型內容的區(qū)域,并分析區(qū)域之間的關系,這是內容識別之前的關鍵步驟。
據(jù)中國科學院自動化研究所多模態(tài)人工智能系統(tǒng)全國重點實驗室聯(lián)合多所高校發(fā)布的論文顯示,版面分析主要包括物理版面分析(區(qū)域分割、分類,文本檢測與定位,文本行分割等),手寫及印刷區(qū)分,表格分析(單元格提取與關系分析),邏輯版面分析(區(qū)域語義分類、閱讀順序),以及簽名、圖標、印章等版面元素的提取等。
總體而言,版面分析任務被分為物理版面分析(或稱為幾何版面分析)和邏輯版面分析兩類,前者主要解決區(qū)域分割問題,后者則關注區(qū)域之間的邏輯關系或閱讀順序。
從上世紀80年代開始,較多專門研究版面分析的工作成果開始涌現(xiàn),此后經歷了多番理念方法迭代。傳統(tǒng)的版面分析方法在進行版面布局分析和表格處理時會明顯受制于版式差異,在應對不同場景下的文檔圖片時泛化效果存在缺陷,而深度神經網絡的引入有效解決了這些問題。
合合信息技術人員在采訪中提到,得益于全卷積神經網絡(FCN)和圖神經網絡(GNN)的突破,文檔版面分析的方法和性能得到了很大發(fā)展。公司基于深度學習的方法,結合文本區(qū)域的幾何坐標、視覺特征、文本語義等多種模態(tài)信息對文本閱讀順序進行預測,顯著提升分類結果。
合合信息智能文字識別服務平臺對存在圖片、表格的復雜文檔進行識別
同時,合合信息表格結構解析方法在邏輯版面分析中也發(fā)揮了重要作用,主要包括自上而下的方法、自下而上的方法以及端到端圖像到標記的方法等。在財報相關表格識別測試中,有線表識別單元格結構準確率高于98%;無線表識別中,在保證表格區(qū)域內容的完整性的同時,檢測準確率較傳統(tǒng)方法顯著提升。
教育、商務、文保,“小”技術有大應用
近期,中共中央、國務院印發(fā)《數(shù)字中國建設整體布局規(guī)劃》,“數(shù)字中國”的建設邁上了新的征程。版面分析是實現(xiàn)文檔信息數(shù)字化的重要能力,解決了版面分析的痛點,有助于各界用戶將圖像文檔以數(shù)字化的手段更精準地轉化為文檔數(shù)據(jù),提升工作效率。
對于研究人員或學生群體而言,版面分析與OCR技術的結合可以廣泛應用于課件、試卷、作業(yè)、學術論文等材料的數(shù)字化處理,自動識別和提取多種教育類文檔文本、圖像、公式、表格等元素進行不同場景的應用,簡化教學和學習過程。
商務場景中,版面分析與OCR技術能自動識別和提取財務數(shù)據(jù)、圖表、文本等信息,并將印刷財報轉換為可分析的電子數(shù)據(jù),在處理不同類型的財務報表時,能夠提升報告分析效率和準確性,幫助相關人員實現(xiàn)公司財務報告、審計報告、年度報告等文件的自動處理和分析。
合合信息智能文字識別服務平臺對財務文件進行處理
此外,版面分析相關技術還可作用于文化保護,通過自動識別和提取各種類型書籍的表格、圖像信息,將不同時代、多種印刷版式、多種概念的紙質圖樣按照符合人類理解的格式進行電子化存儲,幫助實現(xiàn)文獻、古籍、報紙、雜志等資料的數(shù)字化和知識管理。
相關研究表明,現(xiàn)階段,針對復雜版面文檔和拍照變形文檔的分析識別仍存在性能不足的情況。這個細小卻重要的技術還需要更多的研究機構及科技企業(yè)加入進來,共同推動理論的研究與應用的突破。
相關稿件