金融OCR领域实习日志(二)——四种OCR模型效果测试(附图)

文章目录

  • 四种模型ocr效果简单测试
    • 模型
    • 场景
    • 1.paddle框架下PP-OCRv3
      • 1.1.效果如下:
      • 1.2.总结
    • 2.paddle框架下ppocr_server_v2
      • 2.1.效果如下
      • 2.2.总结
    • 3.CnOCR
      • 3.1.效果如下
      • 3.2.总结
    • 4.TesseractOCR
      • 4.1.效果如下
      • 4.2.总结
    • 5.后续想法

四种模型ocr效果简单测试

模型

PP-OCRv3、ppocr_server_v2、CnOCR、TesseractOCR

场景

发票(扫描件)、表格扫描件

1.paddle框架下PP-OCRv3

使用轻量级模型PP-OCRv3

金融OCR领域实习日志(二)——四种OCR模型效果测试(附图)_第1张图片

1.1.效果如下:

1号表格扫描件==(时间2.13s)==:

金融OCR领域实习日志(二)——四种OCR模型效果测试(附图)_第2张图片

金融OCR领域实习日志(二)——四种OCR模型效果测试(附图)_第3张图片

1号发票==(时间1.7s)==

金融OCR领域实习日志(二)——四种OCR模型效果测试(附图)_第4张图片

金融OCR领域实习日志(二)——四种OCR模型效果测试(附图)_第5张图片

2号发票扫描件==(时间2.36s)==

金融OCR领域实习日志(二)——四种OCR模型效果测试(附图)_第6张图片

金融OCR领域实习日志(二)——四种OCR模型效果测试(附图)_第7张图片

1.2.总结

表格扫描件:效果一切良好

发票实拍:有部分模糊文字识别不清,图片太糊了

发票扫描件:效果良好,但是特殊字符无法识别,后续补充训练可以解决

2.paddle框架下ppocr_server_v2

使用通用模型PP-OCRv3

金融OCR领域实习日志(二)——四种OCR模型效果测试(附图)_第8张图片

2.1.效果如下

1号发票

金融OCR领域实习日志(二)——四种OCR模型效果测试(附图)_第9张图片

2.2.总结

效果太差不试了

3.CnOCR

这里ocr参数全部设置默认

3.1.效果如下

1号表格扫描件:

金融OCR领域实习日志(二)——四种OCR模型效果测试(附图)_第10张图片

1号发票:

金融OCR领域实习日志(二)——四种OCR模型效果测试(附图)_第11张图片

3.2.总结

比起paddle中文模型,有较大差距

表格问题较小,但比如”牡“丹识别成了”社“丹

发票比较模糊,问题很多,比如联合识别成联音,公司识别成公碍等错误

特殊字符也同paddle一样无法识别,image-20240125155034693识别成了8,不过可以补充训练

4.TesseractOCR

4.1.效果如下

1号表格:

金融OCR领域实习日志(二)——四种OCR模型效果测试(附图)_第12张图片

1号发票:

金融OCR领域实习日志(二)——四种OCR模型效果测试(附图)_第13张图片

4.2.总结

中文识别一团浆糊,完全不能用

5.后续想法

基于paddle2.6发布的版本,PP-OCRv3表现最好,也是百度最新的OCR中文检测识别模型(paddle2.7下的v4没测),百度通用模型的效果相比而言差了很多。CnOCR比paddle差距明显,特别是模糊图片,Tesseract在中文场景下则是完全不能用。

此外,由于发票文档分布非常复杂,导致大部分识别模型无法对齐,但由于发票的模板非常固定,可以通过坐标变换先调整发票摆正,再裁剪图片喂给模型识别,以此来控制各个识别区域,避免文字错位。

你可能感兴趣的:(实验报告,金融,ocr,算法,python)