对双栏 | 单双栏混合 | 图表文字混合的复杂布局的图片OCR识别(对布局复杂的整个pdf进行OCR识别)

简介: 这个故事告诉我们要多尝试不同的库和引擎,尤其是需求比较偏门或者少见的时候。同一个方向不同的库所擅长的领域是不一样的。 博客不应该只有代码和解决方案,重点应该在于给出解决方案的同时分享思维模式,只有思维才能可持续地解决问题,只有思维才是真正值得学习和分享的核心要素。如果这篇博客能给您带来一点帮助,麻烦您点个赞支持一下,还可以收藏起来以备不时之需,有疑问和错误欢迎在评论区指出~


一、常用的OCR识别工具

  先上一个表,分享一下我最近接触到的三个OCR引擎,其实各有各的特点,说不上最好和最坏,按需使用。

识别引擎 python库 识别准确度 识别速度 特点
tesseract pytesseract 较差 最慢 可二次训练,可调整识别速度,可识别复杂布局
paddleOCR ppstructure 较好 最快 表格识别准确
CnOCR Pix2Text 一般 一般 中文识别率不错,能识别公式转化为Latex

  这里需要强调一个问题,识别准确度是针对手写体、内容残缺或者噪声较多的图片,如果是清晰度高的纯文本图片,这几个引擎实测识别率都在99%以上,非常准确。至于识别速度的问题,最慢的tesseract在识别一篇20页的论文PDF(识别结果一千多行)的时候,也大概只用了2-3分钟,这个按照项目需求选用吧。

二、确定布局情况的分割方法

2.1、在线分割工具

  如果只有少量的图片,那就可以直接对图片下手,然后随便使用一个OCR工具即可

  免费的图片分割网站:Split PDF pages in the middle using DeftPDF online for free

2.2、代码分割

  如果能够确定批量图片的布局情况,比如确定图片都是双栏的布局,也可以使用一个分割脚本。就是获取图片的宽高,然后将图片拆分为高度不变,宽度为原图的一半就行(如果不是均分的两栏就按照实际比例分割)这个实现代码到处都是,就不占用篇幅赘述了。

三、重点:布局不规律,无法事先预料情况下的内容识别

3.1、需求重述

①问题

  最近做了一个需求,要求用户上传论文的PDF,然后就能通过OCR获取其中的信息,关键是要做成一个web的功能,面向一般的用户,再加上论文的布局是复杂多样的,没法预设。

  可是如果把双列内容不做任何处理去识别,结果往往是将左边一列的第一行和右边一列的第一行视作同一行,可真正的阅读顺序应该是将左边一列读完再读右边一列的第一行。

②解决

  后来寻思让用户指出哪几页是双栏,哪几页是单栏,这样不但麻烦,而且有的页面同时有单栏和双栏(图片表格单栏,正文双栏),用户体验肯定不好,最后发现pytesseract是可以处理内容的位置信息,识别布局情况,并且可以按照正常的阅读习惯将识别的内容拼接,于是问题迎刃而解。

3.2、代码实现

  废话不多说,上代码,记得提前安装tesseract引擎,并下载需要的训练库。

import pytesseract
from PIL import Image
import os
import fitz
# 设置TESSDATA_PREFIX环境变量,这是你自己的训练库所在位置,训练库去官网下载
# os.environ['TESSDATA_PREFIX'] = r'D:\Program Files\Tesseract-OCR\tessdata'
# 设置Tesseract OCR引擎的路径,下载的引擎路径
pytesseract.pytesseract.tesseract_cmd = r'D:\Program Files\Tesseract-OCR\tesseract.exe'
def recognize_text_from_pdf(pdf_path, output_path, language='eng+chi_sim'):
    # 打开PDF文件
    pdf_document = fitz.open(pdf_path)
    all_text = ""
    # 将PDF的每一页转化为图片,再识别内容
    for pg in range(pdf_document.page_count):
        page = pdf_document[pg]
        rotate = int(0)
        # 清晰度在这改(设为1.33333333是1056x816像素;设为2是>1584x1224像素)
        zoom_x = 2
        zoom_y = 2
        mat = fitz.Matrix(zoom_x, zoom_y).prerotate(rotate)
        pix = page.get_pixmap(matrix=mat, alpha=False)
        image = Image.frombytes("RGB", [pix.width, pix.height], pix.samples)
        # 使用Tesseract OCR引擎识别图片中的文本
        text = pytesseract.image_to_string(image, lang=language)
        all_text += text + "\n\n"
    # 关闭PDF文件
    pdf_document.close()
    with open(output_path+'/'+'pdf1output.txt', 'w', encoding='utf-8') as file:
        file.write(all_text)
# PDF路径和输出路径
pdf_path = './data/chinese.pdf'
output_folder = './output'
recognize_text_from_pdf(pdf_path, output_folder)

image.gif

3.3、测试效果

  测试下方这张从论文中拆分出来的图片,其中图表都是单栏,正文是双栏。识别结果完全符合读者的阅读顺序(只是图表内容可能会错位,这个方面tesseract确实不太行)

image.gif 编辑

四、总结

       这个故事告诉我们要多尝试不同的库和引擎,尤其是需求比较偏门或者少见的时候。同一个方向不同的库所擅长的领域是不一样的。

       更多OCR方面的小技巧和经验贴:各种常用OCR,分享特殊情况下的OCR解决方案

       博客不应该只有代码和解决方案,重点应该在于给出解决方案的同时分享思维模式,只有思维才能可持续地解决问题,只有思维才是真正值得学习和分享的核心要素。如果这篇博客能给您带来一点帮助,麻烦您点个赞支持一下,还可以收藏起来以备不时之需,有疑问和错误欢迎在评论区指出~

相关文章
|
1月前
|
机器学习/深度学习 文字识别 Linux
Umi-OCR_文字识别工具 免安装使用教程(附下载安装包)!永久免费,开源离线OCR识别软件下载
Umi-OCR是一款开源免费、支持离线运行的高精度OCR文字识别工具,基于深度学习技术,可快速识别中文、英文、日文等多种语言。无需联网,保护隐私,适用于Windows和Linux系统,解压即用,操作简便,是处理图片转文本的理想选择。
869 7
|
2月前
|
机器学习/深度学习 文字识别 Java
Python实现PDF图片OCR识别:从原理到实战的全流程解析
本文详解2025年Python实现扫描PDF文本提取的四大OCR方案(Tesseract、EasyOCR、PaddleOCR、OCRmyPDF),涵盖环境配置、图像预处理、核心识别与性能优化,结合财务票据、古籍数字化等实战场景,助力高效构建自动化文档处理系统。
667 0
|
1月前
|
机器学习/深度学习 文字识别 Shell
高效率办公PDF批量处理:批量OCR识别PDF区域文字内容,用PDF内容批量改名或导出表格的货物运单应用案例
针对铁路货运物流单存档需求,本项目基于WPF与飞桨OCR技术,实现批量图片多区域文字识别与自动重命名。用户可自定义识别区域,系统提取关键信息(如车号、批次号)并生成规范文件名,提升档案管理效率与检索准确性,支持PDF及图像文件处理。
274 0
|
5月前
|
人工智能 文字识别 自然语言处理
熊猫 OCR 识别软件下载,支持截图 OCR、PDF 识别、多语言翻译的免费全能工具,熊猫OCR识别
本文介绍了几款实用的图文识别软件,包括熊猫OCR、Umi-OCR和天若OCR_本地版。熊猫OCR功能强大,支持多窗口操作、AI找图找色、OCR识别等;Umi-OCR免费且高效,具备截图OCR、批量处理等功能;天若OCR界面简洁,适合快速文字识别。文章还提供了下载链接及软件特点、界面展示等内容,便于用户根据需求选择合适的工具。
523 36
|
7月前
|
人工智能 自然语言处理 算法
科研论文翻译神器!BabelDOC:开源AI工具让PDF论文秒变双语对照,公式图表全保留
BabelDOC 是一款专为科学论文设计的开源AI翻译工具,采用先进的无损解析技术和智能布局识别算法,能完美保留原文格式并生成双语对照翻译。
2189 67
科研论文翻译神器!BabelDOC:开源AI工具让PDF论文秒变双语对照,公式图表全保留
|
6月前
|
人工智能 搜索推荐 算法
PDF 转 JPG 图片小工具:CodeBuddy 助力解决转换痛点
在 PDF 转 JPG 的实际应用中,用户普遍面临转换质量差、批量处理效率低、格式兼容性不足以及编程实现困难等痛点。而 CodeBuddy 凭借智能代码生成与优化、实时错误诊断修复、助力代码学习拓展,以及支持多场景适配与个性化定制等强大的 AI 编程能力,精准直击这些难题。使用 CodeBuddy 开发 Python PDF 转 JPG 小工具,能够有效提升转换效率与质量,降低开发门槛和成本,为用户带来高效、优质的文件格式转换体验。
237 16
|
5月前
|
人工智能 开发工具 开发者
【HarmonyOS 5】鸿蒙应用实现发票扫描、文档扫描输出PDF图片或者表格的功能
HarmonyOS 系统提供的核心场景化视觉服务,旨在帮助开发者快速实现移动端文档数字化功能。
273 0
|
7月前
|
存储 JSON API
如何将 Swagger 文档导出为 PDF 文件
你会发现自己可能需要将 Swagger 文档导出为 PDF 或文件,以便于共享和存档。在这篇博文中,我们将指导你完成将 Swagger 文档导出为 PDF 格式的过程。
|
4月前
|
C#
【PDF提取内容改名】批量提取PDF指定区域内容重命名PDF文件,PDF自动提取内容命名的方案和详细步骤
本工具可批量提取PDF中的合同编号、日期、发票号等关键信息,支持PDF自定义区域提取并自动重命名文件,适用于合同管理、发票处理、文档归档和数据录入场景。基于iTextSharp库实现,提供完整代码示例与百度、腾讯网盘下载链接,助力高效处理PDF文档。
651 40
|
4月前
|
编译器 Python
如何利用Python批量重命名PDF文件
本文介绍了如何使用Python提取PDF内容并用于文件重命名。通过安装Python环境、PyCharm编译器及Jupyter Notebook,结合tabula库实现PDF数据读取与处理,并提供代码示例与参考文献。

热门文章

最新文章

下一篇
oss云网关配置