PythonでPDFを操作する

Posted on One min read

少しPDFファイルをPythonで触る努力をした。 PDFから抜き出したいものはだいたい3つ。

  • テーブルデータ
  • 文章
  • 画像データ

画像データは試してない。　

テーブルデータ(構造化データ)を取り出す

camelot-py[cv]で pandas データフレームとして抜き出せる。

1

pipenv install camelot-py[cv]

 1
 2
 3
 4
 5
 6
 7
 8
 9
10
11
12
13

import camelot
import pandas as pd

file_path = 'foo.pdf'

tables = camelot.read_pdf(file_path, pages='1-end', split_text=True, strip_text='\n')
dataframes = []
for table in tables:
    df = table.df
    dataframes.append(df)
df = pd.concat(dataframes)
df.to_csv('captured.csv', index=False, header=False, encoding='utf-8')
df = pd.read_csv('captured.csv', header=0, index_col=0)

こんな感じでファイル名とページを指定したらテーブルから取り出せる。 read_pdf()はオプションが色々ある。 flavor を stream に変えることで格子テーブルではなくスペース区切りのテーブルも取り出せるとのこと。 その辺りはAdvanced Usageに書かれている。

文章を取り出す

このブログ記事が参考になった。 日本語だと下の2つが便利そう。だが段組されてるPDFからの抽出などたりとみんな苦労していそう。

Tikaで単純なPDFで試したら綺麗に取り出せた。

1
2
3
4
5
6
7
8

>>> from tika import parser
>>> file_data = parser.from_file('340395.pdf')
>>> file_data.keys()
dict_keys(['metadata', 'content', 'status'])

>>> meta = file_data['metadata']
>>> meta
{'Content-Type': 'application/pdf', 'Creation-Date': '2020-07-11T09:07:21Z', 'X-Parsed-By': ['org.apache.tika.parser.DefaultParser', 'org.apache.tika.parser.pdf.PDFParser'], 'X-TIKA:content_handler': 'ToTextContentHandler', 'X-TIKA:embedded_depth': '0', 'X-TIKA:parse_time_millis': '1148', 'access_permission:assemble_document': 'true', 'access_permission:can_modify': 'true', 'access_permission:can_print': 'true', 'access_permission:can_print_degraded': 'true', 'access_permission:extract_content': 'true', 'access_permission:extract_for_accessibility': 'true', 'access_permission:fill_in_form': 'true', 'access_permission:modify_annotations': 'true', 'created': '2020-07-11T09:07:21Z', 'dc:format': 'application/pdf; version=1.4', 'dcterms:created': '2020-07-11T09:07:21Z', 'meta:creation-date': '2020-07-11T09:07:21Z', 'pdf:PDFVersion': '1.4', 'pdf:charsPerPage': ['1384', '1509', '1508', '1460', '1471', '1394', '1440', '1471', '1432', '1548', '1459', '1014'], 'pdf:docinfo:created': '2020-07-11T09:07:21Z', 'pdf:docinfo:creator_tool': 'DocuWorks PDF Driver 7.0.4', 'pdf:docinfo:producer': 'DocuWorks PDF Build 9', 'pdf:encrypted': 'false', 'pdf:hasMarkedContent': 'false', 'pdf:hasXFA': 'false', 'pdf:hasXMP': 'false', 'pdf:unmappedUnicodeCharsPerPage': ['0', '0', '0', '0', '0', '0', '0', '0', '0', '0', '0', '0'], 'producer': 'DocuWorks PDF Build 9', 'resourceName': "b'340395.pdf'", 'xmp:CreatorTool': 'DocuWorks PDF Driver 7.0.4', 'xmpTPg:NPages': '12'}
comments powered by Disqus