tools/ppt_pdf.ipynb

{
 "cells": [
  {
   "cell_type": "markdown",
   "id": "61d175fa-88a5-43fc-808c-c6ad6d06f67c",
   "metadata": {},
   "source": [
    "# PowerpointおよびPDF資料よりデータ抽出\n",
    "\n",
    "Date: 2023/11/16, 2024/04/28(PyMuPDF追加)"
   ]
  },
  {
   "cell_type": "markdown",
   "id": "123b88a8-52e8-4536-b3cb-877c45a883e9",
   "metadata": {},
   "source": [
    "## Powerpoint編"
   ]
  },
  {
   "cell_type": "code",
   "execution_count": 1,
   "id": "fe3570ab-f1d9-442b-94fc-d958e5c6e179",
   "metadata": {},
   "outputs": [],
   "source": [
    "#!pip3 install python-pptx"
   ]
  },
  {
   "cell_type": "code",
   "execution_count": 2,
   "id": "865711dc-c617-410d-aea3-f4f2536b38c7",
   "metadata": {},
   "outputs": [],
   "source": [
    "from pptx import Presentation\n",
    "\n",
    "# 私が作成した資料\n",
    "filename='../material_samples/MyPhotosアプリ概要設計書.pptx'"
   ]
  },
  {
   "cell_type": "code",
   "execution_count": 3,
   "id": "20dcf980-44e1-43be-81c6-7d103778065b",
   "metadata": {},
   "outputs": [],
   "source": [
    "p = Presentation(filename)"
   ]
  },
  {
   "cell_type": "markdown",
   "id": "02508ab3-93ba-49db-b2f8-9d882d1ca830",
   "metadata": {},
   "source": [
    "### テキスト抽出"
   ]
  },
  {
   "cell_type": "code",
   "execution_count": 4,
   "id": "9e790988-ef80-4966-911f-d595a21a3f5a",
   "metadata": {},
   "outputs": [
    {
     "name": "stdout",
     "output_type": "stream",
     "text": [
      "--- Page 1\n",
      "Github.comでの個人プロジェクト\n",
      "MyPhotosアプリ\n",
      "概要設計書 Version 1.2\n",
      "(Salesforce Platform上で開発)\n",
      "2022/10/29\n",
      "https://github.com/araobp/myphotos\n",
      "--- Page 2\n",
      "MyPhotosアプリの概要\n",
      "MyPhotosアプリはSalesforce上で動作するアプリケーションである。\n",
      "Salesforce開発者エディション上での利用を想定\n",
      "かつ、Salesforce Platform Userプロファイルで利用可能（なはず、検証要）\n",
      "フロントエンドはデスクトップに加えモバイル（Android/iOS）でも動作する\n",
      "モバイルで利用するには、Salesforceアプリをスマートフォンやタブレットへ事前にインストールする必要がある\n",
      "主な用途は位置情報に紐づいた写真付きメモの記録である。\n",
      "写真アプリとして利用\n",
      "Leaflet（地図）上へ記録した位置をマーカーで展開して\n",
      "特定の場所に紐づいたタスク管理も行える。\n",
      "特定のスーパーで特定の商品を買うといったリマインダー（SalesforceのTaskで管理）\n",
      "特定の場所に紐づいたイベント予定の記録（SalesforceのEventで管理）\n",
      "\n",
      "‹#›\n",
      "--- Page 3\n",
      "ストレージ種別\n",
      "‹#›\n",
      "開発者エディションのストレージ容量は小さいが、JPEG写真のサイズを数百Kバイト以下へ抑えることで100枚以上の写真を保存可能。画質の方も実用上は問題なし。\n",
      "--- Page 4\n",
      "MyPhotosアプリのタブ構成\n",
      "‹#›\n",
      "--- Page 5\n",
      "地図と位置情報\n",
      "‹#›\n",
      "--- Page 6\n",
      "Leaflet（JavaScript地図ライブラリ）\n",
      "https://leafletjs.com/\n",
      "Leafletを利用しメモの記録位置を地図上のマーカー示す\n",
      "マーカークリック時、メモ、日付、写真のサムネイルを吹き出しに表示する\n",
      "LWCのセキュリティー制約上、静的リソースとしてLeafletをLWCへ取り込む\n",
      "‹#›\n",
      "--- Page 7\n",
      "位置情報の取得とユーザ位置情報の登録\n",
      "MyPhotosアプリを起動時（Cameraタブ、Mapタブ）、LWC内でブラウザより位置情報を取得する\n",
      "navigator.geolocation\n",
      "Salesforceの”User”オブジェクトへ位置情報を登録する\n",
      "”Map”タブか”Camera”タブを開いた時、ブラウザより位置情報を取得し、”User”オブジェクトの”Geolocation__c”フィールドへ位置情報を登録する。\n",
      "\n",
      "‹#›\n",
      "--- Page 8\n",
      "位置情報をアドレスへ変換\n",
      "Nominatim (https://nominatim.org/) のウエブサービスを利用\n",
      "Apexよりコールアウトし位置情報をアドレスへ変換\n",
      "\n",
      "\n",
      "‹#›\n",
      "NominatimCallout.cls\n",
      "LWC\n",
      "Nominatim API\n",
      "Geolocation\n",
      "Street address\n",
      "Geolocation\n",
      "Street address\n",
      "--- Page 9\n",
      "Remote Site Settings\n",
      "‹#›\n",
      "--- Page 10\n",
      "オブジェクト定義\n",
      "‹#›\n",
      "--- Page 11\n",
      "MyPhotosに関係する標準オブジェクト\n",
      "‹#›\n",
      "--- Page 12\n",
      "MyPhotos向けに定義したカスタムオブジェクト\n",
      "‹#›\n",
      "--- Page 13\n",
      "ER図\n",
      "‹#›\n",
      "--- Page 14\n",
      "Record__c\n",
      "‹#›\n",
      "--- Page 15\n",
      "Place__c\n",
      "‹#›\n",
      "--- Page 16\n",
      "User（カスタムフィールド追加）\n",
      "‹#›\n",
      "--- Page 17\n",
      "Record__cのレコードタイプ\n",
      "‹#›\n",
      "※ Release 1.0ではRecord__cのリストでレコードの分類目的の利用に留まる。\n",
      "--- Page 18\n",
      "ユーザとRecord__cやPlace__cの距離関係\n",
      "‹#›\n",
      "Distance__cの値は以下のFormulaフィールドで計算\n",
      "Round(Distance(Geolocation__c, $User.Geolocation__c, 'km'),2)\n",
      "Distance__cの値は以下のFormulaフィールドで計算\n",
      "Round(Distance(Geolocation__c, $User.Geolocation__c, 'km'),2)\n",
      "Geolocation__cへ\n",
      "MyPhotosアプリ起動時のユーザ位置を登録\n",
      "--- Page 19\n",
      "Record__cと写真データの関係\n",
      "‹#›\n",
      "写真データ(jpeg)\n",
      "--- Page 20\n",
      "Place__cと標準オブジェクト(Task, Event)との関係\n",
      "‹#›\n",
      "--- Page 21\n",
      "写真のURL\n",
      "Apex “RecordObjec.cls” にて、Record__cオブジェクトのレコードを生成時に以下のURLをImageURL__cフィールドへ書き込み：\n",
      "‘/sfc/servlet.shepherd/version/download’ + contentVersionId\n",
      "※contentVersionIdはConentVersionオブジェクトのIdフィールド\n",
      "‹#›\n",
      "--- Page 22\n",
      "写真のサムネイル\n",
      "Record__cオブジェクトのImage__cフィールド(Formulaフィールド)にて以下を計算：\n",
      "Image(ImageURL__c ,\"Image\", 50,50)\n",
      "‹#›\n",
      "--- Page 23\n",
      "コード\n",
      "‹#›\n",
      "--- Page 24\n",
      "カスタムApexコード\n",
      "‹#›\n",
      "--- Page 25\n",
      "カスタム Lightning Web Components\n",
      "‹#›\n",
      "--- Page 26\n",
      "“camera” LWCにおける写真撮影\n",
      "‹#›\n",
      "<label class=\"slds-button slds-button_brand\">\n",
      "<input style=\"display: none;\" class=\"slds-col slds-p-around_small\" type=\"file\" accept=\"image/*\"\n",
      "capture=\"environment\" onchange={handleCapture} />\n",
      "Camera\n",
      "</label>\n",
      "HTML5の<input/>エレメントより、iOS/Androidのネイティブカメラアプリをキャプチャーデバイスとして起動する。\n",
      "--- Page 27\n",
      "メッセージチャネル\n",
      "‹#›\n",
      "picturesMap\n",
      "imageViewer\n",
      "name\n",
      "imageURL\n",
      "LWC\n",
      "LWC\n",
      "--- Page 28\n",
      "パッケージ配布形態\n",
      "‹#›\n",
      "--- Page 29\n",
      "配布形態\n",
      "‹#›\n",
      "Github.comでソースコード配布\n",
      "https://Github.com/araobp/myphotos\n",
      "リポジトリをクローンし、sfdx CLIを使って他の組織へアップロード\n",
      "Salesforceへ未管理パッケージとしてインストール\n",
      "以下のリンクをクリックし、Salesforceログイン画面でユーザ名とパスワード入力\n",
      "https://login.salesforce.com/?ec=302&startURL=%2Fpackaging%2FinstallPackage.apexp%3Fp0%3D04t5i000000Z5f6\n",
      "\n"
     ]
    }
   ],
   "source": [
    "page_num = 1\n",
    "for slide in p.slides:\n",
    "    print(f'--- Page {page_num}')\n",
    "    page_num += 1\n",
    "    for shape in slide.shapes:\n",
    "        if hasattr(shape, \"text\"):\n",
    "            print(shape.text)"
   ]
  },
  {
   "cell_type": "markdown",
   "id": "7824fe7b-a9e0-4207-a631-a4d530eaf542",
   "metadata": {},
   "source": [
    "## PDF編 -- pypdf"
   ]
  },
  {
   "cell_type": "code",
   "execution_count": 5,
   "id": "cc427757-3ae1-4e7a-b18f-8516ea01927d",
   "metadata": {},
   "outputs": [
    {
     "name": "stdout",
     "output_type": "stream",
     "text": [
      "Requirement already satisfied: pypdf in /Library/Frameworks/Python.framework/Versions/3.11/lib/python3.11/site-packages (3.17.1)\n",
      "\n",
      "\u001b[1m[\u001b[0m\u001b[34;49mnotice\u001b[0m\u001b[1;39;49m]\u001b[0m\u001b[39;49m A new release of pip is available: \u001b[0m\u001b[31;49m23.1.2\u001b[0m\u001b[39;49m -> \u001b[0m\u001b[32;49m24.0\u001b[0m\n",
      "\u001b[1m[\u001b[0m\u001b[34;49mnotice\u001b[0m\u001b[1;39;49m]\u001b[0m\u001b[39;49m To update, run: \u001b[0m\u001b[32;49mpip3 install --upgrade pip\u001b[0m\n"
     ]
    }
   ],
   "source": [
    "!pip3 install pypdf"
   ]
  },
  {
   "cell_type": "code",
   "execution_count": 12,
   "id": "d78ebeac-0d58-4ce6-b3f6-fc1e80afc8b9",
   "metadata": {},
   "outputs": [
    {
     "data": {
      "text/plain": [
       "29"
      ]
     },
     "execution_count": 12,
     "metadata": {},
     "output_type": "execute_result"
    }
   ],
   "source": [
    "from pypdf import PdfReader\n",
    "\n",
    "filename_pdf='../material_samples/MyPhotosアプリ概要設計書.pdf'\n",
    "\n",
    "reader = PdfReader(filename_pdf)\n",
    "number_of_pages = len(reader.pages)\n",
    "number_of_pages"
   ]
  },
  {
   "cell_type": "code",
   "execution_count": 7,
   "id": "f9e4498d-3f9d-4378-8036-443acae3e092",
   "metadata": {},
   "outputs": [
    {
     "name": "stdout",
     "output_type": "stream",
     "text": [
      "--- Page 1\n",
      "Github.com での個人プロジェクト \n",
      "MyPhotos アプリ \n",
      "概要設計書  Version 1.2 \n",
      "(Salesforce Platform 上で開発 )\n",
      "2022/10/29 \n",
      "https://github.com/araobp/myphotos \n",
      "--- Page 2\n",
      "MyPhotos アプリの概要 \n",
      "●MyPhotos アプリは Salesforce 上で動作するアプリケーションである。 \n",
      "●Salesforce 開発者エディション上での利用を想定 \n",
      "○ かつ、 Salesforce Platform User プロファイルで利用可能 （なはず、検証要） \n",
      "● フロントエンドはデスクトップに加えモバイル（ Android/iOS ）でも動作する \n",
      "○ モバイルで利用するには、 Salesforce アプリをスマートフォンやタブレットへ事前にインストールする\n",
      "必要がある \n",
      "● 主な用途は位置情報に紐づいた写真付きメモの記録である。 \n",
      "○ 写真アプリとして利用 \n",
      "○Leaflet （地図）上へ記録した位置をマーカーで展開して \n",
      "● 特定の場所に紐づいたタスク管理も行える。 \n",
      "○ 特定のスーパーで特定の商品を買うといったリマインダー（ Salesforce のTask で管理） \n",
      "○ 特定の場所に紐づいたイベント予定の記録（ Salesforce のEvent で管理） \n",
      "2\n",
      "--- Page 3\n",
      "ストレージ種別 \n",
      "3ストレージ種別 容量 データ \n",
      "データストレージ 5MB 写真に紐づけたメモ、位置情\n",
      "報、タスク、イベント等を保存 \n",
      "ファイルストレージ 20MB 写真データ (JPEG) 保存開発者エディションのストレージ容量は小さいが、 JPEG 写真のサイズを数百 K バイト以下へ抑\n",
      "えることで 100 枚以上の写真を保存可能。画質の方も実用上は問題なし。 \n",
      "--- Page 4\n",
      "MyPhotos アプリのタブ構成 \n",
      "4タブ 説明\n",
      "Map 地図上にメモ記録位置をマーカーで示すアプ\n",
      "リ\n",
      "Camera 写真＆メモ記録アプリ \n",
      "Record 写真＆メモ記録 (Record) のレコードページ \n",
      "Place 登録済みの場所 (Place) のレコードページ \n",
      "Task タスクのレコードページ \n",
      "--- Page 5\n",
      "地図と位置情報 \n",
      "5\n",
      "--- Page 6\n",
      "Leaflet （JavaScript 地図ライブラリ） \n",
      "●https://leafletjs.com/ \n",
      "●Leaflet を利用しメモの記録位置を地図上のマーカー示す \n",
      "○ マーカークリック時、メモ、日付、写真のサムネイルを吹き出しに表示する \n",
      "●LWC のセキュリティー制約上、静的リソースとして Leaflet をLWC へ取り込む \n",
      "6\n",
      "--- Page 7\n",
      "位置情報の取得とユーザ位置情報の登録 \n",
      "●MyPhotos アプリを起動時（ Camera タブ、 Map タブ）、 LWC 内でブラウザより位置情\n",
      "報を取得する \n",
      "○navigator.geolocation \n",
      "●Salesforce の”User” オブジェクトへ位置情報を登録する \n",
      "○”Map” タブか ”Camera” タブを開いた時、ブラウザより位置情報を取得し、 ”User” オブジェクト\n",
      "の”Geolocation__c” フィールドへ位置情報を登録する。 \n",
      "7\n",
      "--- Page 8\n",
      "位置情報をアドレスへ変換 \n",
      "●Nominatim ( https://nominatim.org/ ) のウエブサービスを利用 \n",
      "●Apex よりコールアウトし位置情報をアドレスへ変換 \n",
      "8NominatimCallout.cls LWC Nominatim API Geolocation \n",
      "Street \n",
      "address Geolocation \n",
      "Street \n",
      "address \n",
      "--- Page 9\n",
      "Remote Site Settings \n",
      "9Remote Site Name Remote Site URL \n",
      "Nominatim https://nominatim.openstreetmap.org \n",
      "--- Page 10\n",
      "オブジェクト定義 \n",
      "10\n",
      "--- Page 11\n",
      "MyPhotos に関係する標準オブジェクト \n",
      "カスタムオブジェクト 説明\n",
      "User 位置情報に紐づいたメモを記録するためのオ\n",
      "ブジェクト。 \n",
      "MyPhotos アプリでは、カスタムフィール\n",
      "ド”Geolocation__c” へユーザの位置情報を保\n",
      "持する。 \n",
      "Task 特定の場所を記録するためのオブジェクト \n",
      "ContenttVersion ファイル実体 \n",
      "ContentDocument ファイルを保持するオブジェクト \n",
      "ContentDocumentLink ファイルと他のオブジェクトを関連付けるため\n",
      "のオブジェクト \n",
      "11\n",
      "--- Page 12\n",
      "MyPhotos 向けに定義したカスタムオブジェクト \n",
      "カスタムオブジェクト 説明\n",
      "Record__c 位置情報に紐づいたメモを記録するためのオ\n",
      "ブジェクト \n",
      "Place__c 特定の場所を記録するためのオブジェクト \n",
      "12\n",
      "--- Page 13\n",
      "ER 図\n",
      "13\n",
      "\n",
      "--- Page 14\n",
      "Record__c \n",
      "14Field Label Field Name Data Type 説明\n",
      "Address Address__c Text(200) アドレス \n",
      "Distance Distance__c Formula(Number) ユーザ現在位置までの距離 \n",
      "Geolocation Geolocation__c Geolocation 位置情報 \n",
      "Image Image__c Formula(Text) 写真のサムネイル \n",
      "ImageURL ImageURL__c URL(255) 写真の URL\n",
      "Memo Memo__c Text Area(255) メモ\n",
      "Place Place__c Lookup(Place) Place オブジェクトへの参照 \n",
      "Record Name Name Text(80) そのメモの名前（場所の名前等） \n",
      "RecordType RecordTypeId Record Type レコードタイプ \n",
      "Timestamp Timestamp__c Date/Time メモを記録した時間 \n",
      "UUID uuid__c Text(36) 写真に紐づく UUID \n",
      "Valid Valid__c Checkbox そのメモの有効性 \n",
      "--- Page 15\n",
      "Place__c \n",
      "15Field Label Field Name Data Type 説明\n",
      "Address Address__c Text(200) その場所のアドレス \n",
      "Distance Distance__c Formula(Number) ユーザ現在位置までの距\n",
      "離\n",
      "Geolocation Geolocation__c Geolocation その場所の位置情報 \n",
      "Place Name Name Text(80) その場所の名前 \n",
      "--- Page 16\n",
      "User （カスタムフィールド追加） \n",
      "16Field Label Field Name Data Type 説明\n",
      "Geolocation Geolocation__c Geolocation そのユーザの現在位置 \n",
      "--- Page 17\n",
      "Record__c のレコードタイプ \n",
      "17Record Type \n",
      "Cafe カフェに分類されるレコード \n",
      "Mall モールに分類されるレコード \n",
      "Public Transport 公共交通機関に分類されるレコード \n",
      "Restaurant レストランに分類されるレコード \n",
      "Supermarket スーパーに分類されるレコード \n",
      "Uncategorized 未分類 \n",
      "※ Release 1.0 ではRecord__c のリストでレコードの分類目的の利用に留まる。 \n",
      "--- Page 18\n",
      "ユーザと Record__c やPlace__c の距離関係 \n",
      "18Geolocation__c \n",
      "User \n",
      "Distance__c \n",
      "Geolocation__c \n",
      "Record__c \n",
      "Distance__c \n",
      "Geolocation__c \n",
      "Place__c \n",
      "Distance__c の値は以下の Formula フィールドで計算 \n",
      "Round(Distance(Geolocation__c, $User.Geolocation__c, 'km'),2) Distance__c の値は以下の Formula フィールドで計算 \n",
      "Round(Distance(Geolocation__c, $User.Geolocation__c, 'km'),2) Geolocation__c へ\n",
      "MyPhotos アプリ起動時のユーザ位置を\n",
      "登録\n",
      "--- Page 19\n",
      "Record__c と写真データの関係 \n",
      "19\n",
      "IdContentDocument \n",
      "LinkedEntityId \n",
      "ContentDocumentId ContentDocumentLink \n",
      "Id\n",
      "ContentDocumentId \n",
      "ContentVersion \n",
      "Id\n",
      "Record__c \n",
      "写真データ (jpeg) \n",
      "--- Page 20\n",
      "Place__c と標準オブジェクト (Task, Event) との関係 \n",
      "20\n",
      "Place__c \n",
      "Task\n",
      "Event \n",
      "--- Page 21\n",
      "写真の URL\n",
      "Apex “RecordObjec.cls” にて、 Record__c オブジェクトのレコードを生成時に\n",
      "以下の URL をImageURL__c フィールドへ書き込み： \n",
      "‘/sfc/servlet.shepherd/version/download’ + contentVersionId \n",
      "※contentVersionId はConentVersion オブジェクトの Id フィールド \n",
      "21\n",
      "--- Page 22\n",
      "写真のサムネイル \n",
      "Record__c オブジェクトの Image__c フィールド (Formula フィールド ) にて以下を計算： \n",
      "Image(ImageURL__c ,\"Image\", 50,50) \n",
      "22\n",
      "--- Page 23\n",
      "コード \n",
      "23\n",
      "--- Page 24\n",
      "カスタム Apex コード \n",
      "24Apex クラス 機能 Unit テスト \n",
      "FileUploader.cls ファイルのアップロードおよび削除するためのクラス。 FileUploaderTest.cls \n",
      "NominatimCallout.cls Nominatim ウエブサービスへアクセスし、位置情報をアドレスへ変換するためのクラス。 NominatimCalloutTest.cls \n",
      "NominatimCalloutMockImpl.cls \n",
      "PlaceCheck.cls 既に、その位置に Place 登録されているかどうかチェックするためのクラス。 PlaceCheckTest.cls \n",
      "PlaceObject.cls Place__c のレコードを作成、および、 Place__c に関連した操作を行うためのクラス。 PlaceObjectTest.cls \n",
      "RecordObject.cls Record__c のレコードを作成、および、 Record__c に関連した操作を行うためのクラス。 RecordObjectTest.cls \n",
      "TaskObject.cls そのPlace に紐づけられた Task の取得やステータス更新操作を行うためのクラス。 TaskObjectTest.cls \n",
      "UserObject.cls User オブジェクトのカスタムフィールド Geolocation__c を更新するためのクラス。 UserObjectTest.cls \n",
      "--- Page 25\n",
      "カスタム  Lightning Web Components \n",
      "25LWC 機能\n",
      "camera 位置情報に紐づいた写真付きメモを作成しする。 iOS/Android のモバイルデバイスで利用時には、ネイティブカメラによる写真撮影\n",
      "を行う。また、 camera 起動時、ユーザの現在位置を User オブジェクトへ登録する。 \n",
      "pictureMap Record__c のレコードページや Place__c のレコーデページにて、レコードの位置を地図 (Leaflet) 上で表示する機能 \n",
      "picturesMap ユーザ現在位置から一定の半径以内の Record__c のレコードを、地図 (Leaflet) 上へマーカーで表示。また、 picturesMap 起動時、\n",
      "ユーザの現在位置を User オブジェクトへ登録する。 \n",
      "fileQuickAction “Delete Record” ボタン押下により起動される quick action で、Record__c と写真 (ContentDocument) の両方を削除する機能。 \n",
      "addPlace Record__c のレコードページにおいて、そのレコードの Name, Geolocation__c をPlace__c のレコードとして登録する。 \n",
      "imageViewer Record__c のImageURL フィールドから写真の URL を取得し、その URL に存在する写真データ (jpeg) を画像で表示する。 \n",
      "taskHere Record__c のレコードページにおいて、そのレコードに関連する Task のレコード一覧を表示する。また、それぞれのタスクのチェック\n",
      "ボックスをチェックすることによりタスクを完了させることが出来る。 \n",
      "gps GPS ユーティリティー。ブラウザの位置情報機能よりユーザ現在位置を取得し、ユーザの現在位置を User オブジェクトへ登録する。 \n",
      "util その他ユーティリティー。 \n",
      "--- Page 26\n",
      "“camera” LWC における写真撮影 \n",
      "26<label class=\"slds-button slds-button_brand\"> \n",
      "<input style=\"display: none;\" class=\"slds-col slds-p-around_small\" type=\"file\" accept=\"image/*\" \n",
      "capture=\"environment\" onchange={handleCapture} /> \n",
      "Camera \n",
      "</label> HTML5 の<input/> エレメントより、 iOS/Android のネイティブカメラアプリをキャプチャーデバイスとして起動す\n",
      "る。\n",
      " Width Height \n",
      "写真サイズ  Width x Height 432 ピクセル ピクセル数はスマートフォンのカメ\n",
      "ラアプリによる \n",
      "--- Page 27\n",
      "メッセージチャネル \n",
      "27Message Channel Field name 説明\n",
      "ImageURL name 写真の名称 \n",
      "imageURL 写真の URL\n",
      "picturesMap imageViewer name \n",
      "imageURL LWC LWC \n",
      "--- Page 28\n",
      "パッケージ配布形態 \n",
      "28\n",
      "--- Page 29\n",
      "配布形態 \n",
      "29●Github.com でソースコード配布 \n",
      "https://Github.com/araobp/myphotos \n",
      "リポジトリをクローンし、 sfdx CLI を使って他の組織へアップロード \n",
      "●Salesforce へ未管理パッケージとしてインストール \n",
      "以下のリンクをクリックし、 Salesforce ログイン画面でユーザ名とパスワード入力 \n",
      "https://login.salesforce.com/?ec=302&startURL=%2Fpackaging%2FinstallPackage.\n",
      "apexp%3Fp0%3D04t5i000000Z5f6 \n",
      "\n"
     ]
    }
   ],
   "source": [
    "page_num = 1\n",
    "for page in reader.pages:\n",
    "    print(f'--- Page {page_num}')\n",
    "    page_num += 1\n",
    "    text = page.extract_text()\n",
    "    print(text)"
   ]
  },
  {
   "cell_type": "markdown",
   "id": "51a09726-54e6-491b-b59a-4afde80565fc",
   "metadata": {},
   "source": [
    "## PDF編 -- PyMuPDF"
   ]
  },
  {
   "cell_type": "code",
   "execution_count": 8,
   "id": "3767a612-76a3-4027-8563-925003cd6790",
   "metadata": {},
   "outputs": [
    {
     "name": "stdout",
     "output_type": "stream",
     "text": [
      "PyMuPDF 1.24.2: Python bindings for the MuPDF 1.24.1 library (rebased implementation).\n",
      "Python 3.11 running on darwin (64-bit).\n",
      "\n"
     ]
    }
   ],
   "source": [
    "#!pip3 install pymupdf\n",
    "# 注意：pip3 install fitzでなく pip3 install pymupdf とすること。\n",
    "import fitz\n",
    "print(fitz.__doc__)"
   ]
  },
  {
   "cell_type": "code",
   "execution_count": 9,
   "id": "4146b0f8-42f3-490d-921a-641f132244e1",
   "metadata": {},
   "outputs": [],
   "source": [
    "filename_pdf='../material_samples/MyPhotosアプリ概要設計書.pdf'\n",
    "doc = fitz.open(filename_pdf)"
   ]
  },
  {
   "cell_type": "code",
   "execution_count": 10,
   "id": "77f61ca5-2739-47ba-8461-ba6138877649",
   "metadata": {},
   "outputs": [
    {
     "name": "stdout",
     "output_type": "stream",
     "text": [
      "--- Page 1\n",
      "Github.comでの個人プロジェクト\n",
      "MyPhotosアプリ\n",
      "概要設計書 Version 1.2\n",
      "(Salesforce Platform上で開発)\n",
      "2022/10/29\n",
      "https://github.com/araobp/myphotos\n",
      "\n",
      "--- Page 2\n",
      "MyPhotosアプリの概要\n",
      "●\n",
      "MyPhotosアプリはSalesforce上で動作するアプリケーションである。\n",
      "●\n",
      "Salesforce開発者エディション上での利用を想定\n",
      "○\n",
      "かつ、Salesforce Platform Userプロファイルで利用可能（なはず、検証要）\n",
      "●\n",
      "フロントエンドはデスクトップに加えモバイル（Android/iOS）でも動作する\n",
      "○\n",
      "モバイルで利用するには、Salesforceアプリをスマートフォンやタブレットへ事前にインストールする\n",
      "必要がある\n",
      "●\n",
      "主な用途は位置情報に紐づいた写真付きメモの記録である。\n",
      "○\n",
      "写真アプリとして利用\n",
      "○\n",
      "Leaflet（地図）上へ記録した位置をマーカーで展開して\n",
      "●\n",
      "特定の場所に紐づいたタスク管理も行える。\n",
      "○\n",
      "特定のスーパーで特定の商品を買うといったリマインダー（SalesforceのTaskで管理）\n",
      "○\n",
      "特定の場所に紐づいたイベント予定の記録（SalesforceのEventで管理）\n",
      "2\n",
      "\n",
      "--- Page 3\n",
      "ストレージ種別\n",
      "3\n",
      "ストレージ種別\n",
      "容量\n",
      "データ\n",
      "データストレージ\n",
      "5MB\n",
      "写真に紐づけたメモ、位置情\n",
      "報、タスク、イベント等を保存\n",
      "ファイルストレージ\n",
      "20MB\n",
      "写真データ(JPEG)保存\n",
      "開発者エディションのストレージ容量は小さいが、\n",
      "JPEG写真のサイズを数百Kバイト以下へ抑\n",
      "えることで100枚以上の写真を保存可能。画質の方も実用上は問題なし。\n",
      "\n",
      "--- Page 4\n",
      "MyPhotosアプリのタブ構成\n",
      "4\n",
      "タブ\n",
      "説明\n",
      "Map\n",
      "地図上にメモ記録位置をマーカーで示すアプ\n",
      "リ\n",
      "Camera\n",
      "写真＆メモ記録アプリ\n",
      "Record\n",
      "写真＆メモ記録(Record)のレコードページ\n",
      "Place\n",
      "登録済みの場所(Place)のレコードページ\n",
      "Task\n",
      "タスクのレコードページ\n",
      "\n",
      "--- Page 5\n",
      "地図と位置情報\n",
      "5\n",
      "\n",
      "--- Page 6\n",
      "Leaflet（JavaScript地図ライブラリ）\n",
      "●\n",
      "https://leafletjs.com/\n",
      "●\n",
      "Leafletを利用しメモの記録位置を地図上のマーカー示す\n",
      "○\n",
      "マーカークリック時、メモ、日付、写真のサムネイルを吹き出しに表示する\n",
      "●\n",
      "LWCのセキュリティー制約上、静的リソースとしてLeafletをLWCへ取り込む\n",
      "6\n",
      "\n",
      "--- Page 7\n",
      "位置情報の取得とユーザ位置情報の登録\n",
      "●\n",
      "MyPhotosアプリを起動時（Cameraタブ、Mapタブ）、LWC内でブラウザより位置情\n",
      "報を取得する\n",
      "○\n",
      "navigator.geolocation\n",
      "●\n",
      "Salesforceの”User”オブジェクトへ位置情報を登録する\n",
      "○\n",
      "”Map”タブか”Camera”タブを開いた時、ブラウザより位置情報を取得し、”User”オブジェクト\n",
      "の”Geolocation__c”フィールドへ位置情報を登録する。\n",
      "7\n",
      "\n",
      "--- Page 8\n",
      "位置情報をアドレスへ変換\n",
      "●\n",
      "Nominatim (https://nominatim.org/) のウエブサービスを利用\n",
      "●\n",
      "Apexよりコールアウトし位置情報をアドレスへ変換\n",
      "8\n",
      "NominatimCallout.cls\n",
      "LWC\n",
      "Nominatim API\n",
      "Geolocation\n",
      "Street \n",
      "address\n",
      "Geolocation\n",
      "Street \n",
      "address\n",
      "\n",
      "--- Page 9\n",
      "Remote Site Settings\n",
      "9\n",
      "Remote Site Name\n",
      "Remote Site URL\n",
      "Nominatim\n",
      "https://nominatim.openstreetmap.org\n",
      "\n",
      "--- Page 10\n",
      "オブジェクト定義\n",
      "10\n",
      "\n",
      "--- Page 11\n",
      "MyPhotosに関係する標準オブジェクト\n",
      "カスタムオブジェクト\n",
      "説明\n",
      "User\n",
      "位置情報に紐づいたメモを記録するためのオ\n",
      "ブジェクト。\n",
      "MyPhotosアプリでは、カスタムフィール\n",
      "ド”Geolocation__c”へユーザの位置情報を保\n",
      "持する。\n",
      "Task\n",
      "特定の場所を記録するためのオブジェクト\n",
      "ContenttVersion\n",
      "ファイル実体\n",
      "ContentDocument\n",
      "ファイルを保持するオブジェクト\n",
      "ContentDocumentLink\n",
      "ファイルと他のオブジェクトを関連付けるため\n",
      "のオブジェクト\n",
      "11\n",
      "\n",
      "--- Page 12\n",
      "MyPhotos向けに定義したカスタムオブジェクト\n",
      "カスタムオブジェクト\n",
      "説明\n",
      "Record__c\n",
      "位置情報に紐づいたメモを記録するためのオ\n",
      "ブジェクト\n",
      "Place__c\n",
      "特定の場所を記録するためのオブジェクト\n",
      "12\n",
      "\n",
      "--- Page 13\n",
      "ER図\n",
      "13\n",
      "\n",
      "--- Page 14\n",
      "Record__c\n",
      "14\n",
      "Field Label\n",
      "Field Name\n",
      "Data Type\n",
      "説明\n",
      "Address\n",
      "Address__c\n",
      "Text(200)\n",
      "アドレス\n",
      "Distance\n",
      "Distance__c\n",
      "Formula(Number)\n",
      "ユーザ現在位置までの距離\n",
      "Geolocation\n",
      "Geolocation__c\n",
      "Geolocation\n",
      "位置情報\n",
      "Image\n",
      "Image__c\n",
      "Formula(Text)\n",
      "写真のサムネイル\n",
      "ImageURL\n",
      "ImageURL__c\n",
      "URL(255)\n",
      "写真のURL\n",
      "Memo\n",
      "Memo__c\n",
      "Text Area(255)\n",
      "メモ\n",
      "Place\n",
      "Place__c\n",
      "Lookup(Place)\n",
      "Placeオブジェクトへの参照\n",
      "Record Name\n",
      "Name\n",
      "Text(80)\n",
      "そのメモの名前（場所の名前等）\n",
      "RecordType\n",
      "RecordTypeId\n",
      "Record Type\n",
      "レコードタイプ\n",
      "Timestamp\n",
      "Timestamp__c\n",
      "Date/Time\n",
      "メモを記録した時間\n",
      "UUID\n",
      "uuid__c\n",
      "Text(36)\n",
      "写真に紐づくUUID\n",
      "Valid\n",
      "Valid__c\n",
      "Checkbox\n",
      "そのメモの有効性\n",
      "\n",
      "--- Page 15\n",
      "Place__c\n",
      "15\n",
      "Field Label\n",
      "Field Name\n",
      "Data Type\n",
      "説明\n",
      "Address\n",
      "Address__c\n",
      "Text(200)\n",
      "その場所のアドレス\n",
      "Distance\n",
      "Distance__c\n",
      "Formula(Number)\n",
      "ユーザ現在位置までの距\n",
      "離\n",
      "Geolocation\n",
      "Geolocation__c\n",
      "Geolocation\n",
      "その場所の位置情報\n",
      "Place Name\n",
      "Name\n",
      "Text(80)\n",
      "その場所の名前\n",
      "\n",
      "--- Page 16\n",
      "User（カスタムフィールド追加）\n",
      "16\n",
      "Field Label\n",
      "Field Name\n",
      "Data Type\n",
      "説明\n",
      "Geolocation\n",
      "Geolocation__c\n",
      "Geolocation\n",
      "そのユーザの現在位置\n",
      "\n",
      "--- Page 17\n",
      "Record__cのレコードタイプ\n",
      "17\n",
      "Record Type\n",
      "Cafe\n",
      "カフェに分類されるレコード\n",
      "Mall\n",
      "モールに分類されるレコード\n",
      "Public Transport\n",
      "公共交通機関に分類されるレコード\n",
      "Restaurant\n",
      "レストランに分類されるレコード\n",
      "Supermarket\n",
      "スーパーに分類されるレコード\n",
      "Uncategorized\n",
      "未分類\n",
      "※ Release 1.0ではRecord__cのリストでレコードの分類目的の利用に留まる。\n",
      "\n",
      "--- Page 18\n",
      "ユーザとRecord__cやPlace__cの距離関係\n",
      "18\n",
      "Geolocation__c\n",
      "User\n",
      "Distance__c\n",
      "Geolocation__c\n",
      "Record__c\n",
      "Distance__c\n",
      "Geolocation__c\n",
      "Place__c\n",
      "Distance__cの値は以下のFormulaフィールドで計算\n",
      "Round(Distance(Geolocation__c, $User.Geolocation__c, 'km'),2)\n",
      "Distance__cの値は以下のFormulaフィールドで計算\n",
      "Round(Distance(Geolocation__c, $User.Geolocation__c, 'km'),2)\n",
      "Geolocation__cへ\n",
      "MyPhotosアプリ起動時のユーザ位置を\n",
      "登録\n",
      "\n",
      "--- Page 19\n",
      "Record__cと写真データの関係\n",
      "19\n",
      "Id\n",
      "ContentDocument\n",
      "LinkedEntityId\n",
      "ContentDocumentId\n",
      "ContentDocumentLink\n",
      "Id\n",
      "ContentDocumentId\n",
      "ContentVersion\n",
      "Id\n",
      "Record__c\n",
      "写真データ(jpeg)\n",
      "\n",
      "--- Page 20\n",
      "Place__cと標準オブジェクト(Task, Event)との関係\n",
      "20\n",
      "Place__c\n",
      "Task\n",
      "Event\n",
      "\n",
      "--- Page 21\n",
      "写真のURL\n",
      "Apex “RecordObjec.cls” にて、Record__cオブジェクトのレコードを生成時に\n",
      "以下のURLをImageURL__cフィールドへ書き込み：\n",
      "‘/sfc/servlet.shepherd/version/download’ + contentVersionId\n",
      "※contentVersionIdはConentVersionオブジェクトのIdフィールド\n",
      "21\n",
      "\n",
      "--- Page 22\n",
      "写真のサムネイル\n",
      "Record__cオブジェクトのImage__cフィールド(Formulaフィールド)にて以下を計算：\n",
      "Image(ImageURL__c ,\"Image\", 50,50)\n",
      "22\n",
      "\n",
      "--- Page 23\n",
      "コード\n",
      "23\n",
      "\n",
      "--- Page 24\n",
      "カスタムApexコード\n",
      "24\n",
      "Apexクラス\n",
      "機能\n",
      "Unitテスト\n",
      "FileUploader.cls\n",
      "ファイルのアップロードおよび削除するためのクラス。\n",
      "FileUploaderTest.cls\n",
      "NominatimCallout.cls\n",
      "Nominatimウエブサービスへアクセスし、位置情報をアドレスへ変換するためのクラス。\n",
      "NominatimCalloutTest.cls\n",
      "NominatimCalloutMockImpl.cls\n",
      "PlaceCheck.cls\n",
      "既に、その位置に\n",
      "Place登録されているかどうかチェックするためのクラス。\n",
      "PlaceCheckTest.cls\n",
      "PlaceObject.cls\n",
      "Place__cのレコードを作成、および、\n",
      "Place__cに関連した操作を行うためのクラス。\n",
      "PlaceObjectTest.cls\n",
      "RecordObject.cls\n",
      "Record__cのレコードを作成、および、\n",
      "Record__cに関連した操作を行うためのクラス。\n",
      "RecordObjectTest.cls\n",
      "TaskObject.cls\n",
      "そのPlaceに紐づけられた\n",
      "Taskの取得やステータス更新操作を行うためのクラス。\n",
      "TaskObjectTest.cls\n",
      "UserObject.cls\n",
      "Userオブジェクトのカスタムフィールド\n",
      "Geolocation__cを更新するためのクラス。\n",
      "UserObjectTest.cls\n",
      "\n",
      "--- Page 25\n",
      "カスタム Lightning Web Components\n",
      "25\n",
      "LWC\n",
      "機能\n",
      "camera\n",
      "位置情報に紐づいた写真付きメモを作成しする。iOS/Androidのモバイルデバイスで利用時には、ネイティブカメラによる写真撮影\n",
      "を行う。また、camera起動時、ユーザの現在位置をUserオブジェクトへ登録する。\n",
      "pictureMap\n",
      "Record__cのレコードページやPlace__cのレコーデページにて、レコードの位置を地図(Leaflet)上で表示する機能\n",
      "picturesMap\n",
      "ユーザ現在位置から一定の半径以内のRecord__cのレコードを、地図(Leaflet)上へマーカーで表示。また、picturesMap起動時、\n",
      "ユーザの現在位置をUserオブジェクトへ登録する。\n",
      "fileQuickAction\n",
      "“Delete Record” ボタン押下により起動されるquick actionで、Record__cと写真(ContentDocument)の両方を削除する機能。\n",
      "addPlace\n",
      "Record__cのレコードページにおいて、そのレコードのName, Geolocation__cをPlace__cのレコードとして登録する。\n",
      "imageViewer\n",
      "Record__cのImageURLフィールドから写真のURLを取得し、そのURLに存在する写真データ(jpeg)を画像で表示する。\n",
      "taskHere\n",
      "Record__cのレコードページにおいて、そのレコードに関連するTaskのレコード一覧を表示する。また、それぞれのタスクのチェック\n",
      "ボックスをチェックすることによりタスクを完了させることが出来る。\n",
      "gps\n",
      "GPSユーティリティー。ブラウザの位置情報機能よりユーザ現在位置を取得し、ユーザの現在位置を\n",
      "Userオブジェクトへ登録する。\n",
      "util\n",
      "その他ユーティリティー。\n",
      "\n",
      "--- Page 26\n",
      "“camera” LWCにおける写真撮影\n",
      "26\n",
      "<label class=\"slds-button slds-button_brand\">\n",
      "<input style=\"display: none;\" class=\"slds-col slds-p-around_small\" type=\"file\" accept=\"image/*\"\n",
      "capture=\"environment\" onchange={handleCapture} />\n",
      "Camera\n",
      "</label>\n",
      "HTML5の<input/>エレメントより、iOS/Androidのネイティブカメラアプリをキャプチャーデバイスとして起動す\n",
      "る。\n",
      "Width\n",
      "Height\n",
      "写真サイズ Width x Height\n",
      "432ピクセル\n",
      "ピクセル数はスマートフォンのカメ\n",
      "ラアプリによる\n",
      "\n",
      "--- Page 27\n",
      "メッセージチャネル\n",
      "27\n",
      "Message Channel\n",
      "Field name\n",
      "説明\n",
      "ImageURL\n",
      "name\n",
      "写真の名称\n",
      "imageURL\n",
      "写真のURL\n",
      "picturesMap\n",
      "imageViewer\n",
      "name\n",
      "imageURL\n",
      "LWC\n",
      "LWC\n",
      "\n",
      "--- Page 28\n",
      "パッケージ配布形態\n",
      "28\n",
      "\n",
      "--- Page 29\n",
      "配布形態\n",
      "29\n",
      "●\n",
      "Github.comでソースコード配布\n",
      "https://Github.com/araobp/myphotos\n",
      "リポジトリをクローンし、sfdx CLIを使って他の組織へアップロード\n",
      "●\n",
      "Salesforceへ未管理パッケージとしてインストール\n",
      "以下のリンクをクリックし、Salesforceログイン画面でユーザ名とパスワード入力\n",
      "https://login.salesforce.com/?ec=302&startURL=%2Fpackaging%2FinstallPackage.\n",
      "apexp%3Fp0%3D04t5i000000Z5f6\n",
      "\n"
     ]
    }
   ],
   "source": [
    "page_num = 1\n",
    "for page in doc:\n",
    "    print(f'--- Page {page_num}')\n",
    "    page_num += 1\n",
    "    text = page.get_text()\n",
    "    print(text)"
   ]
  }
 ],
 "metadata": {
  "kernelspec": {
   "display_name": "Python 3 (ipykernel)",
   "language": "python",
   "name": "python3"
  },
  "language_info": {
   "codemirror_mode": {
    "name": "ipython",
    "version": 3
   },
   "file_extension": ".py",
   "mimetype": "text/x-python",
   "name": "python",
   "nbconvert_exporter": "python",
   "pygments_lexer": "ipython3",
   "version": "3.11.4"
  }
 },
 "nbformat": 4,
 "nbformat_minor": 5
}