登録した自社の資料だけを根拠に答えるAIチャット「RakuChat」で、図面や手書きのメモ、メーカーの取扱説明書の図も、検索と回答の根拠に使えるようになりました。
これまでのRakuChatは、PDFやWordに含まれる文字のデータを読んで答えていました。そのため、取扱説明書の「各部の名称」の図や、部品の図面に書かれた寸法、手書きの点検メモのように、図や画像の中にしか書かれていない情報は回答に使えませんでした。今回の対応では、管理者が文書ごとに「図・手書きも読み取る」を選ぶと、図や画像を含むページを外部のAIで読み取り、図の内容も回答の根拠に使います。
この記事では、登録するときの選び方と、利用するときの画面をご紹介します。画面はすべて、架空の会社「みなと精機株式会社（デモ）」の資料です。
図や手書きの、どんな情報に答えられるか
図の中の文字を書き起こすだけでなく、図が何を表しているかを読み取り、文章にして検索に使います。
| 取扱説明書のパネル図 | 番号の付いたつまみ・ボタン・端子の名前と、パネルの中の位置 |
|---|---|
| 接続図・配線図 | どの機器をどの端子につなぐか、矢印の向き（入力・出力） |
| 部品の図面 | 表題欄（図番・品名・材質・尺度・作成者・日付など）と、主な寸法・公差・改訂の内容 |
| 組立図・手順の図 | 手順の順番と、各手順で取り付ける部品 |
| 手書きのメモ・ホワイトボード | 日付、測定値、チェックの有無、スケッチの矢印、予定の工程 |
| 図の中の表 | 1行ずつの値（設定の一覧、測定値の推移など） |
対応するファイルは、PDF（スキャンしたPDFを含む）、Wordの文書に貼った画像、画像ファイル（JPEG・PNG）です。PDFでは、図や画像を含むページと文字のないページだけを読み取り、文字だけのページは今までどおり文書の文字を使います。
使い方：文書ごとに「図・手書きも読み取る」を選ぶ
登録するときに選ぶ
管理画面の「文書」で文書を登録するときに、「外部のAIでの読み取り」から読み取り方を選びます。
| 選び方 | 外部のAIへ送るもの | 回答に使える内容 |
|---|---|---|
| 読み取らない | 送りません | 文書に含まれる文字のデータ |
| スキャン文書（文字のないページ）を読み取る | PDFの文字のないページだけ | 上記に加えて、スキャンしたページの文字 |
| 図・手書きも読み取る | PDFの図・画像を含むページと文字のないページ、Wordに貼った画像、画像ファイル | 上記に加えて、図の内容（番号・寸法・矢印・表など）と手書きの文字 |
画像ファイル（JPEG・PNG）は、読み取らないと回答に使えないため、「図・手書きも読み取る」を選んだ場合に登録できます。スマートフォンで撮ったホワイトボードや手書きのメモの写真も、そのまま登録できます。
登録済みの文書は、あとから選べる
読み取らずに登録した文書でも、図や画像を含むページがあれば、文書の一覧に案内が表示されます。「図・手書きも読み取る」を押すと、送る範囲を確認する画面が開きます。
利用するときの画面
社員が社内チャットで質問すると、図の内容を根拠に答えます。根拠には「図の内容（AIの読み取り）」と表示され、押すと右側に、読み取った内容と原本のページ（画像）が並びます。
メーカーの取扱説明書のパネル図
架空のデジタルミキサーの取扱説明書です。各つまみの名前は、パネル図の番号と図の下の一覧にしか書かれていません。「前面パネルの⑦は何のつまみですか」という質問に、パネル図を読み取った内容から「低域イコライザーつまみ」と答えました。
部品の図面（スキャン）
紙の図面をスキャンしたPDFです。全長と公差を尋ねると、図面に書かれた「120±0.1」を答えました。右側には、読み取った寸法とスキャンした図面が並ぶため、その場で原本の数値を確かめられます。
手書きの点検メモ
手書きの設備点検メモをスキャンしたPDFです。2号コンプレッサーの吐出温度を尋ねると、メモに書かれた「88℃」を答えました。赤丸で囲んだ「要注意」の書き込みや、チェック欄、配管のスケッチの矢印も読み取ります。
Wordの手順書に貼った図
会議室の音響設備の手順書（Word）に貼られた、アンプ背面の接続図です。図の中の札の色と端子の記号から、「端子Cには赤いケーブルをミキサーのMAIN OUT Rにつなぐ」と答えました。Wordの場合、右側には文書に貼られた画像が表示されます。
ホワイトボードの写真
工事予定を書いたホワイトボードの写真（JPEG）です。11月25日の13時から通行止めになる場所を尋ねると、写真の中の注意書きから「通路B」と答えました。
図の数値を確かに扱うための仕組み
図面の寸法や点検の測定値は、取り違えると業務に影響します。RakuChatは、図の内容を根拠に答えるときに、次のように扱います。
- 寸法などの数値は、読み取った図の内容に書かれている数値だけで答えます。図から長さを測ったり、足し引きして求めたりしません。根拠に書かれていない数値を含む文は、回答に表示しません。
- 図や手書きの内容を根拠にした回答には、「寸法などの数値は、根拠の原本でお確かめください」と注記を付けます。根拠を押すと、右側に原本のページや画像が開きます。
- 取扱説明書の本文が「番号と名称は図のとおり」と図を指している場合は、同じページの図の内容も一緒にAIへ渡し、本文だけを読んで答えられなくなることを防ぎます。
- 図面の「4-φ8.5」（φ8.5の穴が4か所）のような書き方も、図に書かれた数として扱います。数えたり推測したりした数は答えません。
- 根拠が見つからない場合や、資料から確かめられない場合は、推測で答えずに回答を控えます。控えた質問は「未解決の質問」に残り、管理者がFAQで回答を補えます。
外部へ送る範囲と、お試しの上限
- 読み取るのは、管理者が「図・手書きも読み取る」を選んだ文書だけです。選ばない限り、文書を外部へ送りません。
- 送るのは、図・画像を含むページと文字のないページ（Wordは貼られた画像、画像ファイルは画像そのもの）だけです。文字だけのページやWordの本文は送りません。
- 画像に写っている氏名・連絡先などは伏せ字にできません。外部へ送ってよい文書かをご確認ください。読み取りを選んだことは「操作の記録」に残ります。
- 写真は向きを直し、撮影場所などの付帯情報を除いてから送ります。
- 読み取った内容は保存し、取り込み直しても同じページを送り直しません。文書を削除すると、読み取った内容も一緒に削除します。
- お試しでは、画像の読み取り（スキャン・図・手書き）は月300ページまでです。図・画像は1枚を1ページと数えます。1つの文書で読み取れるのは100ページまでです。
データの取り扱いの詳細は、RakuChatのプライバシーポリシーをご確認ください。
架空の資料で試した結果
図の読み取りの正確さを、架空の資料と、正解を決めた質問で確かめました。試験は、ほかに文書500件以上を登録したRakuChatのお試し環境（本番環境）で行いました。
| 図を見ないと答えられない質問（55問） | 54問（98.2%）に、図の内容を根拠に正しく回答しました。誤った回答（数値の取り違えを含む）は0件です。残る1問は推測で答えず、回答を控えました |
|---|---|
| 文字だけで答えられる質問（9問） | 8問に正しく回答し、1問は回答を控えました |
| 資料に書かれていない質問（5問） | 5問すべてで、推測で答えずにお断りしました |
| 回答までの時間 | 半数の質問が1.8秒以内、90%の質問が2.3秒以内に返りました |
| 図のない資料 | 文字だけの資料、罫線の表だけの資料、ヘッダーに小さなロゴがある資料では、外部へ1ページも送りませんでした |
試験に使った資料と質問
- 資料（13件、すべて架空）：楽器の取扱説明書（パネル図・接続図）、部品の図面（線で描いた図面・スキャンした図面）、手書きの点検メモのスキャン、組立手順書、Wordの手順書（画像3枚）、ホワイトボードと手書きメモの写真、配線図と操作盤の画像、比較用の図のない資料3件
- 質問（69問）：図を見ないと答えられない質問55問（部品の名前と位置、接続、寸法、表題欄、手順の順番、手書きの数値、図の中の表）、文字だけで答えられる質問9問、資料に書かれていない質問5問
- 図を見ないと答えられない55問は、文書の文字のデータだけでは答え（番号と名前の対応、寸法と部位の対応、手書きの数値など）が得られないことを、事前に確かめてから使いました。近い数値（φ8とφ8.5、1:1と1:2など）を含め、数値の取り違えを確かめられるようにしています。
まとめ
RakuChatは、文書ごとに「図・手書きも読み取る」を選ぶだけで、図面・手書きのメモ・取扱説明書の図も回答の根拠に使えるようになりました。図の中にしか書かれていない部品の番号や寸法、手書きの測定値にも、根拠の原本を並べて答えます。架空の資料での試験では、図を見ないと答えられない55問のうち54問に正しく答え、誤った回答は0件でした。
自社の図面やマニュアルで、どの程度答えられるかをお試しいただけます。30日間無料で、パスワードやクレジットカードの登録は不要です。
RakuChatの機能はリリースのお知らせ、回答の正確さは文書500件での試験結果でご紹介しています。自社の資料での試験や導入のご相談は、お問い合わせからどうぞ。
※ 試験の結果は2026年11月12日のものです。資料の画質や図の複雑さ、質問の仕方、使うAIによって結果は変わります。AIによる読み取りには誤りが含まれる場合があるため、寸法などの重要な数値は原本でお確かめください。