Meta Glassesを最大活用❕
~視覚障害者用認識アプリ「ScribeMe」のご紹介~
先日本サイトでご紹介したAI搭載グラス、「Meta Glasses」。ファームウェアアップデートによって日本語モデルの機能は少しずつ改善されているものの、英語と比べると、精度・対応機能ともにまだ劣っているのが現状です。
一方、視覚障害者向けの画像・文字認識アプリ「ScribeMe」では、Meta Glasses(以下、メタグラス)の性能を最大限に引き出し、ハンズフリーでリアルタイムのAIサポートを提供するベータ機能が公開されています。管理人のLUCAも、先週からこの連携機能を利用しています。
そこで今回の記事では、「ScribeMe」の使い方や対応機能、メタグラスとの連携方法に加え、実際にアプリを使ってみてのレビューをご紹介していきたいと思います。
🪙 LUCA自身がまだサブスクリプションに登録していないため、記事中で扱っているScribeMeの機能は、すべて無料版を基に紹介しています。あらかじめご了承ください。
アプリ情報
メタグラスとの連携方法や使い方について詳しくご説明する前に、まずは「ScribeMe」そのもののアプリ情報についてご紹介します。
※なお、アプリ本体はiOS/Android向けに提供されていますが、2026年7月現在、メタグラスとの連携に対応しているのはiOS版のみです。
- ○アプリ名:
- 「ScribeMe」
- ○ダウンロードリンク:
- ・iOS - App Storeからダウンロード
- ・Android - Playストアからダウンロード
- ○デベロッパ:
- Mark Morad
- ○価格:
- 無料(月額¥3,000/年額¥30,000のアプリ内課金あり)
- ○主な対応機能:
- ・Live Assist(カメラ) - 周囲の状況が変化するたびに継続的に情報を提供し、必要な情報を即時に提供するリアルタイムAIアシスタント
- ・Live Assist(画面) - 画面上に表示されている内容をリアルタイムで追跡し、必要な情報を提供するデバイス内機能
- ・Smart Scan - 読み込んだPowerPointやPDF書類について、見出し・リスト・表を認識してレイアウトを保持し、画像に詳細な代替テキストを自動適用した上でWord等へ変換するAIツール
- ・Snap nScribe - カメラで撮影した写真やギャラリー内の画像について具体的な説明を受けられるAIツール
- ○無料版の制限:
- ・Live Assist - 1日10分以内
- ・Smart Scan - 1日1ファイルまで
- ・Snap nScribe - 複数画像の同時認識不可
アプリ情報については以上です。簡単に言うと、
- ・カメラから取得した映像のリアルタイム認識
- ・画面上に表示された情報のリアルタイム解析
- ・書類のアクセシビリティ確保
- ・写真や画像の文字/画像認識
が全て、同じアプリから呼び出せるようになっているというものです。記事中ではテーマ上Live Assistのメタグラス連携についてのみ取り上げていきますが、その他機能も極めて便利なものばかりなので、ぜひお試しください。
アプリの使用・設定方法
続いて、ScribeMeのLive Assistをメタグラスと連携し、利用するまでの手順についてご説明します。
🅰️ Meta AIの開発者モード設定
以下の手順に沿って、事前に開発者モードを有効化しましょう。
- (1) Meta AIアプリ(未導入であればこちらからダウンロード)を開き、左上の「メニュー」ボタンを選択します。
- (2) 遷移した画面の右下にある「設定ボタン」を選択し、続いて一覧から「アプリの情報」を選びます。
- (3) 「アプリのバージョン」欄を5回連続で選択し、表示された開発者モードのスイッチをオンに切り替えます。
- (4) 下方に表示されるSDKのインストールボタンを選択し、必要なファイルをダウンロード・インストールします。
- ※上記方法で開発者モードを有効化すると、ScribeMeの他にも「OOrion」やEnvision 「Ally」等複数の便利な視覚障害者向けベータアプリを利用できるようになりますので、ScribeMeを使わない場合でも、設定することをお勧めします。
- ※一度に登録できる同系統の開発者アプリは1つまでとなっているため、OOrion等他の支援アプリを登録している場合、一度そちらの接続が解除されてしまう仕様です。
🅱️ ScribeMeの設定
Meta AIに続き、ScribeMeでも事前設定を行う必要があります。
- (1) ScribeMeを開き、ログインまたは会員登録を行います。AppleまたはGoogleのアカウントを利用した登録がおすすめです。
- (2) ログイン後に遷移する「Live Assist」タブで、Bluetoothデバイス権限の許可を行い、続いて画面左上の「Meta Glasses 切断されました ×」と読み上げるボタンを選択します。
- (3) メタグラスを装着後、「登録する」と「カメラを許可」を順に選択し、画面に表示される指示に従ってサードパーティ製アプリの登録・許可を実施します。
- (4) 元の画面に戻り、Live Assist画面でボタンのラベルが「Meta Glasses 接続済み ✓」に変わっていれば連携完了です。
🅲 メタグラスを経由したLive Assistの使い方
連携が完了したら、あとは通常通りLive Assist機能を呼び出すだけです。
Live Assist画面で「ライブを開始」ボタンを選択すると該当機能が起動され、スマートフォン本体の代わりに、Meta Glasses側のカメラとマイクが利用されます。
数秒おきに、現在カメラに映っている光景の説明が再生され、読み上げ中でも質問できるよう、マイクは音声を受け付ける状態になっています。「賞味期限の表示を探して」や「飲食店の看板はある?」等質問をして、周囲の情報をリアルタイムで取得しましょう。
メタグラス連携のレビュー
ここからは実際に無料版のScribeMeを使ってみた管理人LUCA自身の感じた長所・短所を中心に、機能レビューを記載していきたいと思います。
なお、LUCAの個人的な意見・見解が多分に含まれているかと思いますが、ご容赦ください。
🅰️ 長所・便利なポイント
ScribeMeの長所と言えば、何と言ってもリアルタイム認識によるラグの少ない支援でしょう。ChatGPTやGemini等のAIサービスにもリアルタイムAIアシスト機能は搭載されていますが、目線を向けているだけで自動的に状況を説明し続けてくれるのはさすが視覚障害者専用といった印象です。
本来のメタグラスの機能だと「質問する」⇒「瞬時に写真を撮影」⇒「画像認識」という3つの手順を踏む必要がある他、何かを探している場合には目的のもの・場所が見つかるまで繰り返しこれらの操作を実行する必要があります。これに対し、Live Assistでは1度問いかけた内容について、見つかるまで探索と回答を自動でループしてくれるため、質問しなおす手間が殆ど要りません。
文字認識精度についてもメタグラス純正機能と比べるとかなり高い印象で、「Hey, Meta」と問いかけた際には「文字が細かく読み取れません」と放棄されたペットボトルラベルの栄養表示についても、すぐに見つけ出し、読み上げてくれました。
アプリ側からの情報によると
- 看板や標識の大きな文字⇒メタグラス
- 書類やラベル等の細かな文字⇒スマートフォン
という使い分けを想定しているそうですが、使ってみた限り細かな文字でもメタグラスのカメラで十分に読み取り可能でした。
以上のように、ScribeMeの長所は即時に反応してくれるリアルタイム認識と、メタグラス純正機能と比べかなり高い文字認識精度の2点です。実際LUCA自身、¥3,000という非常に高価な月額コースであるにも関わらず、現在加入するかどうか大いに迷っている状況です。
🅱️ 短所・惜しいポイント
短所という短所はないのですが、やはり有料プランの価格はかなりお高めに感じてしまいます。コーディングアシスタント、ライブ認識、無制限の生成AIを利用できるChatGPTのPlusプランと同じ月額料金と思うと、どうしても加入を考えてしまいます。
例えば主機能であるLive Assistも一日中利用するということは少ないため、利用時間の上限を少し緩和した低価格プランがあってもよいのではないかと思います。
また、長所でも記載していた「シーンの自動読み上げ」について、用途によっては短所ともなりえるのではないかと感じています。
というのも、外出時等秒単位で目の前の状況が変化する場面では程よく感じられる説明の頻度も、手元にある商品パッケージを読み取らせる場面など、映像にあまり変化がない状況では、説明が冗長に感じられてしまうことがあります。
アプリ設定で応対速度のプリセットは変更できるものの、状況に応じて説明量・頻度を調整してくれるとより使いやすくなる気がします。
まとめ
さて、今回はメタグラスと連携することのできる視覚障害者向け支援アプリ、「ScribeMe」についてご紹介しました。
グラス本体がないと少しわかりづらいかもしれませんが、Meta AIやその他の支援系アプリと異なり、リアルタイムで周囲の情報を読み取ってくれるScribeMeの有用性は極めて高く、日常生活に取り入れるだけで大幅に情報のバリアを取り除くことができるのではないかと思っています。
また勿論スマートフォン単体でも利用できるアプリなので、ぜひ一度無料版で機能を体験してみてはいかがでしょうか。