ScreenTranslate
Filient · ライティング
ScreenTranslateは、画面上のテキストを選んだ瞬間に翻訳するMacアプリだ。ゲームのメニュー、漫画のページ、PDF、情報の詰まったWebサイトの上に枠をドラッグすると、翻訳がその場に表示される。テキスト認識はApple Vision、実際の変換はApple Translationが担うため、オフラインで動き、すべてを端末内に留める。Filientがこれを作ったのは、テキストを別のアプリに移さず素早く答えを得たい読者のためだ。
ScreenTranslate について
ScreenTranslateとは
ScreenTranslateは、Mac上で見えているテキストを読める言語に変える。魅力は単純だ。コピーもしない、貼り付けもしない、ウィンドウも切り替えない。範囲を選べばそれで終わり。
これはApple自身のフレームワークに全面的に頼る画面翻訳ツールだ。OCRはVisionが処理する。言語変換はTranslationが処理する。どちらもローカルで動くからこそ、このアプリはあなたの画面はあなたのものだと約束できる。サーバーに送られるものは何もない。
その代償は範囲だ。すべてが端末上で完結するため、翻訳がどこまで届くかはmacOSが何に対応するかにかかっている。Appleは一連の言語を同梱し、パックとしてダウンロードする仕組みなので、Google Translateのようなクラウドサービスの一覧ほど長くはない。珍しい言語の組み合わせが必要なら、契約する前に自分の組み合わせが対象か確認しておきたい。Windows版やAndroid版もない。Mac専用のツールだ。
はじめかた
- FilientのサイトからScreenTranslateをダウンロードし、アプリケーションフォルダにドラッグする。
- 起動し、macOSが求めたら画面収録の権限を与える。OCRは見えないピクセルを読めない。
- 設定を開き、必要な原文と訳文の言語パックをダウンロードする。そうすれば接続なしで翻訳できる。
- 環境設定でショートカットを設定し、任意の場所で押して翻訳したいテキストに枠をドラッグする。
- オーバーレイで結果を読み、別の場所に貼りたいときはコピーする。
AIツール情報
ScreenTranslateの料金、対応プラットフォーム、性能を簡単に確認できます。
こんな人におすすめ
このツールが最も力を発揮するユーザー、タスク、シーン。
ユーザー
- 英語版が出なかったタイトルを遊ぶゲーマー：メニューの文字、クエストログ、アイテム説明を、ゲームから抜けずに翻訳できる。
- 生のスキャンを読み進める漫画・マンファの読者：吹き出しを選べばその場で読める。辞書アプリを別に開く必要はない。
- PDFやスキャンした論文に向き合う学生や研究者：画像に閉じ込められた文字を、打ち直さずに読めるようにする。
- 一日中言語をまたいで作業する人：外国語のサイトやソフトのUIを、今のウィンドウから離れず素早く調べられる。
タスク
- 外国語のアプリやWebサイトのUIを読む：ラベルやメニューをワンクリックで翻訳する。
- ゲーム内の会話やアイテムの数値を理解する：読みながら遊び続けられる。
- スクリーンショットや動画のフレームから文字を取り出す：OCRが拾い上げ、読んだりコピーしたりできる。
- テキストを選択できない書類の一文を確認する：枠で囲めば翻訳が見える。
シーン
- 安定したネットのない深夜に輸入ゲームを遊ぶ：オフラインの言語パックが動かし続ける。
- 電波のない電車で漫画の一章を読む：端末上のエンジンは接続を必要としない。
- 制限のかかった仕事用ノートPCで多言語の契約書や仕様書を確認する：何もマシンの外に出ない。
主な機能
選択して翻訳するオーバーレイ
中心となる操作は、目の前の対象をドラッグして選ぶことだ。ScreenTranslateは枠の中のピクセルを読み、翻訳をその上か隣に置く。元のウィンドウから出ることは一切ない。これは、一時停止できないゲームや再読み込みしたくないサイトが相手のときに効いてくる。ゲームや漫画を翻訳するときも、ぎっしり詰まった仕様書を翻訳するときも同じ操作なので、その習慣はどこでも通用する。
言語パックをダウンロードしたオフライン翻訳
必要な言語パックを一度落としてしまえば、アプリは接続なしで翻訳する。これが旅行やフライト、Wi-Fiが不安定なあらゆる場所に向けた売り文句だ。即座に感じる理由でもある。サーバーとの往復がなく、電波のない長距離フライトでも、他の乗客がいつまでも読み込まれないキャプティブポータルを待つ間、あなたは外国語のページを読み続けられる。
読み取りを担うApple Vision OCR
文字認識はApple Visionが担当する。iPhoneとMacのライブテキストの背後にあるのと同じエンジンだ。整ったデジタル文字だけでなく、画面上の文字、画像、スキャンした書類を読む。精度は元のデータの読みやすさに左右されるので、くっきりしたUIや印刷されたページは、ぼやけた動画のフレームよりよく読み取れる。
設計によるプライバシー
認識と翻訳の両方が端末上で動くため、画面の中身はどこにも送られない。これは、ただそう謳うだけのツールとは違い、本物のプライバシー翻訳ツールである理由だ。作成するアカウントも、スクリーンショットを保管するクラウドの置き場もない。機密資料を扱う人にとって、Web翻訳よりこれを選ぶ根拠がここにある。
Macネイティブで軽量
ScreenTranslateは、ブラウザをアプリの殻に包んだものではなくAppleのフレームワーク上に作られているので、小さく、起動も速い。Dockのアイコンと開いたウィンドウではなく、ショートカットの背後に住んでいて、呼び出すまで場所を取らない。ブラウザエンジンを同梱しない小さなネイティブビルドなので、バックグラウンドで静かに1GBのメモリを食うElectronベースの翻訳アプリよりはるかに少ないメモリで済む。
アプリとコンテンツの種類をまたいで動く
選択というやり方のおかげで、アプリは画面に何があるかを気にしない。ゲーム、PDF、画像ファイル、動画のフレーム、テキスト選択をブロックするサイトも、すべて同じ扱いだ。見えるものなら枠で囲める。この柔軟さのおかげで、他のあらゆるツールが手打ちを強いていた画面上のテキストを翻訳できる。ロックされたPDFであれ、一時停止できないゲームのダイアログボックスであれ。
メリットとデメリット
メリット
- 翻訳は1秒ほどで終わり、オーバーレイのおかげでウィンドウを切り替えずに済む。
- 言語パックをダウンロードすれば完全にオフラインで、Wi-Fiなしでも動く。
- 端末上の処理により、機密の画面テキストがサーバーに触れない。
- 普通のコピー&ペーストでは手が届かない画像、ゲーム、PDF内のテキストを扱える。
- Macネイティブのビルドは軽く、邪魔にならない。
デメリット
- Mac専用。Windows、Android、Web版はない。
- 言語の対応範囲はAppleのパック次第なので、珍しい言語の組み合わせではクラウドサービスに劣る。自分の組み合わせが対応しているか確認しておきたい。
- 無料枠のない有料ツールなので、購入前に試せない。
- 低解像度や強く様式化された文字ではOCRの品質が落ちる。動きの速い動画や一部のゲームフォントで最も目立つ。
よくある質問
Mac画面であなたが選んだ範囲を取得し、Apple Vision OCRで文字を認識し、Apple Translationで翻訳して、その場に結果を表示する。別の翻訳ツールにテキストをコピーする必要はない。
関連コンテンツ
ScreenTranslateに関連するツール、スキル、記事を探す。
ScreenTranslateの代替ツール
Google EmbeddingGemma 2
Google DeepMind · ライティング · 画像 · コーディングGoogle EmbeddingGemma 2 は 7 億 4000 万パラメータのオープンなモデルで、テキスト、コード、画像、音声、動画フレームを同じ 768 次元空間のベクトルに変え、スマートフォンやノート PC 上で動く。
MePersona
MePersona, Inc. · ライティング · 生産性向上 · マーケティングMePersonaはクリエイター向けのAI統合受信箱だ。あなたの話し方を学習し、12プラットフォームに届くファンメッセージの返信を下書きして、承認したものだけを送る。
Fluence
Yay Software (Yannick Huchard) · ライティング · 音声・言語 · 生産性向上Fluence は Android 向けのドキュメントリーダーだ。PDF、EPUB、Word 文書、ウェブ記事を読み上げ、発話中の文を画面で追わせ、本文についての質問にも端末上で答える。