マウスを合わせるだけでゲームのツールチップを翻訳

固定の字幕ボックスは簡単です。外国語ゲームの難しさはそれ以外 — カーソルの行く先々で出てくるテキストにあります:

• アイテム・装備の説明
• スキル・アビリティのツールチップ
• クエストログや目標の項目
• メニューのラベル、設定、クラフト画面

カーソル追従はマウスに乗り、近づいたものを読み取るので、ホバーした瞬間にツールチップを確認できます — プレイ中に既にしている動作のままです。マウスとキーボードで遊ぶ、メニュー多めの RPG と特に相性が良いです。

コントローラーで遊ぶ場合は? 追従するカーソルがないので、固定範囲かウィンドウモードを使います。どちらもゲーム内翻訳オーバーレイのページで扱っています。

読みたいところにカーソルを合わせると、Playtoが周辺のテキストを読み取ります。キーボードやマウスのショートカットで範囲をその場で拡大・縮小でき、ツールチップだけに合わせられます — 大きすぎると無関係な文字を拾い、小さすぎると読みたい行が切れるので、対象に合わせるのがコツです。ショートカットはツール › ショートカットで変更できます。

セリフ帯や字幕のように決まった場所に出るテキストには固定範囲もあり、ゲーム内翻訳オーバーレイのページで扱っています。

翻訳はクラウドではなく自分のPC上で動きます。既定のローカルモデルなら画面のテキストはPC内にとどまります(任意のPlayto Cloudをオンにした場合は、翻訳するテキストがPlaytoのサーバーに送信されます)。ただ、入れる前に知っておいたほうがいいコストもあります。ゲームとは別にGPUメモリが必要で、目安は2〜4GB。既定の翻訳モデルはインストーラーに同梱されているので入れた直後から翻訳でき、大きいモデルは初回に一度だけ約2〜6GBをダウンロードします。動作環境はWindows 10または11の64bitです。

そして機械翻訳であり、ゲーム内部のテキストではなく画面のピクセルを読んでいます。印刷体のフォントのツールチップが、信頼できる部分です。極小の文字や装飾文字、パネルの絵に描き込まれた文字は苦手な部類で、Imageモードはまさにそうした画面のためにあります。モデル選びの根拠になる数字はリアルタイム翻訳に向くローカルLLMとHy-MT2の実運用にあります。

ツールチップを読むのは終わりではなく始まりです。ホバーした単語を保存して後で復習でき、プレイしたゲームがそのまま手元に残る語彙になります。読み取り精度になぜここまでこだわるのかは画面の読み取りを重視する理由に、全体像はゲームで言語は学べるのか?にあります。