画面の変化を、
あなたにお知らせします。

OKYA Screen は OKYA が開発した、ブラウザーで画面認識と自動化を試せるデモです。画面を共有すると、英語と簡体字中国語のテキスト、数値、色をローカルで認識し、設定したルールに従って通知、抽出、記録、翻訳を実行します。

不要です。画面共有に対応したデスクトップブラウザーを使用してください。ウィンドウ、タブ、画面の共有を許可してから、認識を開始します。

表示言語は英語、簡体字中国語、スペイン語、ポルトガル語、日本語、韓国語、ドイツ語、フランス語、イタリア語、オランダ語に対応しています。現在の OCR モデルは英語と簡体字中国語のみ対応しています。表示言語と OCR 言語は個別に設定します。

標準では送信しません。スクリーンショットはメモリ内でローカル認識し、保存もアップロードもしません。タスク設定と認識履歴はこのブラウザーに保存します。翻訳サービスを設定し、同意した場合に限り、翻訳タスクの認識テキストをそのサービスへ送信します。

点または領域を選べます。点では周囲の 3 × 3 ピクセルの平均色を使用し、領域では RGB の許容差と変化したピクセルの割合で判定します。対象色はカラーピッカーや HEX で設定できます。割合が 0 の場合、いずれかのピクセルの変化や一致で実行します。

別のアプリを使用中も共有は続けられますが、ブラウザーがバックグラウンドの認識頻度を制限する場合があります。対象アプリを最小化すると描画やキャプチャが停止することがあり、継続的な更新は保証できません。特定のウィンドウやタブを共有し、最小化せずに実行したままにしてください。

翻訳には、ご自身のサービス設定と認識テキスト送信への同意が必要です。未設定の場合は明示します。AI による画面理解は近日公開予定です。現在のデモは AI で画面を解釈せず、他のアプリのマウスやキーボードも操作しません。