Beongeurim
何と書いてあるか気になっていた画像を、読める言語の画像に変えます。自分の Gemini キーを使い、Beongeurim 側には画像もキーも残りません。
ツールは今、作っている途中です。公開前でも役に立てるように、キーの取得方法と処理のしくみを先に詳しく書いておきます。
どんなツールですか
メニュー、案内文、商品の説明、設定画面のスクリーンショットなど、外国語の文字が入った画像をアップロードすると、文字を読み取って翻訳し、翻訳された文字が入った画像を 1 枚にして返します。翻訳文の一覧ではなく画像そのものが変わり、ダウンロードして取っておけます。
翻訳には、自分で作った無料の Gemini API キーを使います。そのため、キーの作り方も、初めての方が従えるように画像つきで説明してあります。
画像が変わる 4 つの段階
- 文字を探して読む — 画像の中で文字がある場所を枠で見つけ、その中の文字を読み取ります。
- つながる行をまとめて文脈で翻訳 — 1 行ずつ別々に訳さず、つながる行は 1 つの文にまとめて、画像全体の雰囲気と一緒に翻訳します。
- 元の文字を消す — 元の文字があった場所を背景の色に合わせて埋めます。
- 翻訳を入れる — 枠の大きさに合わせて、文字の大きさ、改行、色、傾きを整え、翻訳を描き込みます。
縦書き、吹き出しの形に合わせた改行、文字の色とふちどり、原文と翻訳の表示の切り替え、間違った行を手で直すことにも対応するつもりです。モデルが混み合っているとき(503 エラー)は再試行し、待っている間は進み具合を表示します。
こちらのサーバーに何も残らない理由
Beongeurim には、画像を受け取るサーバーがありません。ツールの画面を開くと、自分のブラウザが自分のキーを使って Google に直接リクエストを送ります。Beongeurim は画面のファイルを配るだけで、画像とキーが通る道の外にいます。
ただし、Google 側には残ることがあります。下の「使う前に知っておくこと」を必ずお読みください。キーをこの端末に記憶するのは、ご自分で「この端末に記憶」をオンにしたときだけで、初期設定では記憶せず、タブを閉じると消えます。記憶する場合も、ツール画面のブラウザの保存領域にだけ置き、ツール画面には広告のスクリプトがありません。
効果音と口調はこう扱います
効果音(ドン、ドキドキのような文字)
初期設定は、原文をそのまま残して、横に小さく翻訳を添える方法です。効果音は絵の一部なので、消して描き直すと不自然になりやすいからです。画像の設定で「消して翻訳先の言語で描き直す」や「効果音には手を付けない」に変えられ、枠ごとに手で変えることもできます。セリフなのか効果音なのか看板なのかは、翻訳のときにモデルがあわせて見分けます。
口調と文脈
翻訳する前に、場面がどんな様子か、誰が話しているか、お互いどんな関係か、丁寧な言い方かくだけた言い方かを先に決めてから訳します。何枚かを続けてアップロードすると、前の画像で決めた登場人物と口調の表を次の画像に引き継いで、言葉づかいがぶれないようにします。登場人物、口調、用語をご自分で書いておく欄も用意する予定です。
フォント
原文の文字が太いゴシックか手書きかといった雰囲気をモデルが行ごとに選ぶと、その雰囲気に合うフォントで描きます。フォントは自由に使えるオープンなものだけを使い、翻訳文を他の会社のフォントサービスに送らないよう、ツールのアドレスから直接配信します。
使う前に知っておくこと
- 18 歳以上の方だけが使えます。Gemini API の利用規約がそう定めています。
- 無料のキーでアップロードした画像は、Google がサービス改善(学習)に使ったり、人が確認したりすることがあります。機微な画像(身分証、顔が写った私的な写真、機密文書など)はアップロードしないでください。
- 欧州経済領域(EEA)・英国・スイスでは、規約上、有料のキーが必要です。
この 3 行は、ツール画面の冒頭にも同じように表示されます。Beongeurim には年齢や地域を確かめる方法がないため、止めることはせず、お知らせするだけです。法的な判断ではないので、不安な場合は Google の規約をご自分でお読みください。
無料のキーには、1 日に使える回数の上限があります。私たちが確認したモデルではモデルごとに 1 日約 20 回でしたが、確認していないモデルの数字はわかりません。1 つのモデルが使えなくなったときは、別のモデルに切り替えるつもりです。
はじめるには
まず Gemini キーが必要です。初めてなら、下の案内に従って 5 分ほどで作れます。
ツールの本当のアドレス
ツールは下のアドレスでだけ開きます。ツールを開くときに、アドレス欄にこの文字列がそのまま表示されているか、必ず見比べてください。よく似た別のアドレスにはキーを入れないでください。
https://beongeurim-tool.pages.dev
ツールはまだ公開されていません。公開されたら、このページに入り口ができます。案内画面とツール画面はアドレスが違うため、広告はこの案内画面にだけあり、ツール画面には 1 つもありません。