Skip to content
New issue

Have a question about this project? # for a free GitHub account to open an issue and contact its maintainers and the community.

By clicking “#”, you agree to our terms of service and privacy statement. We’ll occasionally send you account related emails.

Already on GitHub? # to your account

/intput 画像認識 カラースポイトで文字色を抽出して前処理する機能 #1

Closed
usagi opened this issue Oct 4, 2023 · 3 comments
Assignees
Labels
enhancement New feature or request

Comments

@usagi
Copy link
Owner

usagi commented Oct 4, 2023

提案

  • /intput の画像認識にカラースポイトで文字色を抽出して前処理する機能を追加します。

提案の背景

背景と文字の色がやや近い場合に画像認識の精度が落ちやすい傾向にあります。

image

例としてジュラシックワールドエヴォリューション2のスクショを添付。全体的にこのデザインが使われており、文字認識精度は体感で85%程度とやや微妙でした。

現在はお試しとして Arknights の文字部分を前処理として抽出する設定をプルダウンから選べるようになっていますが、この方式では多様な対象に対応する上で設定作成も保守も、そして使用する際の選択も面倒になります。

そこで、対象によらずカラースポイントで文字として認識(残したい、強調)したい部分を色で指定して、前処理としてその色+閾値だけ残す前処理を行えるよう改修したら便利そうという提案です。

@usagi usagi self-assigned this Oct 7, 2023
@usagi
Copy link
Owner Author

usagi commented Oct 8, 2023

とりあえずなUIじゃができたぞい👀

使い方:

  1. 「色フィルター」の右側の色のサンプルのところをクリックすると、少々わかりにくいけどカラーピックモードになります。
  2. 画像から文字として前処理で残したい色をクリックします。
  3. 「色フィルター」のチェックをONにした状態で画像認識を動作させます。
image

『ジュラシック・ワールド/ 炎の王国』で世界を変えた出来事に続き、『ジュラシック・ワールド/ 新たなる支配者』の記念すべき物語につながる、臨場感にあふれたオリジナルストーリーを体験しよう。

比較用に色フィルターなしの場合:

image

『ジュラシック・ワールド/ 炎の王国』で世界宗取えた画来事に絹さ、 ` ブュラシック・ワールド / 新たなる支配者』の記念すべき物語につながる、臨場感にあふれたオリジナルストーリーを体験しよう。

@usagi usagi added the enhancement New feature or request label Oct 8, 2023
@usagi
Copy link
Owner Author

usagi commented Oct 8, 2023

指定色のR,G,Bに対する許容誤差も設定できるようにしておきましょう。

@usagi
Copy link
Owner Author

usagi commented Oct 8, 2023

許容誤差設定UIもつけました。

image

usagi added a commit that referenced this issue Oct 8, 2023
/intput 画像認識 カラースポイトで文字色を抽出して前処理する機能
@usagi usagi closed this as completed in 46ed331 Oct 8, 2023
# for free to join this conversation on GitHub. Already have an account? # to comment
Labels
enhancement New feature or request
Projects
None yet
Development

No branches or pull requests

1 participant