HOME  >  2015/05

PC 画面を画像解析して、その結果を活用できないか試してみる

「PC 画面を画像解析して、その結果を入力補助やら操作補助に活用できないか?」とふと思い、
画像解析で、ウィンドウの要素をどの程度判別できるのか、試してみました。

使用したもの
ウィンドウの画像を適当にラベリング処理してみたところ、下図のような結果に。
ラベリング処理された領域を赤枠で表示しています。
ボタンとかチェックボックスの領域を認識できています。(ノイズというか不要な領域も多いけど)

labeling.jpg

かなり適当に解析してこの結果なので、文字領域の抽出とかすれば少しマシになりそう。

意外と使えそうな感じなので、次回に続くかも。

# でも、配布を考えると OpenCV のバイナリ (約 20 MB) も一緒に配布せにゃならんわけで。
# この点は微妙かも。

参考

外部リンク

カンパのお願い
公開しているソフトウェアはフリーウェアなので無料でご利用いただけます。 気に入ってくださった方は、Amazon でお買い物をする際に下記のリンクを経由して頂ければ励みになります。

検索BOX・タグ一覧