【第77回】ロータス博士のWinActor塾～マウスドラッグ操作Ⅰ

ドラッグ操作が活躍する場面

WinActorには、やりたい動作を実現するためにたくさんの部品が存在します。

そのため、人間の操作と同じことをしなくても、他の方法を使って実現できたりします。

特にマウスドラッグに関しては、実際にドラッグさせなくても目的を達成できるパターンが多くあります。

 

例えば特定のフォルダの中にファイルを移動させるときの操作ではどうでしょうか。

人間の場合、マウスを使ってファイルを掴み、フォルダの上にドラッグして移動させますが

WinActorは「ファイル移動」のライブラリを使用すれば、元のファイルと移動先のディレクトリを指定するだけで

マウスを全く動かすことなく操作を完了させることが可能です。

 

 

このように、代替手段がたくさんあるためドラッグ操作が必要となるケースは少ないでしょう。

しかし場合によってはドラッグが必須となることもあります。

探せばこのようなケースは色々と出てくると思いますが、代表的なものでは

• クリックやキーボードで選択できない文字列のコピー
• マウスホイールやキーボードで動かせないスライダの操作

などが挙げられます。

こういった、やむを得ずマウスドラッグを必要とするパターンにも対応できるように

マウスドラッグ操作を習得していきましょう。

 

画像マッチングを利用したドラッグ操作

今回は画像マッチングを使用してドラッグ操作を行う方法を学んでいきます。

例として次のような文章を準備しました。

 

この文章はコラムに掲載されているものですので、当然ブラウザで表示しています。

ということは・・・XPathを使えば実はコピーできてしまいますね。

なので今回は、このテキストがブラウザ表示ではないという前提で進めます。

 

通常のテキストであれば、文字の上でダブルクリックやトリプルクリックをすると選択できますが

このテキストは残念ながらリンクになっており、押してしまうとページの最初に戻されてしまいます。

どうやらキーボードでもフォーカスできないのでマウス以外での選択は難しそうです。

 

画像マッチングでのドラッグ（始点の設定）

それでは、画像マッチングを利用してドラッグ操作を行いましょう。

 

画像マッチングについてはこちらの記事で詳しく解説しています。

まだ画像マッチングを使っていない方は基本的な使い方を学んでからチャレンジしてみてください。

 

まずは画像マッチングノードをひとつ配置してプロパティを開きます。

プロパティを開いたら、下図のようにイメージ画像とウィンドウ識別名を設定してください。

どちらも、ターゲット選択ボタンを押したあとにこのページを選択しています。

 

 

イメージ画像を設定する際は、コピー対象となる文章が入るように

ブラウザ画面をスクロールして調整してください。

 

次に、ドラッグする場合のマウスの始点と終点を決めましょう。

最終的にこのように選択された状態にしたいので

 

始点と終点を次のようにして、マウスが始点から終点まで移動するときに文字の上をなぞるようにします。

 

 

余計な範囲が選択されないように、始点はなるべく文章の開始位置のすぐ横にします。

逆に終点は、文字サイズの違いやその他の影響で文章が少し伸びたときでも対応できるように余裕を持つようにします。

 

画像マッチングひとつで始点から終点までのドラッグ操作を設定することはできません。

まずは始点にマウスを移動させてから、次の画像マッチングで終点までドラッグします。

 

先ほどの画像マッチングノードのプロパティをさらに設定していきます。

マッチング範囲はテキストの上にあるタブの部分に、十字マーク（マウス位置）は先ほどの図の始点の位置にします。

次のように設定しましょう。

 

 

 

最後にアクションの設定です。

この画像マッチングノードでは、始点へのマウス移動を担当してもらいますので

次のように「アクション」の項目に「マウス移動のみ」を設定します。

 

 

ここまで設定できたら「更新」ボタンを忘れずに押してプロパティを確定させます。

 

 

画像マッチングでのドラッグ（終点の設定）

続いて、終点までのドラッグ操作です。

これは先ほどの画像マッチングをコピーしてプロパティを編集しましょう。

 

フロー上でノードをコピーして配置したら、後ろ側の画像マッチングノードのプロパティを編集します。

 

 

変更する箇所は、マウスの位置とアクションです。

まずはマウスの位置を終点に動かすために、十字マークの位置を終点にしましょう。

下図のように十字マークを設定し直してください。

 

※マッチング範囲（赤点線の枠）は変更する必要はありません。 

 

これで終点の位置を設定できました。

最後にアクションです。終点までマウスをクリックしたままドラッグしたいので

「左クリックし、マッチング箇所までドラッグ」を選択します。

 

 

 

ここまで設定できたら、プロパティ下部の更新ボタンを押して編集を完了します。 

これで対象の文字列が選択できるマウスドラッグ操作を作成することができました。

 

選択さえできればエミュレーションノードで「Ctrl + C」の操作をすればコピーできますね。

コピーした情報はそのままペーストしたり、クリップボードのノードで変数に格納して使用したりできます。

 

 

実行結果

実際に実行してみると、しっかりとマウスが始点から終点にドラッグされて

文章が選択された状態になりました。

 

エミュレーションによる「Ctrl + C」の操作は画面上で確認することができないため

実行完了後にメモ帳に貼り付けして確認します。

 

 

 

しっかりと対象の文章がペーストされました。

ここまで確認できたら、画像マッチングでのドラッグ操作は完了です。