概要
Automation Anywhere v11.3.xのスマートレコーディング機能で生成されるコマンド「Object Cloning」にキャプチャされる情報には、様々な方法で取得されたオブジェクト情報、座標情報、画像情報があります。レコーディングされた情報のデバッグを行う際に気になってくるのが、オブジェクト情報でどのような情報が取れていて、どこをどのように触るのがよいのか、ということでしょう。
メモ: A2019ではObject Cloningコマンドは「Recorder:Capture」アクションに取り込まれています。ここで取得できるオブジェクト情報もv11.3.xと同様です。ただし、使用するテクノロジーの選択(決め打ちになる)や、座標情報、画像情報の取り込みは行われません。
この記事では、クローニングする(つまりObject Cloningコマンドで属性を分析してキャプチャする) 対象のオブジェクトの種類と得られる属性について詳しく見てみましょう。
使用するテクノロジーと対象オブジェクトの種類
使用するテクノロジー
先のObject Cloningダイアログボックスの「Select Technology」の選択肢より選択できます。
- Default (デフォルト): オブジェクトのキャプチャに使用するテクノロジーを自動的に検出しようと試みます。使用されるテクノロジーはLegacy, Standard, Advanced, Advanced-WPFのいずれかになります。
- Legacy (レガシー): レガシー テクノロジーを使用してオブジェクトを検出し、キャプチャします。
- Standard (標準): MSAA テクノロジーを使用してオブジェクトを検出し、キャプチャします。
- Advanced (高度、もしくは詳細): UIAutomationテクノロジーを使用してオブジェクトを検出し、キャプチャします。
- Advanced-WPF (高度、もしくは詳細-WPF): WPF アプリケーション テクノロジーおよび UIAutomationテクノロジーを使用してオブジェクトを検出し、キャプチャします。
ここで出てくるMSAA、UIAutomationというのは、WindowsのOSについているアクセシビリティAPIと呼ばれる仕組みで、画面内のオブジェクトを要素分解して属性を返してくれるAPIです。WPFもモダンなWindowsアプリケーションで使われるUIサブシステムで同様の仕組みを持ちます。
対象となるオブジェクトの種類
対象となるUIオブジェクトはいろいろな種類に対応しています。そして、オブジェクトの種類によって取れる情報も違います。手元で試せるものについて、どういう情報が取れて、どれがオブジェクトを検出する際にデフォルトで使われるのかについても見てみます。
まず、Object Cloningダイアログボックスの真ん中にある「検索条件を選択:」の右側のアイコン (
) をクリックすると、検索条件となるオブジェクトの詳細属性の一覧が表示されます。
この中で双眼鏡マーク (
) がついているものが検索対象として使われます。双眼鏡マークをクリックすることでON/OFFを切り替えることができます。
注:
オブジェクトの種類を正しく認識するには、追加のプラグインをインストールする必要がある場合があります。v11.3.xでSilverlight/Flex/Javaアプリケーションを専用のモードで認識するには、C:\Program Files (x86)\Automation Anywhere\Enterprise\Client\AAPluginInstallation.exeの場所にあるプラグインインストーラを管理者モードで実行して、必要なプラグインをあらかじめインストールしてください。
これらのプラグインがインストールされていない場合は、通常のWindowsアプリケーションとして標準テクノロジーでオブジェクトを検出します。ただし、オブジェクトの種類に固有の追加の属性が取得できません。
取り込まれるオブジェクト情報
これは、利用するテクノロジーと対象となるオブジェクトの種類によって異なってきます。
オブジェクトの種類毎に見てみることにすると、Webアプリケーション/HTMLページと、それ以外のリッチクライアントアプリケーションとで、取得できる属性は大きく異なります。
- 通常のWindowsアプリケーション
- .NET・WPFアプリケーション
- Microsoft Silverlightアプリケーション: かつてマイクロソフトがAdobe Flash対抗でリリースしていたWebシステムのリッチクライアント開発テクノロジーです。最近はHTML5に取って替わられ下火になってきています。
- Javaアプリケーション
- Adobe Flexアプリケーション: Adobe Flashを基盤にしたWebシステムのリッチクライアント開発テクノロジーです。最近はHTML5に取って替わられ下火になってきています。
- SAPアプリケーション: v11.3.3以降ではSAP GUI Automationを使ってSAPアプリケーションにも対応しています。
- Webアプリケーション/HTMLページ
Legacy/Standard/Advancedテクノロジーで取得できる標準的な属性
**取得できる属性。**★はデフォルトでON。★はコントロールや取得できた属性の状況によってはデフォルトでON。()括弧付きのものはAdvancedテクノロジーを使ったときにのみ取得可能。☆はAdvancedテクノロジーを使ったときに、追加でデフォルトでONとなる属性。
- (Object ID)☆
- Name★☆
- Value★
- Class
- Parent★
- Type★
- Path★
- Index
- Left
- Top
- Width
- Height
- Description
- State(s)
- Action
- 《使用するテクノロジーやコントロールによって追加の属性の取得あり》
**注:**Webアプリケーション/HTMLページであっても、上記のテクノロジーを明示的に使っている場合は上記の属性が取得されます。
SAPテクノロジーで取得できる属性
**取得できる属性。**★はデフォルトでON。
- Control Type★
- Role★
- ConnectionId★
- Left
- Top
- Width
- Height
- Object Id★
- SessionId★
- IsContainerType
- Name
- Action
**注:**SAPアプリケーションにはDOMXPathもPathもなく、代わりにObjectIdが指定できます。これがDOMXPathに相当するSAP版です。(例: ObjectId=
/app/com[0]/ses[0]/wnd[0]/tbar[0]/okcd)
Defaultテクノロジーを使った場合のWebアプリケーション/HTMLページ
標準的な属性は取得されず、代わりに以下のWeb/HTML専用の属性が取得されます。
**取得できる属性。**★はデフォルトでON。
- Path★
- DOMXPath★
- HTML ID
- HTML Name★
- HTML Alt
- HTML Tag★
- HTML Class
- HTML InnerText
- HTML HRef
- HTML Type★
- HTML Value
- HTML ClassId
- HTML Title
- HTML Height
- HTML Width
- HTML Tag Index
- HTML Top
- HTML Left
最後に
次回は、取得できる属性のうち、特にPathとDOMXPathのしくみについてみていきたいと思います。