LoginSignup
15
15

More than 3 years have passed since last update.

@RPAbot

Power Automate UIフローで現在できることを検証してみた

Last updated at Posted at 2020-01-25

2019年11月に発表になり、最初のプレビュー版が出たPower Automate UIフロー (プレビュー) ですが、前回の記事でセットアップ方法や、使い方の超概要について書きました。

年が明けて、Power Automateもビルドが上がり、UIフローインストーラが日本語対応したり、と機能が改善されているので、そのあたりを見ていきましょう。

Power Automate トップ画面

画面一番上のメニューの領域のデザインが新しくなり、「Power Automate」ときちんと文字が入ったり、旧来のEdgeでもアイコンの背景が表示されるようになったりと、細かい改善がなされています。(ただし、UIフローの対応はGoogle ChromeとChromium版Microsoft Edgeであることには変わりありません)
image.png

UIフロー環境の準備

2019年11月当時からアップデートがあった部分を中心に、何が変わったか見てみます。

以下のコンポーネントをセットアップします。

  • UIフローインストーラ image.png (9MBくらいのサイズ)
    • 含まれているPower Automateブラウザー拡張機能をChromium版Edge or Chromeで有効にする (ここからもダウンロードできます)
  • (オプション) Selenium IDE - Web UI フローを使う場合
  • (オプション) オンプレミスデータゲートウェイ image.png (520KB)- UIフローのトリガーをイベント、スケジュール、ボタンフローから行うときにのみ必要

UIフローインストーラの実行

Setup.Microsoft.Flow.UIflow.exe を実行します。
あらかじめChromium版EdgeやChromeは閉じておいてください。
UIがきちんと日本語になっていますね！(まだ文字列の後ろが切れているところもありますが) 画面左下を見ると、前回と比べてバージョンが0.2.219.19302 ⇒ 0.3.40.19331 となっていることがわかります。

ウィザードを進めていきます。赤く囲ったところをクリックしていきます。
image.png
image.png
image.png
image.png
インストールが正常に完了すると、以下のようなアイコンがデスクトップに作成されます。
image.png

実行中はタスクバーにアイコンが表示されます。UIフロー実行時はアイコンがあるかどうかを確認しましょう。
image.png

Power Automate ブラウザー拡張機能の有効化

前回は自動でインストールされませんでしたが、今回はUIフローインストーラに含まれていたようです。
Google Chromeを起動すると、画面右上に、新しいアドインがインストールされたことを示す感嘆符 (⚠️)が表示されます。「拡張機能を有効にする」ボタンをクリックしてください。
image.png

Selenium IDE ブラウザー拡張機能のダウンロードと有効化

このアドインは2019年12月1日のものが最新版で、英語版ですので手順は省略します。

Chromeでchrome://extentions (次世代Edgeではedge://extentions)を開くと、拡張機能がインストールされていることが確認できます。
image.png

デスクトップUIフローの作成

記録

記録画面のツールバーが日本語化されました！記録中の、デスクトップアプリケーションのUI要素分解も快適で使いやすく、さすがアクセシビリティAPIを開発している本家の製品です。
image.png

記録を開始すると、ツールバーの「入力の使用」と「出力の取得」が利用できるようになります。

入力の使用 (いわゆる「定数」)

作成手順のステップの中で、「入力」を定義しておくと、定義した初期値を使ってUIフローを実行できます。手元で実行することを「テスト」と呼びますが、最初に入力を定義するときに初期値は設定できますが、各テスト時に値を変更できます。いわゆる「定数」として機能します。
image.png

この値を使って、記録時にコントロールへの入力に使うことができます。もちろん、入力はその場でキーボードを使って入力してもいいのですが、それだと値がフローの中にハードコードされてしまうため、汎用性を考えると入力を定義してそれを使うほうが良いです。
image.png

「入力」は、記録ツールバーの「入力の使用」-「新規入力」で、その場で作成もできます。
image.png

出力の取得 (いわゆる「変数」)

作成手順のステップの中でも出力というものが出てくるのですが、その場では何もできず、いったん記録を行うとツールバーで出力が定義でき、そうすると作成手順の中で出力の編集ができるようになるという、多少わかりにくいUI構造になっています。

これは、UIの中から値を取ってくる入れ物として使うもので、いわゆる「変数」として機能します。

「出力の取得」-「テキストの選択」を選択して、UI上で取得したい文字列を選択すると、ウィンドウが開いて、出力に「名前」を付けて保存できるようになります。

image.png

image.png

出力を指定すると、フローの中に「テキストの取得」(GetElementText)アクションが挿入され、出力が作成手順のステップの中で管理できるようになります。
image.png

出力は、記録の中でUIの別の場所に再入力することも可能です。(「入力の使用」-「出力の記録」、ただしまだうまく動かない！？)

手動アクションの追加

記録によってフローが作成されると、フローの最後に以下のようなボタンが表示されます。
image.png
これをクリックすることで、手動で追加のUIアクションを追加できます。現在のところ以下のような選択肢があります。
image.png

デスクトップUIフローの実行

Windowsのシステム言語は日本語のまま実行することが可能になりました。
ためしに、電卓を1~6までボタンをクリックするというUIフローを作成して実行したところ、以下のように6秒かけて正常に終了しました。
image.png

UI Flowsテンプレート

(2020年2月2日 追加)
Power Automateでテンプレートを検索すると、以下の2つがひっかかります。どちらもオンプレミスゲートウェイが必要でPremiumライセンスが必要になるようです。(無料試用版で試すこともできます)モバイルからUIフローをトリガーしてタスクを実行するというシナリオが実現できそうです。
image.png

利用手順

  1. テンプレートのページにある「このテンプレートを使用」ボタンをクリックします。
    image.png

  2. SharePointまたはOneDriveにサインインします。
    image.png

  3. UI Flowsの「作成」をクリックします。
    image.png

  4. 認証情報とGatewayに関する情報を入力します。
    image.png
    ※ なぜか、gatewayをインストール済みなのにgatewayが認識されず、先に進めませんでした...
    image.png

今後の実装に期待したいところ

Power Automate UIフローはまだプレビューで、2020年前半 (こういう言い方をするときはおそらく4~5月くらいがターゲット？)に正式リリースが予定されています。他社のRPAと比べてみて脅威になりそうなところもあれば、まだ足りないところもあります。以下、期待とともに足りないポイントについて箇条書きにしてみました。正式リリースまでに改善されることを望みます。

  • デスクトップUIフロー

    • 「記録」することが中心の実装となっていますが、一方、主要RPAツールは記録に頼るUIには必ずしもなっていない。なぜならUI操作による記録だけでは限界があるからです。一度記録を行った後に手動でアクションを追加できるようになっているのですが、最初からそれができるとより使い勝手がよくなると思います。
    • 実行速度がまだまだ遅いです。プレビュー版だからでしょうが、正式リリースでは大幅な高速化を期待します。
    • 一度記録してしまうと、セレクターの微調整はテキストベースで実施しなければならず、高度な知識がないと無理！再びUIベースのインターフェイスで微調整ができると、エンジニアでなくても使えるものになるでしょう。
    • 他のフローの仕組みとの連携。これができると他社にはない特徴となり、RPA+iPaaSのソリューションとしてかなり強力な地位を築けるでしょう。現在のところ、他のフローからの呼び出しインターフェイスはなさそうです。UIフローの中では最初のステップでトリガー条件を指定できる (?) ようですが、いまのところは手で式を書かなければいけないようです。これももっと簡単になるとよいです。(ちなみに、既存のフローから呼び出すトリガーとしてUフローの外側から設定できるようですね。)
      image.png
    • 現在利用できるアクションの数は9つだけですが、主要RPAツールでは、ライブラリによる拡張機能も含めて数百のアクションが利用できるのが一般的です。これは、それだけのシステムのパターンについての個別対応が必要であるためです。ターミナル、SAP、リモートデスクトップなどはさらに特殊な処理が必要になります。また、フロー中で取得した値 (文字列、数字)を加工して再利用するような仕組みもありません。正式リリースで、マイクロソフトがどのレベルまで対応してくるのか注目されます。
    • スクリプトによる拡張機能。エンジニアであれば期待してしまうところですが、TypeScriptやPython等のスクリプトを書くことで、UI要素のコントロールをさらに細かく実施できる選択肢を残しておいてくれると、標準機能では対応できないことでも開発者が入ればできるようになることが増えます。後発でRPA分野に入る場合には実装しておく方がよいかもしれません。

  • Web UI フロー

    • オープンソースであるSelenium IDEに頼った実装となっているため、UIがチグハグなものになってしまい、デスクトップUIフローやポータルの使い勝手との統一感がイマイチです。また、アドインは英語しか出ていないため、この部分が日本語化されるのか、マイクロソフトがコントロールできるのかどうかも不安です。

  • その他

    • Power Automateがどこまでのペルソナをカバーするのかにもよるのですが、現在のところ、フローの実行のスケジューリング、実行するマシンの選択と管理、パスワード管理といった「サーバー型RPAの管理機能」は皆無です。WinActorやUiPathが現在広がっているRDAの領域に侵食するには十分ですが、本来のRPAの目的を遂行するには機能が足りません。
15
15
0

Register as a new user and use Qiita more conveniently

  1. You get articles that match your needs
  2. You can efficiently read back useful information
  3. You can use dark theme
What you can do with signing up
Sign upLogin
15
15