Power Automate Desktop
since 2021-05-24
Microsoft Power Automate Desktop は Windows 10 で使用できるデスクトップ・Web操作などの自動化ツール。
- PowerShell + SAPI5 https://ascii.jp/elem/000/004/055/4055975/
- フローの一要素として IronPython 2.7 スクリプトを実行できる
Power Automate Desktop で Python スクリプトの実行というのを試しているが、どうやら Python 2 なのね。。 pic.twitter.com/f07kduCZPd
— にしもつ (@24motz) May 23, 2021
Power Automate で NVDA 日本語版のサイトを開いて、現在のバージョンを取得してメッセージボックスを表示する。さすがに日本語文字列に u をつける必要はなかった pic.twitter.com/hQi4gkNF4b
— にしもつ (@24motz) May 23, 2021
Python じゃないけど、さっき読んだ PowerShell で Speech API を叩くやつを Power Automate Desktop で実行できますね。。 pic.twitter.com/himi7yw9Rv
— にしもつ (@24motz) May 23, 2021
RPA で Web オートメーション作ろうとして button じゃない要素をクリックできない問題、アクセシビリティそのものである。。
— にしもつ (@24motz) May 23, 2021
Web オートメーションで押せないボタンを押すために ブラウザを最大化して NVDA のオブジェクトナビゲーションで座標を調べて、マウスカーソル移動してクリックというテクニックを実装した。なるほどアクセシビリティのハックだ。。
— にしもつ (@24motz) May 23, 2021
