Power Automate for desktopの「ウィンドウからデータを抽出する」アクションを使ってみたハナシ

Power Automate for desktop クイズを作っているときに発見したアクション「ウィンドウからデータを抽出する」👀✨

気になり過ぎる…！🤩
OCRではなさそうなので、文字情報を読み取る感じかな？🤔

きぬあささんのPower Automate for desktopのアクション一覧が、もしかしたら このアクションを使っていたり…？！と思ったけど、

PADでPADの操作ができるとそれはそれで面白いと思いますが😁、実はスクリプトからUIオートメーションを使ってPADの画面情報を抜き出しています👍

— きぬあさ (@kinuasa) September 29, 2022

そか、WinActorだってWinActor自身の操作はできないわ💦
ごもっとも😂

でももしかしたらこんなやり方で、できる可能性もなきにしもあらず…？

ありがとうございます！🙏🏻
このあたり↓を使えばリモートデスクトップ経由で操作できるかもしれないですが、さすがにそこまでは試してないですねー😅 https://t.co/KzmteB8DiJ

— きぬあさ (@kinuasa) September 29, 2022

検証するには ちょっと私にはハードルが高いので、それではUiPathで試してみよう😋

アクション「ウィンドウからデータを抽出する」、設定するのは「ウィンドウ」といいつつ、UI要素みたい。

そしてUiPathの…
うっ、UiPathのアクティビティが進化し過ぎていて よくわからぬ…！
( ;つд⊂)ｺﾞｼｺﾞｼ

とりあえず言葉がわかりやすいこのへんが読み取れるのか試してみる✊

「UI要素の追加」を押して…

ここで Ctrl＋左クリック。

取れた！

抽出したデータの保存場所を「変数」に変更。

そして「保存」。

いざ、実行！(。・Α・)σﾎﾟﾁｯ

なんか取れてる！！🤩

すごい！ちゃんとテキスト取れてる！！😍

 面白いな～ このアクション🤤
PADはPDFのテキストを抽出するアクションもあるけど、こっちも便利そうですね！

夢広がるな～🌈✨