ああ、そこからさらに画面を操作させるってことか？
それはそれで、操作させるエージェントが既に出てきてるから、あとは技術の組合せだな