OpenAIの新AI「Dots」がPC操作を代行 人間より高速な作業を実現

米OpenAIのエンジニアが、新開発のパーソナルAI「Dots」のコンピューター操作機能について説明しました。Dotsは人間がマウスやキーボードで行うPC作業を代行する技術です。現在、多くのタスクで平均的な人間よりも速く作業を完了できる性能があると報告されています。

人間以上にこなすPC操作

DotsはLinux仮想コンピュータ上でブラウザやデスクトップアプリを操作します。単に作業を代行するだけでなく、必要に応じてJavaScriptを書いて操作をまとめたり、複数の処理を並行させたりする効率的な実行が可能です。開発担当者は、数時間かかるような複雑な注文タスクを15分で完了できた例を挙げています。今後は熟練したユーザーと同等以上の操作速度を目指すとしています。

Webサイトの内部情報も活用

Dotsの強みは操作の速さだけではありません。Appshotという仕組みにより、Dotsは画面の画像だけでなく、アプリやWebページの内部構造も取得できます。人間には見えないリンク先のURLや、画面表示が省略された予定名などの情報を把握して処理に利用できるのが特徴です。

■ まとめ

OpenAIの「Dots」は、人間を上回る速度でPC上の様々な作業を代行するAI機能です。Webサイトの内部情報を取得する能力も備えており、業務効率化への活用が期待されています。