AutoGLM：クラウド上のスマホとPCでタスクを代行するエージェント

AutoGLM とは

AutoGLM は Zhipu AI が開発したクラウド型エージェントアプリです。各ユーザーにクラウドスマホ1台とクラウドPC1台が割り当てられ、自然言語で指示を出すだけで、アプリの起動、Webサイトの閲覧、出前の注文、ホテルの予約、スライドやWebページの作成、動画の生成といったタスクをクラウド上のデバイスで自動的に実行します。

一般的なローカルアシスタントとは異なり、AutoGLM の処理はすべてクラウドで行われます。手元の端末の計算資源やストレージを消費せず、作業中のほかの操作を邪魔することもありません。遠くのデータセンターにいる助手に端末操作を任せるようなもので、こちらは「何をしたいか」を伝えれば、タップや画面遷移、情報の転記までを引き受けてくれます。

主な機能

クラウドデバイスの操作。 各ユーザーに割り当てられるクラウドスマホとクラウドPCはクラウドデータセンターで稼働し、完全なOSとアプリのエコシステムを備えています。自然言語の指示で遠隔操作でき、操作感は実機に近いものです。

タスクの自動実行。 モバイルアプリの操作、アプリ間の連携、Webタスクの実行を自動でこなします。公開されている例としては、アプリの起動、Web閲覧、出前の注文、ホテルの予約、スライドやWebページの作成、動画の生成があります。

複数アプリの連携。 複数のアプリをまたいで協調動作できます。たとえばあるアプリで取得した情報を別のアプリで利用するなど、人手で切り替えながら行っていた手順をつなげてくれます。

インストールも接続も不要。 タスクはすべてクラウド側で完結するため、ローカル端末に追加の環境を入れる必要も、接続を維持する必要もありません。ローカルのリソースを消費せず、手元の作業を中断させません。

使い方

1. AutoGLM を開き、利用可能なクラウドスマホまたはクラウドPCが割り当てられているか確認します。
2. やりたいタスクを自然言語で記述します。目標、対象のアプリやサイト、重要な制約をなるべく具体的に伝えます。
3. AutoGLM がクラウドデバイス上で作業している間、手元では別の作業を続けられます。
4. 実行結果と生成物を確認し、修正が必要なら追加の指示を出して調整させます。

向いている場面

• 日常の用事代行：出前の注文やホテルの予約など、操作が連続するモバイルの手順。
• オフィス作業：スライド作成、Webページ作成、動画生成など、成果物が明確なタスク。
• 情報収集と転記：複数のWebサイトやアプリを横断して情報を探し、まとめる作業。
• ローカル端末を空けたいとき：裏で処理を完了させ、手元のリソースを使いたくない場合。

制限と注意点

• クラウドデバイスに依存するため、実行中は安定したネットワーク接続が必要です。
• アカウントのログイン、決済、個人情報の入力を伴う工程では、利用者自身が授权範囲と情報の取り扱いを判断する必要があります。
• タスクが複雑なほど指示は具体的に書く必要があります。目的が曖昧だと、想定と異なる手順で進む可能性があります。
• 公開情報には具体的な料金やプランの記載がないため、利用可能範囲は製品内の案内に従います。

よくある質問

AutoGLM はほかのAIアシスタントと何が違うのですか？ チャット画面で答えるだけでなく、割り当てられたクラウドスマホとクラウドPC上で実際に操作し、タスクのタップや手順そのものを代行する点が異なります。

ローカル端末に何かインストールする必要はありますか？ 必要ありません。すべての処理はクラウドで実行され、ローカル端末のリソースを消費せず、作業中の操作を中断することもありません。

複数のアプリにまたがるタスクも処理できますか？ はい。あるアプリで取得した情報を別のアプリで使うような複数アプリの連携に対応しており、Webタスクの実行も可能です。