AutoGLM：音声とテキストで操作する知能を利用したコンピュータと携帯電話の自動操作

AutoGLMはZhipuAI（ZhipuAI）が開発したAIインテリジェントボディアプリケーションである。単なるチャットボットではなく、実際に操作できるエグゼクティブアシスタントである。ユーザーは簡単な自然言語コマンドによって、AutoGLMにクラウド上の仮想コンピュータや携帯電話で様々なタスクを自律的に実行させることができる。例えば、Jitterbug、Meituan、Xiaohongshuなど、一般的に使用されている40以上の携帯電話アプリケーションを自動的に操作したり、PPT作成、文書作成、検索、情報整理などのオフィスタスクを完了することができる。 AutoGLMのコア技術は、Smart Spectrumが自社開発したGLM-4.5グランドモデルに基づいており、強力な推論能力とマルチモーダル処理能力を備えている。 AutoGLMは、専用のクラウドデバイス（クラウドコンピューターまたはクラウドケータイ）をユーザーに割り当ててコマンドを実行する。つまり、タスクはユーザー自身のコンピューターや携帯電話とは完全に独立して実行され、ユーザーは自分のデバイスを別のことに使い続けながらAIに作業を任せることができる。

機能一覧

• クロスアプリケーション操作クラウドベースのデバイス上で、自然言語コマンドによる複数のアプリケーションの自動操作をサポートし、オフィス、生活、エンターテインメントの各シーンをカバー。
• 自動化されたオフィスワークトピックに基づいた情報の自動ググり、分析、要約から、プレゼンテーション（PPT）、ショートビデオ、ポッドキャストなどのコンテンツ生成まで、オフィス業務をフルフローで処理する能力。
• ライフ・サービスMeituan、Jingdong、Jieyin、Xiaohongshuなど、一般的に使用されている40以上のアプリを自動的に操作し、テイクアウトの注文、航空券の予約、オンラインショッピング、コンテンツの投稿などの操作を完了することができます。
• クラウド実行ファイルすべてのタスクはクラウドベースの別個の仮想環境で実行され、ユーザーのローカルデバイスでの現在の作業を中断することなく、真のバックオフィス「プロキシオフィス」を実現する。
• ミッションの計画と理解タスクプランニングと画面情報理解能力が高く、ユーザーのコマンドを独自に分析し、タスクを完了するための最適なステップを計画できる。
• マルチモーダルなコンテンツ生成AIビデオ、AIプレゼンテーション、AIウェブページ、AIポッドキャストなど、複数のコンテンツ形式の生成をサポートします。

ヘルプの使用

AutoGLMは、プログラミングや複雑な設定なしに、自然言語でコマンドを与えるだけで、AIインテリジェンスに仕事をさせることができる使いやすいインターフェースの背後に、AI技術の複雑さをカプセル化します。その中核となるのが、クラウド上の仮想コンピューター環境である「エージェント・コンピューター」であり、そこでユーザーはAIに業務を代行させることができる。

核となる使用プロセス：

1. アクセスとログインまず、ブラウザからAutoGLMの公式サイトにアクセスしてください。 https://autoglm.zhipuai.cn/.開始するにはSmart Spectrum AIアカウントにログインする必要があります。
2. クラウドコンピュータの起動メイン画面に入ると "AutoGLM's Computer "というエリアがあります。初めて使うときは启动云机ボタンをクリックします。これにより、専用のクラウドコンピュータが割り当てられ、起動します。起動に成功すると、クラウドコンピュータのライブデスクトップ画面が表示されます。
3. 指示を出すページ下部のダイアログ・ボックスに、AutoGLMに実行させたいタスクをテキストで入力します。指示は明確かつ直接的でなければならない。例
   • 市場分析に関するPPTを作りたい場合は、"2025年の新エネルギー車市場の発展動向に関するPPTを作るのを手伝ってください。内容は、市場規模、主要ブランドの競争状況、将来の技術の方向性などを含める必要があります。"と入力します。
   • データを分析したい場合は、"この決算資料を分析し、主要な財務指標を抽出して、Markdown形式で要約を作成してください "と入力できます。
   • 特定の分野について知りたい場合は、"医療におけるAIの使用に関する最近のニュースを検索し、レポートにまとめる "と入力できる。
4. タスクの実行と監視::
   • リアルタイム・モニタリングタスクを送信すると、AutoGLM Intelligentはクラウドコンピュータのデスクトップ環境で作業を開始します。ブラウザを開いたり、情報を検索したり、PPTソフトを開いたり、テキストを入力したり、画像を挿入したりと、まるでリモートデスクトップを見ているかのように、その操作のすべてのステップをリアルタイムで見ることができます。
   • 自律的プランニングAIはまずタスクを分解して計画し、それをステップ・バイ・ステップで実行する。例えば、PPTを作成するタスクでは、まずインターネットで関連情報やデータを検索し、それらの情報を照合し、最後にプレゼンテーションソフトを開いて作成します。
   • 介入の必要なしAIがタスクを実行している間、手動で介入する必要はほとんどありません。このプロセスは高度に自動化されており、クラウド上で実行されるため、他のことをするためにいつでもページを閉じることができ、タスクはバックグラウンドで実行され続ける。
5. 結果を出す::
   • タスク完了後、生成されたファイル（PPT、Word文書、ビデオなど）は、クラウドコンピュータのデスクトップまたは指定のフォルダに保存される。
   • インターフェイスが提供するファイル管理機能を使って、クラウドコンピュータから自分のローカルコンピュータに最終ファイルをダウンロードできる。

機能の操作例：

• PPTの作成子供の集中力の発達 "に関するPPTが必要な場合、コマンドボックスに "子供の集中力を発達させる方法に関するPPTを作成する "と入力するだけで、AutoGLMは自動的にブラウザを起動し、関連するコンテンツを検索し、情報をフィルタリングして整理します。AutoGLMは自動的にブラウザを起動して関連するコンテンツを検索し、情報をフィルタリングして整理し、PPTアプリケーションを開いてコンテンツをページごとのプレゼンテーションに整理し、最終的に完全なPPTファイルを生成してダウンロードできるようにします。
• 分析を書く金価格を分析する必要があれば、「今日の金価格の動きを分析し、Markdownレポートを作成する」と入力すれば、AIが最新の金融データやニュースを探し、分析し、エディターを使って明確に構造化されたMarkdown文書を作成する。

アプリケーションシナリオ

1. 職場オフィス
   オフィスのシナリオでは、AutoGLMは効率的なバーチャルアシスタントとして機能します。市場分析レポートやプロジェクトのプレゼンテーションを作成する必要がある場合、例えば「過去2年間の不動産業界の発展に関するPPTを作成するのを手伝ってほしい」といった要件を提示するだけで、AIが自動的にインターネットからデータを検索し、情報を分析し、概要を照合し、最終的に構造化されたPPTを生成することができます。 これにより、従業員が情報収集に費やす時間を大幅に節約できます。これにより、従業員が情報収集や事前コンテンツ制作に費やす時間を大幅に節約できる。
2. セルフ・メディアとコンテンツ制作
   AutoGLMは、セルフメディア・クリエイターのために、トピックの選択から素材の整理、コンテンツの公開まで、一連のプロセスを支援することができる。 例えば、クリエイターはAIに「"銀髪エコノミー "をテーマにしたポッドキャストを企画・制作してほしい」「ミュウミュウの夏の新商品に関する情報を集約し、デザインの見どころを紹介する短いビデオスクリプトを制作してほしい」と指示することができる。AIはデータ収集とコンテンツの初稿を素早く完成させることができ、クリエイターのコンテンツ制作の効率化を支援する。
3. パーソナル・ライフ・アシスタント
   日常生活では、AutoGLMは様々な携帯電話アプリケーションを操作し、ユーザーに代わって日々の雑用をこなすことができる。 ユーザーはワンセンテンスのコマンドで、AIに美団でミルクティーを注文し、自動的にクーポンを使用するように頼んだり、京東で特定の商品を購入したりすることができる。 タスクはクラウドフォン上で実行されるため、すべてのプロセスはユーザーが行っているゲームやビデオ通話を中断することはなく、生活がより簡単になる。
4. 学術研究
   学生や研究者は、AutoGLMを使って文献検索や情報の照合を行うことができる。例えば、論文を執筆する際に「『気候変動予測における機械学習』に関する過去5年間の学術論文を検索し、要約する」とAIに指示すれば、AIが自動的に学術サイトを検索して文献レビューレポートをまとめ、研究者がこの分野の最先端を素早く理解できるよう支援する。AIが自動的に学術サイトを検索して文献レビューレポートをまとめ、研究者がこの分野の最先端を素早く理解できるよう支援する。

品質保証

1. AutoGLMがタスクを実行する際、私自身の電話やコンピュータを引き継ぎますか？
   AutoGLMの中核機能のひとつは、「クラウドフォン」と「クラウドコンピュータ」を使用してタスクを実行することです。 すべての操作はウィズダムスペクトラムAIのクラウドサーバー上で行われ、ユーザーのローカルデバイスの画面、コンピューティングリソース、ネットワークは使用されません。AIがタスクを実行している間、ユーザーは自分の端末を他の活動に使うことができる。
2. AutoGLMを使ってアプリのアカウントを操作しても安全ですか？
   アカウントのセキュリティとプライバシーの認証は、特に個人アカウントへのログインを必要とするアプリケーションに関しては、自動化中の重要な問題です。autoGLMは、このような問題に特別な注意を払うように設計されており、支払いや確認が必要な重要な点はユーザー自身に任されています。 とはいえ、このようなスマート・ボディを使用する場合、ユーザーは公式のセキュリティ指示とプライバシー・ポリシーに注意を払う必要がある。
3. AutoGLMはどのようなアプリケーションやタスクをサポートしていますか？
   現在、AutoGLMは40以上の主流・高頻度利用アプリケーションをサポートしており、ソーシャル（例：Xiaohongshu）、コマース（例：Jingdong、Meituan）、旅行、コンテンツなど幅広い分野をカバーしている。 タスクの種類としては、情報検索やコンテンツ作成などのオンラインタスクだけでなく、PPT、ショートビデオ、ポッドキャストなど様々な形式のファイルを生成することができる。
4. AutoGLMは他のAIアシスタントとどう違うのですか？
   主な違いは、ほとんどのAIアシスタントは「対話」や「問い合わせ」のレベルにとどまり、質問に答えたり情報を提供したりするだけだ。 一方、AutoGLMは、コマンドを理解するだけでなく、実際に「手を動かして」ソフトウェアやアプリケーションを操作してタスクを完了させ、コマンドを実際の行動や結果に変える「エグゼクティブ」インテリジェンスである。