Google、Gemini 3.5 FlashにPC・スマホ操作を自動実行する「コンピューター使用」機能を追加 | テクノエッジ TechnoEdge
この記事で分かること
GoogleがGemini 3.5 FlashにPCやスマートフォンの操作を自動実行する「コンピューター使用」機能を追加した。この機能を使えば、画面上の操作をAIに任せてアプリの起動やファイル操作などを自動化できる。具体的には、複数ステップが必要な定型作業をGeminiに指示するだけで実行されるため、手動操作の手間を削減できる。
詳細要約
Gemini 3.5 FlashにPCやスマホの画面を認識し、クリックや入力を自動実行する「コンピューター使用」機能が統合された。開発者はこのモデルを使い、ブラウザやデスクトップ環境をまたいで動作するカスタムエージェントを構築できる。実際の利用では、ソフトウェアの継続的なテストや複数の業務アプリを横断する知識作業の自動化に活用できる。なお、悪意ある入力による意図しない操作を防ぐため、標的型の敵対的トレーニングが施されている。