「エージェントの最終試験(Agents' Last Exam)」は、バークレーRDIと300人以上の業界専門家が構築した大規模ベンチマークであり、55のサブ産業と1,500以上のタスクをカバーし、長期的で経済的に価値があり検証可能な現実のワークフローにおけるAIエージェントの性能を評価します。Adobe After Effects、Siemens NX、Unreal Engineなどのプロフェッショナルソフトウェアを使用し、アニメーション、エンジニアリング、ゲーム開発、製造、建築、神経科学などの分野でエージェントの能力を測定します。
Google Cloud は、信頼できないコードやエージェントワークロードを実行するためのネイティブで安全かつ超高速なランタイム環境である Cloud Run サンドボックスのパブリックプレビューを発表しました。ミリ秒単位で起動し、LLMコードインタプリタ、ヘッドレスブラウザ、ユーザー送信コード実行などのユースケースをサポートし、資格情報の分離、デフォルト拒否のネットワーク、読み取り専用ファイルシステムによるゼロトラストセキュリティを提供します。
本記事では、Amazon SageMaker HyperPod 推論の新機能 5 つを紹介します。監査とモデル改善のためのマルチティアデータキャプチャ、Hugging Face Hub からの直接デプロイ、コールドスタート高速化のためのローカル NVMe モデル読み込み、カスタムドメインの自動 Route 53 DNS 管理、カスタムサービスアカウントによるポッドレベル IAM です。これらの機能により、エンタープライズ向け生成 AI ワークロードのための、より高速で可観測性が高く柔軟な推論インフラストラクチャが実現します。