![[PukiWiki]](image/pukiwiki.png "[PukiWiki]")
「[[.NET 開発基盤部会 Wiki>http://dotnetdevelopmentinfrastructure.osscons.jp]]」は、「[[Open棟梁Project>https://github.com/OpenTouryoProject/]]」,「[[OSSコンソーシアム .NET開発基盤部会>https://www.osscons.jp/dotNetDevelopmentInfrastructure/]]」によって運営されています。 -[[戻る>テキスト生成系（Transformer系）#j2f01d54]] > [[チューニング、拡張系>テキスト生成系（Transformer系）#j2f01d54]] --[[LLMのPE]] --[[LLMのRAG]] --[[LLMのFT]] --LLMエージェント *目次 [#w1ac513b] #contents *概要 [#l87448a9] -情報の収集・解析・意思決定・アクション実行を行うシステム -あるサーベイ論文では、AIエージェントを「脳」「知覚」「アクション」という3つの要素で整理。~ 入力を「知覚」し「アクション」を計画的に実行する「脳」としてAIが機能することで、タスクを代行する。 -LLMエージェントについて「タスクを代行するもの」であるとして、最も原始的な実装であれば --入力に対応したワークフローを代行するようなものでも、エージェントと呼ぶことはできる。 --ただし、単一の呼び出しや、都度アドホック・プロンプト入力が必要なChatはエージェントとは呼べない。 *詳細 [#yae5a2c7] **エージェントの定義 [#x3f0673e] ***エージェントらしさ [#r5020403] 最近の、LLMエージェント研究や実装では、次の要素が増えるほど「エージェントっぽい」とされる（≒ [[自律性>#nc24bf4e]]）。 -LLMでタスク分解（[[大きな問題を理解し>#p5d5592a]]、[[個々の実行ステップに分割>#yf54d847]]） -LLMでアクションの選択・実行（[[ツール利用>#rd3d937a]]、[[Function calling>#m3aa0a0b]]、[[構造化出力>LlamaIndex#k86bd814]]） -[[状態管理（メモリや履歴を使って文脈を保持）>#o650a86f]] -LLMで[[自己評価>#e17f59ae]]・[[再試行>#o23b2ef2]]（出力が不十分なら修正を試みる） -[[エージェントが協働できるエージェント環境>#w3c0edeb]] ***デザインパターン [#b9cf192e] Anthropic社が提示するデザインパターンが適用されている。 -ワークフローを持つエージェント・システムの5つのデザインパターン --プロンプト・チェイニング：固定された一連のサブタスクに分解し、LLM呼び出しを連鎖させる方式 --ルーティング：LLMが入力を分類し、専門性の異なる複数のLLMの中から最適なものを選択 --パラレライゼーション：「コードが」タスクを複数に分割し、複数のLLMで同時処理、結果を束ねる。 --オーケストレーター・ワーカー：「LLMが」複雑なタスクを複数に分割し、複数のLLMで同時処理、結果を束ねる。 --エバリュエーター・オプティマイザー：生成LLM と 評価LLM の二段構えのフィードバックループ -ワークフローの対局、オープンエンド型のエージェントデザインパターン --固定パスがない：一連のステップに従うのではなく、動的で流動的。 --継続可能でフィードバックループがある：LLMは環境から情報を受け取りつつ繰り返し行動できる。 --大きな柔軟性：より複雑で広範な問題を扱える。 --予測不可能性：パス（時間、コスト）、出力（品質）が予測できない。 --対策として、モニタリングやガードレールを実装 **構成要素 [#y67475f4] LLMエージェントは通常、以下のような構成要素を持ちます： ***LLM本体 [#x977ce4c] 自然言語の理解・生成を担当する中核部分。タスクの実行や推論を行う。 ***メモリ [#o650a86f] 会話履歴やタスクの進行状況などを保持。長期的な記憶も可能。 ***ツール / プラグイン [#rd3d937a] Web検索、計算、コード実行、API呼び出しなど、外部リソースと連携して作業を遂行。 ***コントローラー [#i48dd486] プランナーとLLMのやりとりを制御。ループを回す。 ***プランナー [#z829d8b0] ゴールに向けタスクを分割し、順序立てて実行計画を作る。 ***アクション実行器 [#l4d14f53] LLMの計画した出力に従って具体的なアクションを実行するモジュール。 **思考ループ（Reasoning Loop） [#nc24bf4e] 多くのLLMエージェントは以下のようなエージェント・ループで動作 ***タスクの理解（Goal Recognition） [#p5d5592a] ユーザーから与えられた指示や問いを分析し、何を達成すべきかを明確にする。 -自然言語で書かれた曖昧な指示から「最終的な目的」を推測する能力が求められる。 -LLMエージェントは、文脈や過去の対話履歴も考慮して目的を解釈する。 ***プランの生成（Plan） [#yf54d847] 目的を達成するための一連の手順や方針（プラン）を考案する。 -Web検索が必要 → 検索 → 情報要約 → 回答生成、のようなステップ分割。 -単純なプランではタスク分割、複雑なプランには外部ツール（計算機、検索エンジン等）との連携も含まれる。 ***次のアクションの選択（Reason） [#f32ac08b] -プランに基づき、今の状況において最も適切な次のアクションを選ぶ。 -「今なにをするべきか？」という意思決定プロセスであり、状況に応じた柔軟な判断が求められる。 -ここでは推論（Reasoning）能力が重要となる。 ***アクションの実行（Act） [#qfdf51a5] -選択したアクションを実行する。 -実行対象は、ツールの呼び出し、情報取得、外部APIへのアクセス、またはユーザーへの返答など。 -実行結果は次のステップに活かされる。 ***観測と反省（Reflect） [#e17f59ae] -アクションの結果を観察し、目的に近づいたか、想定とずれがないかを評価する。 -不十分な結果が出た場合は原因を考え、改善点を洗い出す。 -エージェントが「何がうまくいかなかったか」を自己評価する重要な段階。 ***再計画（Replan） [#o23b2ef2] -反省の結果に基づき、プランの修正・更新を行う。 -新たな情報や環境の変化に応じて、アクションの優先順位や順序を再構築する。 -その後、再び次のアクションの選択へとループが戻る。 --上記のステップを繰り返しながら、最終的な目標達成を目指す。 --このループは、ユーザーが満足する結果を得るまで、あるいは明示的な停止条件が満たされるまで続く。 --このような思考ループは、自律エージェントにおいて特に重要な「目的志向の行動」が可能となる基盤。 **応用研究 [#sc15bff4] -LLMベースのAIエージェントの5つの実装方法 -「ReAct」が有名だが他にも多くの手法がある。 ***MRKL [#qd594567] MRKL（Modular Reasoning, Knowledge and Language） -概要：AIエージェントが複数のツールを統合的に使うためのモジュラー・アーキテクチャ。 -特徴：モデルが入力を解析し、適切なツールにタスクを振り分けて実行。LLMは「どのツールを使うべきか」を推論する役割。 -MRKLは、OpenAIの論文「ReAct: Synergizing Reasoning and Acting in Language Models」などでも言及されている。 ***[[ReAct>LLMのPE#pc31e54c]] [#r03947ad] ReAct（Reasoning + Acting） -概要：思考（Reasoning）と行動（Acting）を交互に繰り返すことで、LLMがより柔軟かつ強力な問題解決を行うフレームワーク。 -特徴：推論と行動を逐次的に交互に行う。例：検索 → 仮説立て → 電卓使用 → 結論。 -論文：Yao et al., 2022（例：「Let's think step by step」のようなプロンプト技法を拡張） -エージェントはActだけでも実装できるが、Reason（思考過程を言語化）してからAct（実行内容を言語化）させる「ReAct」の精度がよかったという論文 --Reasonなし・Actなし --Reasonあり・Actなし (CoT) --Reasonなし・Actあり (WebGPTのようなもの) --Reasonあり・Actあり (ReAct) ***Plan-and-Solve [#p087498c] -概要：問題を解く前に、まず全体の計画（Plan）を立て、それに従ってステップごとに解決するプロンプト設計手法。 -特徴：「まず計画を立ててから解く」→ 思考の整理ができ、正確な回答率が上がる。[[CoT>LLMのPE#mc4f37b5]]の[[ような技法>LLMのPE#ffa8b1bb]]と組み合わせて使用される。 ***LLMCompiler [#x6b8eb95] -概要：タスクの自然言語仕様をプログラム的な実行計画やコードに「コンパイル」するLLMベースの手法。 -特徴：LLMが自然言語からタスクグラフや関数構成などを生成。プログラムのような表現を通じて複雑なタスクを実行可能にする。 -応用：マルチステップの意思決定やエージェントプランニングなど。 ※ LlamalndexやLangGraphでも利用可能とのこと。 **例と工夫 [#w5c1dc8d] 以下の5つの分野の有名なAIエージェントとその工夫 ***リサーチ [#n67454cf] GPT Researcher -核となるアイデアは「プランナー」と「実行」のエージェント -https://github.com/assafelovic/gpt-researcher ***シミュレーション [#x1afcf67] Generative Agents -25人のAIエージェントを仮想的な街で生活させるシミュレーション -Memoryの工夫が有名、最新性・重要性・関係性のあるものを検索して使用 -https://github.com/joonspk-research/generative_agents ***ゲーム [#t32a359f] -Voyager --できるだけ多様な発見をすることを最終目標として行動するMinecraftを自動プレイするAIエージェント --Minecraftのクライアントライブラリ (JavaScript)を使った「スキル」を生成して使用 -PokéLLMon --過去のターンのフィードバックやポケモンの技などの外部知識をプロンプトに含めることで、不利な選択をしないように制御 --相手が強力なポケモンだとパニック状態になってポケモンの入れ替えを繰り返すのを防ぐよう、Self-Consistency (自己整合性) プロンプティングを使用 ***ソフトウェア開発 [#w081ec72] -GPT-Engineer --自動でプログラムを実装するという分野で話題になったエージェント --「こういう機能を開発して」と記述しておくと、自動でプログラムを実装してくれる --https://github.com/gpt-engineer-org/gpt-engineer --https://apt-engineer.readthedocs.io/en/latest/index.html -ChatDev --プログラマー・テスター・デザイナーなど、様々な役割のAIエージェントに共同作業させて、自動でソフトウェアを開発させる ***汎用のコンピュータ操作 [#c74d6746] -Open Interpreter --自然言語の指示でコンピュータを操作するツール --https://github.com/KillianLucas/open-interpreter/ -OS-Copilot --OSの操作を提供するエージェント --https://github.com/OS-Copilot/FRIDAY **標準化[#ua28b97f] ***対象 [#g9407347] -[[Function calling>#m3aa0a0b]] API~ ツール/関数をLLMに呼ばせる標準仕様（OpenAIやAnthropicなどが実装） -Tool Registry / Metadata~ ツールや機能の定義情報（引数、用途など）を共有するためのスキーマ -Agent-to-Agent Protocols~ 複数エージェントがやり取りする際の通信仕様（メッセージ構造や状態管理） -Observability~ エージェントの動作トレース、ログ記録の標準フォーマット（OpenTelemetryなどと連携） ***団体 [#lf10a971] -OpenAI~ Open Agents、[[Function calling>#m3aa0a0b]] APIの提案 -LangChain~ LangGraph、LangServeで標準的な構成提供 -Anthropic, Google, Meta~ 独自API提供＋相互運用性の議論に参加（例: AI Alliance） -W3C / ISOなど~ 将来的な正式標準化の議論も一部で始動 -Agent Protocol Community~ 自主的なコミュニティ駆動の標準仕様作成 ***Function calling [#m3aa0a0b] LLMに特定のAPIや関数を呼び出させ外部タスクを実行する仕組み。 -LLMが何をどう呼び出すかを自動的に決定 -LLMが自然言語から適切な関数名と引数を構造化出力（JSON）。 -関数をLLMに「使わせる」ことで、外部のツール・APIと接続可 -高精度なツール選択と使い分けが可能 **プロトコル [#n9a368ce] ***[[MCP（Model Context Protocol）]] [#ycd944bc] ***[[ACP（Agent Communication Protocol）]] [#j73e527d] **マルチエージェント [#w3c0edeb] LLMマルチエージェントは、LLMを用いた複数のエージェントが連携・協調・競合しながらタスクを遂行するシステムや枠組みのことを指す。 ***利用例 [#t1bb2c84] -ソフトウェア開発支援：プロジェクトの要件を受けて、複数のエージェントが設計、実装、レビュー、テストを分担。 -複雑な意思決定支援：複数の視点から情報を収集・分析し、意見を統合して提案を生成。 -教育やチュータリング：異なる学習スタイルや領域に対応した複数のエージェントが、個別に支援。 ***役割分担 [#d60991a4] 各エージェントは専門性を持たせ、以下のような役割に分かれることが多い -プランナー（Planner）：全体の戦略やステップを立案 -リサーチャー（Researcher）：外部情報を収集・分析 -エンジニア（Coder）：コードを生成・検証 -レビュワー（Reviewer）：他エージェントの出力を評価・改善提案 -メタ・エージェント：全体を制御する「指揮官」的エージェント（オーケストレーター、マネージャーなど） ***PE技法 [#v38841de] [[Self-Consistency, GKP, Self-Ask, ToT, AoTといったPE>LLMのPE#ffa8b1bb]]の推論促進技法の構造やアイデアを、明示的または暗黙的にシミュレーションしている。 -Self-Consistency（自己整合性） --関係性：マルチエージェントが独立に推論を行い、それらの出力から最も整合的なものを選ぶという点で一致。 --シミュレーション性：高い。各エージェントを一つの「自己実行のバリエーション」と見なすことで、Self-Consistencyの仕組みと同様の効果が得られる。 -GKP（Generated Knowledge Prompting） --関係性：あるエージェントが生成した知識を別のエージェントが利用するという点で、GKP的。 --シミュレーション性：中〜高。知識共有や知識ベースのプロンプティングが実装されていれば、かなり近い。 -Self-Ask --関係性：タスク分解や質問の生成→他エージェントに解決させるプロセスが、Self-Askの「質問して自分で答える」構造に似る。 --シミュレーション性：高。特に質問応答・サブタスク分担型のマルチエージェントシステムでは、Self-Askに近い設計になる。 -ToT（Tree of Thoughts） --関係性：各エージェントが「思考の分岐」や「候補生成」に相当する役割を担うことで、ToTの木構造探索を模倣。 --シミュレーション性：中〜高。特に評価・選択メカニズムを持つマルチエージェント構成では、ToT的な探索が可能。 -AoT（Algorithm of Thoughts） --関係性：タスク解決を「アルゴリズム」として明示的に分解し、各部分をエージェントに割り当てることで、AoTに似た形になる。 --シミュレーション性：高。構造化された役割分担とステップ的な思考展開はAoTそのものに近い。 ***実装例 [#abe27875] -Generative Agents --架空の町（例: Smallville）に複数のエージェントが暮らし、日常生活を送る。 --各エージェントは「観察」「記憶」「計画」「行動」などのモジュールを持つ。 --GPT-4などのLLMで内面の思考・対話・行動を生成。 -ChatDev： --開発プロセスを企業のようにモデル化（例: CEO、CTO、プログラマー、テスターなどの役割）。 --各役職に対応するLLMエージェントが協調してコードを設計・実装・レビュー。 --各フェーズでチャットを通じて議論・意思決定。 ***繋がり方 [#u969328f] -同期的チャット：エージェント同士がリアルタイムで交互に発言。 -非同期メッセージパッシング：あるエージェントがメッセージを送信し、他のエージェントが後から反応。 -ブラックボードアーキテクチャ：共通の「知識ベース」や「ワークスペース」を全エージェントが読み書き。 -メモリ共有と再利用：各エージェントが記憶や知識を共有する仕組み。 -オーケストレーション（制御）：マスターエージェントやタスクマネージャが全体の進行を制御。 **フレームワーク [#v6874125] ***[[OpenAI Agents SDK>The Complete Agentic AI Engineering Course (2025)#c23688fe]] [#r5b1d61d] OpenAIによって2024年夏に発表された新SDK ***[[OpenAI Agents SDK]] [#r5b1d61d] -[[Function calling>#m3aa0a0b]]の進化系で、LLMがタスクに応じて自動的にツール呼び出し・ワークフロー制御を行う。 ***[[CrewAI]] [#s540afde] -MCP (Model Context Protocol) をベースに、エージェントと外部ツール・データソースを標準化して接続できる。 -「公式エコシステム標準」になりやすく、今後のOpenAI製品と高い互換性を持つ。 -ツール連携の標準化、公式GPTsの外部拡張、社内アプリなど実用的なエージェント開発、 ***[[CrewAI>The Complete Agentic AI Engineering Course (2025)#h7fab763]] [#s540afde] ***[[LangGraph]] [#q3447d17] ***[[AutoGen]] [#p245766b] *参考 [#c6364fe2] https://speakerdeck.com/os1ma/imakosoxue-bullmbesunoaiezientoru-men-ji-ben-de-nasikumi-slash-kai-fa-turu-slash-you-ming-naossyalun-wen-noshao-jie
