動画で学ぶレッスン
エージェント・ハーネス:汎用ループから証拠に基づくカスタムシステムへ
エージェント・ハーネスがコンテキストを組み立て、ツールを動かし、用途に合わせて専門化し、プライベート評価と可観測性を使ってモデル・コンテキスト・ハーネスを改善する方法を、出典に基づいて学びます。
章一覧
どこから読み始めますか
- 01なぜハーネスと評価を検討する必要があるのか0:00 - 1:00
- 02知能を担うモデル、コンテキスト、ハーネス1:00 - 2:46
- 03汎用エージェントループとミドルウェアの調整点2:46 - 5:22
- 04汎用ハーネスからドメイン特化の認知フローへ5:22 - 7:36
- 05分布のずれがカスタムハーネスを必要にする場合7:36 - 9:08
- 06プライベート評価、可観測性、学習ループ9:08 - 10:32
- 07Harborでエージェントのタスクを比較可能なベンチマークにする10:32 - 13:06
- 08可観測性でエージェントの失敗への道筋を明らかにする13:06 - 14:41
- 09エージェントを継続的に改善するデータフライホイール14:41 - 17:31
- 10LangSmith Engineでトレースの整理と修正を自動化する17:31 - 19:20
- 11Engineを自社利用し、ハーネスの動作をベンチマークする19:20 - 20:48
- 12既製から完全カスタムまでの未解決の幅20:48 - 23:57