1. AIと仕事の仕組み化ラジオ
  2. AIエージェント日次速報 2026..
AIエージェント日次速報 2026年11月17日版 呼び出すスクリプトが読む答えの形を、自由な文章にせず項目で先に決める
2026-11-17 05:58

AIエージェント日次速報 2026年11月17日版 呼び出すスクリプトが読む答えの形を、自由な文章にせず項目で先に決める

おたよりを送る
夜間のスクリプトからエージェントを呼び、返ってきた文章に「完了」という語があれば成功とみなして次の工程へ進める。ある朝、その工程が空のまま走っていた。エージェントは「完了はしていないが、途中まで進めた」と返していて、文字列の検索は前半の一語だけを拾っていた。成功判定を言い回しに預けた時点で、事故はその時点で仕込まれていた。

自由な文章は、モデルが次の語を確率で選びながら生成するので、同じ依頼でも毎回少しずつ形が揺れる。語順、敬語、箇条書きの有無、結論の位置は保証されない。その揺れの上に正規表現や部分一致を載せると、読む側は言い回しの変化に弱い壊れ方をする。しかも壊れ方は静かで、例外にならず、誤った値のまま次の工程へ流れていく。

...

感想

まだ感想はありません。最初の1件を書きましょう!

00:00
これを聞いているあなたに、ちょっと想像してみてほしいんですが、 例えば、あなたが部下に仕事の進捗を聞いたとき、部下がまだ完了していませんって答えたとしますよね。
でも、もしあなたが最初の完了っていう2文字だけを聞き取って、あ、終わったんだなって勘違いしてしまったら、これって大事故につながりますよね。
いやー、それ想像するだけでゾッとしますね。
でも実は、今あなたが業務で使っているAIエージェントの裏側で、これと全く同じ静かな事故が起きているかもしれないんですよ。
静かな事故ですか?
ええ。つまり、AIが指示は読み終わりましたが、作業は完了していませんって丁寧に返しているのに、システム側が完了っていう文字だけを拾ってしまって、
ああ、なるほど。
そのまま空のデータをクライアントに送ってしまうみたいなケースですね。
まさに今回の徹底解説で取り上げる、あるITエンジニアの方の情報源に書かれていた事例がそれですよね。
そうなんです。
夜間に自動でAIを走らせるスクリプトで、特定のキーワードが含まれていたら次の工程に進むって設定にしていたら、見事にAIにすり抜けられてしまったっていう。
そうなんですよ。
でも、AIを自動化のパイプラインに組み込むなら、テキストの判定で進めるしかないんじゃないんですか?
まあ、そう思いますよね。でもそこが最大の罠なんですよ。
罠ですか?
はい。AIって確率に基づいて文章を生成するので、同じ指示を出しても語順とか敬語の有無が毎回変わるじゃないですか。
確かに毎回少し違う言い回しになりますね。
そこに正規表現とか部分一致のルールを当てはめてしまうと、エラーとして止まることすらなく、誤ったデータのまま静かにシステムが壊れていくんです。
いやー、怖いですね。AIの言い回しに判定を委ねるっていうのは、形を変え続ける揺れる砂の上にシステムを立てるようなものですね。
まさにその通りです。
じゃあ、砂じゃなくて岩盤の上に立てるにはどうすればいいんですか?
例えば、クロードとかに必ずJSON形式で出力しろって厳密に指示すれば解決するような気もするんですか?
そう思いたいところなんですが、実は違うんですよ。
今回の情報源で比較されている7つのツールの仕様を見ると、それぞれ全く違うアーキテクチャになっていて。
え、違うんですか?
例えばクロードコードの場合ですね、指示したスキーマ通りに出力できなかったとき、例外エラーを出して止まるわけじゃないんです。
エラーを出さないんですか?じゃあどうなるんですか?
なんと、Structured Outputっていうデータ項目、つまりキーそのものをしれっと消滅させるんですよ。
消滅?それじゃあキーが存在しないまま空のデータが下流に流れていっちゃうじゃないですか。
そうなんです。だから、実装側で値が正しいかだけじゃなくて、キーそのものが存在するかを最初にチェックする仕組みが必要なんですよね。
なるほど。
さらに、ジェンパークの例も厄介でして。
はい、どんな感じなんですか?
画面上とかログにCompleted、つまり完了って出力されても、それはあくまでタスクのプロセスが終わったっていう意味でしかなくて。
ってことは?
実際にブラウザ側にファイルが保存された保証はどこにもないんです。
03:01
うわぁ、言葉だけじゃなくて、システムの完了ステータスすら信用できないってことですか?
そういうことです。だからこそ、ファイルの実在確認っていう物理的なチェックが必須になるんです。
徹底してますね。
一方で、ハーメスエージェントとかオープンクローンなんかはアーキテクチャの思想が全く異なっていまして、
彼らはAIがここまで進めましたってどんなに丁寧に標準出力へテキストを出してきても、それは判定に使わないんです。
え?テキストを無視するんですか?じゃあ、どうやって成功と失敗を判断するんでしょう?
システムが回数、終了コードを使うんです。
終了コード?
正常終了なら0、エラーなら1とか2みたいに、OSレベルの終了コードや独立したステータス値だけで成否を判定するんですね。
あー、なるほど。それならAIの言い回しに一切影響されずに、確実に後続のシステムを分岐できますね。
優しい言葉に騙されず、終了コードっていう数字を見ろと。
その通りです。
でも、ツールごとにキーが消えるとか、ファイルが保存されないとか、終了コードを使うとか、こんなにバラバラだと管理する側はどうすればいいんでしょうか?
そこで、今回の情報源の著者が実践している非常に賢いアプローチが登場するんです。
コードを書き始める前に、答えの形カードと呼ばれるものを事前に定義しておくっていう。
答えの形カードですか?
はい。このツールでは、終了コードは何番なら成功とするか、キーが存在しない場合はどう例外処理するか、最終的なファイルの実在確認はどう行うか。
なるほど。それを事前に。
俺らをツールごとにカードとして埋めてルール化しておくことで、AIのテキスト出力とシステムとしての成功失敗の判定を完全に切り離すんです。
面白いですね。あなたがAIを単なるチャット相手じゃなくて、業務パイプラインの確実な歯車として組み込むなら、この答えの形カードの視点は必須スキルになりそうです。
間違いありません。ただですね、このカードの考え方は完璧な防弾仕様なんですけど、ふと疑問も湧いてくるんですよね。
と言いますと?
私たちは安全性を求めて、AIの出力を機械的で厳密な終了コードとか、キーの有無へとガチガチに縛り付けているわけじゃないですか?
エラーを防ぐために。
でもそれって、私たちがわざわざAIを使っている最大の理由、つまり想定外のひらめきとか柔軟な問題解決力みたいなものを無意識のうちに殺してしまっているんじゃないかって。
従来のただの融通が効かないスクリプトに逆行させているような気もするんですよ。
うわぁ、それは感慨させられますね。揺れる砂の上に家を建てないよう岩盤でガチガチに固めた結果、そこから芽吹くはずだったアイデアまでコンクリートで塞いでしまっているかもしれないっていう。
ええ、まさに安全性と創造性のジレンマですね。
ですね。あなたが次にAIへ指示を出して、その結果を完了とみなすとき、ぜひこの問いを思い出してみてください。
05:58

コメント

スクロール