提案書骨子の生成、参考資料が4000字を超えるとAIの順位が入れ替わる理由を検証した
この記事で分かること
長文の参考資料をAIに渡すとき、出力結果の評価順位が4000字前後で変わる現象を確かめられる。資料量と生成品質の関係を見ることで、提案書の骨子を作る際にどの程度の資料を渡すべきか判断できる。
詳細要約
参考資料が4000字を超えると、生成結果の評価順位が変動するため、資料量を条件に含めた選定判断が有効だ。4000字以内で安定する方式が、超過後に必ずしも上位とは限らない。長文資料を扱う際は、複数方式で出力を比較し、順位の入れ替わりを確認してから採用を決めるのが実用的な進め方になる。