test-oracles

LLMはMetamorphic Relationsを提案できる。しかし保証はできない。

大規模言語モデルはtest oracleの発見において悪くないブレインストーミングパートナーだが、性質を幻覚し、ドメイン制約を見落とす。それらを、怪しいテストをリリースすることなく使う方法を解説する。