精度99%でも不正を1件も見つけられない AIテストの8つの急所
電卓で2+2と打てば、答えが出る前から結果は分かっている。では、チャットボットに長いメールの要約を頼んだらどうか。照らし合わせるべき「唯一の正解」は存在しない。このちがいがあるから、AIシステムのテストは多くの人が思うより難しい。仕事でAIの出力を頼りにしているなら、決して人ごとではない。従来のソフトウェアのテストは、ひとつの前提に立っていた。入力が決まれば、正しい出力も決まっているという前提だ。AIシステムは、この前提を崩してしまう。