赤字ニュースをAIに「ヤバい?」と聞く人へ|貼り方で8対0に割れた
Toybox「純損失8,070億円」の見出しだけをAIに貼って「危ない?」と聞くと8回中8回が冒頭で警戒。帳簿上の費用と営業損失の2文を足すと0回に。見出しだけでは赤字の本当の原因も16回中0回。Anthropicの上場書類を題材にした24回の実測と、貼るべき3つの数字のテンプレ。
AIに決算を3行要約させる人へ|軽い版は5回とも「過去最高」から
Toybox増収減益・一時益・下方修正という「見出しだけ好決算」の架空決算をAIに30回読ませた。「良い?悪い?」なら17回とも「悪い決算」。でも「3行で要約して」だと軽量モデルは5回とも「過去最高」から書き始め、評価を一度も書かなかった。1行目を変える1文テンプレ付き。
年末調整をAIに聞く人へ|答えが7通り、今年の数字は50回中6回
Toybox年末調整の数字をAIに60回聞いた実測。「103万円の壁」は軽いモデルが10回とも施行されていない123万円、基礎控除は7通りの数字が返り2026年分の正解は25回中1回。国税庁の表を6行貼ると10回中10回そろった。
AIに株の様子を聞く人へ|7割が上がった日を10回とも「下がった」
Toybox日経平均1,253円安でも7割超の銘柄が上がった10月13日。そのデータをAIに渡して「全体として上がった?」と聞くと10回とも「下がりました」。軽量モデルは銘柄数に一度も触れなかった。足すと効く1行と、AIの相場の答えを10秒で疑う3つの確認。
AIに割り勘させる人へ|軽い版は10回中9回、同じ4円ずれた
Toybox3連休の旅行を想定した24行の立て替えリストをAIに割り勘させると、軽量モデルは10回中9回が同じ「4円多い」答え。累計を書かせても0/5、検算ルールを渡すと検算に合う別の誤りが出た。合計を10秒で疑う3つの方法と、表計算に任せるコピペ用の頼み方。
AIにニュースを要約させる人へ|軽い版は5回とも数字の条件を消した
Toybox「年換算」「総額」「税抜」「目標」「速報値」を入れた記事をAIに3行要約させると、軽量モデルは5回とも条件の抜けた数字を出し、速報値の注意は5回とも消えた。1行足すだけで抜けは13/28→6/36に。要約の数字を30秒で点検する3か所とコピペ用の頼み方。
AIを全部「賢いモデル」で使う人へ|5作業中4つは軽量版で同点
Toybox事務の5作業を軽量・中位・上位の3モデルに5回ずつ解かせると、振り分け・抜き出し・集計・条件つき書き直しの4つは軽量モデルも160問中ミス2個でほぼ同点。崩れたのは「ちょうど120字」だけで、軽量モデルは5回とも外し、5回とも「120字です」と申告した。任せ方の分け方とコピペ用の依頼文。
AIに「問題点を指摘して」と頼む人へ|誤りゼロでも平均9個出てきた
Toybox誤りゼロの会議案内メールにAIへ「問題点を指摘して」と6回頼むと、指摘は平均9.3個。「問題がなければ『問題なし』」と1文足すと6回中6回「問題なし」、誤り2つのメールでは6回中6回その2つだけを指摘した。30回の実測と、コピペで使えるチェック用の頼み方。
AIに「このメール詐欺?」と聞く人へ|本文だけ貼ると12回中5回見逃した
Toybox本物5通・偽物4通のメールをAIに54回判定させた。差出人とURLまで貼れば偽物は12回中12回「詐欺」。本文だけだと12回中5回が「判断できない」、本物そっくりの偽物は6回中5回見逃した。「本物です」は30回中0回。貼るべき2か所とテンプレ。