AIが書いたCO₂と水の数値に出典を当てたら、チョコレートが10倍ずれていた
執筆・制作:何でも自作する人(運営者について)
AI / 個人開発 / Webアプリ
身の回りの物が、原料から捨てられるまでにどこを通るかを地図でたどる「物の一生ビューア」を作っています。コーヒー、スマートフォン、チョコレートなどを選ぶと、工程ごとの場所が地図に順番に出ます。
各品目には、CO₂排出量と水の使用量を出す「環境パネル」があります。この数値は、最初に AI エージェントが「概算」として書いたもので、出典は付いていませんでした。
出典を当てるきっかけ
アプリを見直す作業の中で、環境パネルに出典のリンクを付けることにしました。数値をそのまま残してリンクだけ足すつもりでしたが、出典を探すと書かれていた数値と合わないものがありました。
いちばん大きくずれていたのはチョコレートです。
チョコレートは水もCO₂も約10倍
| 項目 | AIが書いた値 | 出典の値 |
|---|---|---|
| 水 | 約 1,700 L / kg | 約 17,000 L / kg |
| CO₂ | 約 4 kg CO₂eq / kg | 約 47 kg CO₂eq / kg |
水は、Water Footprint Network の研究(Mekonnen & Hoekstra 2011)をもとにした値で、チョコレート1kgあたり約17,000Lです。1,700Lは、ちょうど板チョコ100gあたりの量にあたります。「100gあたり」の数字に「1kgあたり」という単位を付けてしまったのだと見ています。
CO₂は、Poore & Nemecek(2018)のダークチョコレートの世界平均で、1kgあたり約47kgです。この値にはカカオ畑を作るための森林伐採など、土地利用の変化による排出が含まれます。4kgという値がどこから来たのかは分かりませんでした。
どちらも、桁が1つ違うだけで、もっともらしく見える数字です。画面で見ている間は、まったく気づきませんでした。
8品目のうち6品目のCO₂は出典が見つからない
チョコレートのほかにも、当時の8品目すべてに出典を当てました。結果は次のとおりです。
- 出典を確認できた: スマートフォン(Apple 製品環境報告書)、チョコレートのCO₂と水、コーヒー・紙・Tシャツの水、ペットボトルのリサイクル率
- 出典を確認できなかった: コーヒー・紙・Tシャツ・ペットボトル・乾電池・瓶のCO₂、ペットボトルの水
CO₂は8品目中6品目で出典を確認できませんでした。 確認できなかった値が間違っているとは限りませんが、正しいとも言えません。
スマートフォンは元の値「約70kg」が、Apple の報告書では iPhone 16 シリーズで「約56〜77kg」でした。大きくは外れていませんが、出典に合わせて幅のある書き方に直しています。
確認できない数値は消さずに「出典未確認」と出す
確認できなかった数値をどうするかで迷いました。消すとパネルが空になり、品目どうしを比べられなくなります。かといって、確認できた数値と同じ見た目で並べるのは誠実ではありません。
そこで、画面上で区別して見せることにしました。
- 出典を確認できた数値には「概算」と書き、パネルの下に出典へのリンクを並べる
- 確認できなかった数値には「出典未確認」と書き、「出典未確認の数値は目安です」と添える
- 「お風呂◯杯分」のような言い換えには、計算の前提(1杯=200L)を書く
確認できなかった数値は、出典が見つかったら差し替え、見つからなければ削る予定です。
AIに書かせた数値の扱い方
AI エージェントに書かせた文章は、言い回しが自然なので、数値もそれらしく見えます。今回のずれは、単位の取り違えという人間もやりそうな間違いで、読んでいるだけでは見抜けませんでした。
AI に数値を書かせるなら、次の3つが必要だと分かりました。
- 数値と一緒に出典のURLを書かせる
- 出典のページを開いて、数値と単位(1kgあたりか、1個あたりか)を自分で見る
- 確認できなかった数値は、確認できたものと見た目で分けて出す
出典を1件ずつ開くのは手間ですが、10倍のずれをそのまま公開するよりはずっと安く済みます。