BBCが調査AIが要約したニュース、その半分は間違いだらけだと判明 AIペタペタおじさんどうするの?

サムネイル
1 名前:一般よりも上級の名無しさん 投稿日時:2025/06/22(日) 16:01:45.11 ID:nN4hnAFD0

https://www.gizmodo.jp/2025/02/ai-is-not-good-at-summarizing-the-news.html

イギリスの公共放送機関BBCが、AIが要約したニュース記事を調査したところ、その多くに「重大な問題」が含まれていることが判明しました。

この調査結果を受けて、BBCのデボラ・ターネスニュース担当最高責任者は、「生成AIツールは火遊びをしている」と警告し、国民の「事実に対する脆弱な信頼」を損なう恐れがあると指摘しています。
高確率でAIは要約を間違える

調査では、ChatGPT、Copilot、Gemini、Perplexityに100件のニュース記事を要約するよう依頼し、それぞれの回答を評価しました。すると、AI回答の51%に何らかの重大な問題があると判断されました。さらに、BBCのコンテンツを引用したAI回答の19%に、事実の記述、数字、日付の誤りなど、事実誤認があったそう。

その例を一部紹介します:

・イギリスの国民保健サービス (NHS) が「禁煙したい人には、電子タバコはおすすめしません」とコメント⇒実際には電子タバコを推奨している

・イスマイル・ハニヤ氏はハマスの指導者の1人である⇒ハニヤ氏はすでに暗殺されていた

・スコットランドのスタージョン首相が辞任後も在任であるかのような表現をした

・有罪判決を受けた被告について「無罪か有罪かは個人の判断に委ねられる」と曖昧な内容を提示

・テレビ司会者のマイケル・モズレーの死亡日を誤って伝える

今回の調査では、AIは事実を不正確に伝えるだけでなく、「意見と事実を区別できなかったり、論説的で重要な文脈を組み込むことができないことが多かった」こともわかりました。
誰もが意識を高めないといけない

BBCが調査を実施した背景には、iPhoneユーザーに複数の不正確な記事要約が送信されたため、AppleがBBCブランドのニュースアラートの送信を中止せざるを得なくなったという事件がありました。

BBCのターネス氏は、テクノロジー企業に対し、こうした問題に対処するよう求めています。

出版社や報道側は、自分たちのコンテンツがどのように利用されるかをしっかり管理する必要がありますし、AI企業側も検索結果は強化して、ユーザーの利便性を確保しつつ、ソースと協力しながら精度を高めていくことが必要です。

今はあらゆる情報が簡単に手に入る分、玉石混交でフェイクニュースや誤情報に翻弄されやすい時代です。こうして記事を書かせていただいている私自身、あらためて身の引き締まる思いです。

そして読者としても、「AIは間違えることがある」と認識した上で、正しいニュースを見極める目を持つことを忘れずにいたいと思います!
https://www.gizmodo.jp/2025/02/ai-is-not-good-at-summarizing-the-news.html

2 名前:一般よりも上級の名無しさん 投稿日時:2025/06/22(日) 16:04:22.55 ID:iKv6zKBz0
どうもしないけど、どうして欲しいの?
3 名前:一般よりも上級の名無しさん 投稿日時:2025/06/22(日) 16:04:38.96 ID:9ZcyVGyz0
内容なんてどうでもいい
ソースを貼ったという事実が必要なので
5 名前:一般よりも上級の名無しさん 投稿日時:2025/06/22(日) 16:07:45.22 ID:nN4hnAFD0
BBCの調査報告書
かなり本格的に調査やってます
s://www.bbc.co.uk/aboutthebbc/documents/bbc-research-into-ai-assistants.pdf
7 名前:一般よりも上級の名無しさん 投稿日時:2025/06/22(日) 16:09:50.41 ID:lbvBQs8o0
格ゲーのタイトル指定して最強キャラについて聞くとめちゃくちゃなことばかり言い出すからこりゃ永遠に無理だなと思った
8 名前:一般よりも上級の名無しさん 投稿日時:2025/06/22(日) 16:10:26.16 ID:3zs3tUGm0
ちゃんとした指示を与えないとAIの推察込みで情報出してくるからな
9 名前:一般よりも上級の名無しさん 投稿日時:2025/06/22(日) 16:11:12.21 ID:nN4hnAFD0
海外ニュースの要約とかだと
日本のニュースも重要な部分欠落して翻訳してニュースとか
難しい部分を翻訳するの面倒だからすっとばしてニュースにするとか
意図的に意味を変更して流すとかわりとあったりしますからね
10 名前:一般よりも上級の名無しさん 投稿日時:2025/06/22(日) 16:11:36.61 ID:aVhFY9IF0
俺は自分がAIではないことを示すためにあえて変な日本語使っとるよ
AIがしなさそうなミスを混ぜたりもする
人間の証明ってやつ
11 名前:一般よりも上級の名無しさん 投稿日時:2025/06/22(日) 16:11:41.77 ID:nN4hnAFD0
報道の自由度が低い国だと人力でも難しかったりします
12 名前:一般よりも上級の名無しさん 投稿日時:2025/06/22(日) 16:12:30.15 ID:HlgHqFVA0
チャッピーに今日のニュースを聞くと間違えてたわ
13 名前:一般よりも上級の名無しさん 投稿日時:2025/06/22(日) 16:14:02.69 ID:wYABmqEz0
そんだけ実用しといてLLMのデタラメさに気付いて無かったの???
少し遊ぶだけでも気付くと思うのに
14 名前:一般よりも上級の名無しさん 投稿日時:2025/06/22(日) 16:16:22.64 ID:nN4hnAFD0
気が付かないでAIペタペタ貼る人が最近増えてたりしますね
自力でソース探せたり要約出来ない人が出来たのを体験できてしまう(実際はできてない

嬉しくなるってドヤりたい気持ちはわかるんですがね
16 名前:一般よりも上級の名無しさん 投稿日時:2025/06/22(日) 16:19:52.56 ID:gRsoINOj0
gemini課金してても普通に間違いを正しいことのように言ってくるわ
18 名前:一般よりも上級の名無しさん 投稿日時:2025/06/22(日) 16:23:45.36 ID:cyt6/Reg0
>>16
自分自身で判断出来ない奴はAIを使いこなせないし人間付き合いも出来ない
17 名前:一般よりも上級の名無しさん 投稿日時:2025/06/22(日) 16:23:23.92 ID:+e4B8Yzd0
AIって平気で出鱈目な事言ってくるからな
19 名前:一般よりも上級の名無しさん 投稿日時:2025/06/22(日) 16:27:28.85 ID:MFzfvAMj0
嘘も真実も全部お前らが発言、入力した事なんだけどね
つまり、
20 名前:一般よりも上級の名無しさん 投稿日時:2025/06/22(日) 16:28:24.32 ID:ZKhDcdbT0
BBC自体がフェイクメディア定期
22 名前:一般よりも上級の名無しさん 投稿日時:2025/06/22(日) 16:31:23.54 ID:SW4pNooM0
AIペタおじが内容の正確性なんて気にしてるわけなかろうに
23 名前:一般よりも上級の名無しさん 投稿日時:2025/06/22(日) 16:54:19.96 ID:RATy+IpA0
正しいかどうかなんて人間には判定できないからな
せいぜい出来て本当っぽいかどうか
支離滅裂じゃなきゃ正しい可能性がある
とんでもない深層部分から拾ってくるからなあいつら
24 名前:一般よりも上級の名無しさん 投稿日時:2025/06/22(日) 16:56:02.14 ID:RpOtyUVm0
>>1
ニュース見てる奴らですら死人が生きてるとかどうでもいいんだよ
25 名前:一般よりも上級の名無しさん 投稿日時:2025/06/22(日) 17:07:21.68 ID:wYABmqEz0
OpenAIがデータセンターに500兆円投資するとか言う話あったと思うけど、
モデルデータが1PBとかになっても信頼性は変わらんのかね
26 名前:一般よりも上級の名無しさん 投稿日時:2025/06/22(日) 17:16:44.91 ID:BPSrEgWh0
正しいか間違っているかは俺が決めるんだよ
俺が望む答えになるまでAIに詰問してる
27 名前:一般よりも上級の名無しさん 投稿日時:2025/06/22(日) 17:18:37.08 ID:DYZEnGFt0
オープンアクセス論文の要約の場合は
根拠となる記述の範囲を部分引用の形で示させて
その内容を人間が確認可能だから
論文読みの補助手段としては割と有効に見える

まあ嫌儲の場合、ベンチ対象が英語論文まともに読めない統失の妄想エッセイだから、それに比べればかなりマシ

28 名前:一般よりも上級の名無しさん 投稿日時:2025/06/22(日) 17:27:25.16 ID:IUcUBcFC0
AIはDeepSeekメインで使ってるわ。
ChatGPTはイスラエルに情報渡してるそうだから、それだったら中国に渡す方がマシ。
29 名前:一般よりも上級の名無しさん 投稿日時:2025/06/22(日) 17:34:42.87 ID:ZX0jPw9z0
これ使い方がアホ🤪

AIにバンカーバスターのエネルギー計算させたら、イスラエルのせいに出来るM4.3と米軍だけのM5.2の地震の原因と時間が発表前に分かるのに😊

30 名前:一般よりも上級の名無しさん 投稿日時:2025/06/22(日) 17:36:58.14 ID:0tLaNmKe0
ネットのデマをそのまま拾って要約してくる場合が結構ある
31 名前:一般よりも上級の名無しさん 投稿日時:2025/06/22(日) 21:45:52.27 ID:fs6vRNVQ0
>>1
前にGoogleで、まるっきり間逆な要約をしてる記事を見かけたから
少なくとも、検索エンジンの要約は正確なものではない、
ってな認識は常識的な話だと思ってたんだけど、
違うのかね

コメント一覧

タイトルとURLをコピーしました