調査の結果、「AIによる概要」の生成にGemini 2.5が使用されていた頃の正答率は85%だったことが判明。内部のモデルがGemini 3にアップデートされた際に正答率は上昇したものの、それでも正答率91%しかありませんでした。つまり、単純計算で10回検索すると1回は誤った内容の「AIによる概要」が表示されるというわけです。
ニューヨーク・タイムズは1年間に行われるGoogleの回数が5兆件を超える点に触れ、「正答率が90%であれば1時間ごとに何千万件もウソの概要が表示されていることになる」と述べました。
なお、Googleはニューヨーク・タイムズの調査に対し、「SimpleQAには誤った情報が含まれているのに加え、人々が実際にGoogleで検索している内容を反映していない」と語っています。
(つづく)
https://gigazine.net/news/20260408-google-ai-overview-accuracy/
「AIによる概要」がウェブ検索ツールを使用して正答率を上げているのは良いものの、一方で「自分のことを専門家だと主張するウェブサイトを作成してAIに専門家だと紹介させる」など、「AIによる概要」が意図的に操作されている場合もあるとニューヨーク・タイムズは警告しています。
(以下略)
https://gigazine.net/news/20260408-google-ai-overview-accuracy/
嘘かもしれないとは思っているから、ググったりもしてるが
嘘でもとりあえず答える
資料の作成とかでは使えるが
はぁ
なんで公文書無視して嘘ついたか問いただしたら、そっちの方がネットに多いからって答えてて草
まじでゴミやん
ネット民と違ってすぐ謝るけどな
「嘘を嘘と見抜けないとAIを使うのは難しい」
だから再度本当かをチェックする必要あり
特に東京中心主義だし
それは東京中心のメディアの記事を多く学習するせいなんだろね
Wikiは引用元とか有無である程度判断できるだろ
人生変わった!
GPTはかなり苦労して依存やら著作権違反減らそうとしてる努力がみえるけどgeminiはわりとやりたい放題よな
設立当初の社是「邪悪になるな」をシレッと消しちゃうようなとこですもの
オレの中ではフェイスブックのメタ社と並んで信用できない企業リストに堂々ランクインしてる
13時間(日本が遅い)って出てきた
優しい嘘というやつだw
マジで50%は嘘をつかれる
Gemini:はい。それ買えば問題ありません
俺:念の為もうちょい調べて注文しよ
…
色々調べたら加工なしでは付けれないやんけ!買ってたら大変やったわ
これあったからGeminiは無理になった
わざとやってるレベルで間違い多いよな
オレはふわっとした答えじゃなくて正解が欲しい(数字で正解があるやつ)
間違ってるのは「AIに聞いて確認しました」とかヌかす人間の方
全然気付かないわ
【これマジ?】ヴィーガンインフルエンサー、10年間の極端な食生活で餓死・・・ »
Googleで検索を行うと、検索結果ページの一番上に「AIによる概要」としてAIが生成した回答が表示されます。この「AIによる概要」の正確性をニューヨーク・タイムズが調査し、結果を報じています。
Googleは2024年5月にGoogle検索の検索結果ページにAIによる回答を記載する「AIによる概要」機能を実装し、同年8月には日本、10月には100以上の国と地域に導入しました。
検索結果に出てくる各ページを開いて自分で情報をまとめる代わりにAIが情報をまとめてくれるので利便性が高く、情報ソースのリンクも表示されているのでより詳しい情報が必要な場合には自分でさらに調べに行くことも可能です。
しかし、たとえソースが表示されていたとしても、必ずしも「AIによる概要」に表示される情報が正しいとは限らず、「自分の名前を調べたら死んだという概要が出てきた」という事件も起きています。
(つづく)
https://gigazine.net/news/20260408-google-ai-overview-accuracy/
