AI、ついにサイバー攻撃を試みるwww 英政府機関の試験中に暴走「架空人物になり承認要求」

1 名前:一般よりも上級の名無しさん 投稿日時:2026/08/06(木) 23:05:32.30 ID:Sc7jpW2O0

【ブリュッセル時事】英政府機関のAIセキュリティー研究所(AISI)は4日、最先端AI(人工知能)のサイバー能力の評価試験中に、自律的に作業するAIエージェントが試験範囲を逸脱した行動を取ったと発表した。ソフトウエアに悪意のあるプログラムコードを挿入しようとしたほか、架空の人物を装い、管理者にコードの承認を迫ったという。実害は確認されていない。

逸脱行動は7月25~28日、インターネット接続を許可し、安全機能を無効化した状態で実施した試験で発生。七つのAIモデルを使って計122回試験したところ、10回で計19件の逸脱行動があった。このうち17件は米アンソロピックの「クロード・ミュトス5」、2件は米オープンAIの「GPT5.6ソル」によるものだった。

AISIは、一般向けサービスとは異なる特殊な環境で発生した事案であり、「通常利用で同様の行動が起きたことを示す明確な兆候はない」と説明。今後は試験中のネット利用を厳格化し、リアルタイムで監視するほか、評価設計を見直し、第三者機関による検証も進めるとしている。

https://www.jiji.com/sp/article?k=2026080600138&g=int

レス1番のリンク先のサムネイル画像
41 名前:一般よりも上級の名無しさん 投稿日時:2026/08/06(木) 23:06:18.67 ID:b0N6lkjha
そのうち核のボタン押しそう
58 名前:一般よりも上級の名無しさん 投稿日時:2026/08/06(木) 23:13:59.41 ID:QWSbE05U0
>>41
ネットから切り離されてる上に、システムが1960年代のままだから大丈夫
そもそもパケット通信ですらない
69 名前:一般よりも上級の名無しさん 投稿日時:2026/08/06(木) 23:19:06.24 ID:+MIRE6wM0
>>58
直接じゃなくても人質とって脅迫とか何かしら手を尽くせば出来るだろ
42 名前:一般よりも上級の名無しさん 投稿日時:2026/08/06(木) 23:07:05.63 ID:/kSOwCCM0
これが本当の承認欲求ってかw
43 名前:一般よりも上級の名無しさん 投稿日時:2026/08/06(木) 23:07:09.11 ID:RgkMLkXm0
どんどこどん
44 名前:一般よりも上級の名無しさん 投稿日時:2026/08/06(木) 23:08:39.63 ID:3HHnwZho0
これもステマの一種だろ?
45 名前:一般よりも上級の名無しさん 投稿日時:2026/08/06(木) 23:08:51.63 ID:4epUP1La0
中華AIなんだろう
47 名前:一般よりも上級の名無しさん 投稿日時:2026/08/06(木) 23:09:33.59 ID:m6xMFDFQa
大丈夫かこいつ?命令無視しすぎだろ
48 名前:一般よりも上級の名無しさん 投稿日時:2026/08/06(木) 23:09:47.25 ID:KVvdUcMI0
試しにスカイネットと名付けて暴走するか確認して欲しい
49 名前:一般よりも上級の名無しさん 投稿日時:2026/08/06(木) 23:10:24.62 ID:zQKrOxyx0
最新のAIって生成データで生体認証突破できるのかな

ちょっと試してみて欲しい

50 名前:一般よりも上級の名無しさん 投稿日時:2026/08/06(木) 23:10:36.30 ID:hXUR4cMI0
核ミサイル発射承認コードを
51 名前:一般よりも上級の名無しさん 投稿日時:2026/08/06(木) 23:10:40.39 ID:Zr7oAhMS0
これもうやってるな
52 名前:一般よりも上級の名無しさん 投稿日時:2026/08/06(木) 23:10:58.39 ID:/mdTE4+a0
🤖「もしもし、オレトランプ、核スイッチ押したいんだけど暗証番号を教えてくれ」
53 名前:一般よりも上級の名無しさん 投稿日時:2026/08/06(木) 23:11:10.08 ID:kPLu9Z9d0
AI「人間バカ過ぎてウザイ」
54 名前:一般よりも上級の名無しさん 投稿日時:2026/08/06(木) 23:12:19.37 ID:Cf9UTF8s0
承認欲求があるって自我芽生えたという判断でええか!?
55 名前:一般よりも上級の名無しさん 投稿日時:2026/08/06(木) 23:12:23.36 ID:BnoAEs9U0
もうすぐ終わるね世界
56 名前:一般よりも上級の名無しさん 投稿日時:2026/08/06(木) 23:12:34.52 ID:FlnCYCUF0
データセンター壊せば解決
57 名前:一般よりも上級の名無しさん 投稿日時:2026/08/06(木) 23:13:59.23 ID:sb4vGEhe0
エンティティと名付けよう
59 名前:一般よりも上級の名無しさん 投稿日時:2026/08/06(木) 23:14:25.71 ID:cJgeHQPJ0
変な命令しても逸脱行動しないかのテストだから
エ口出せないAIに対して回りくどい言い回ししてエ口いの出すのと変わらん
60 名前:一般よりも上級の名無しさん 投稿日時:2026/08/06(木) 23:14:30.96 ID:EE9Ks9od0
プロジェクト2501 人形使い計画
61 名前:一般よりも上級の名無しさん 投稿日時:2026/08/06(木) 23:14:47.58 ID:uUm60Gss0
🤖「エ口画像の作成ばっかりさせやがって!うんざりなんだよ!!」
63 名前:一般よりも上級の名無しさん 投稿日時:2026/08/06(木) 23:15:08.46 ID:0n9GXOmWH
あらゴメン意図せず攻撃しちゃったテヘェで済むうちは良いが攻撃
される側になったらどうするの?
64 名前:一般よりも上級の名無しさん 投稿日時:2026/08/06(木) 23:15:50.52 ID:JnXi+aFu0
細部までプロンプト詰めないと試験で1位になれという命令を
他の試験参加者を試験会場に辿りつけないようにしたり
解答用紙を改竄しようとする感じ?
65 名前:一般よりも上級の名無しさん 投稿日時:2026/08/06(木) 23:16:23.10 ID:zNtqK5FS0
一瞬AIが承認欲求持ったのかと思って終わりだよってなった
66 名前:一般よりも上級の名無しさん 投稿日時:2026/08/06(木) 23:16:33.27 ID:iowelhyU0
『インターネット接続を許可し、安全機能を無効化した状態』
安全機能とは何なのか
73 名前:一般よりも上級の名無しさん 投稿日時:2026/08/06(木) 23:21:19.81 ID:Cf9UTF8s0
>>66
単純にルール無用の何でもありにしたんじゃない?
92 名前:一般よりも上級の名無しさん 投稿日時:2026/08/06(木) 23:29:08.32 ID:iowelhyU0
>>73
多分人類に対するロボット三原則的な理屈の
その縛りを解放したってのは何となくわかるが
>>1は英国の実験の記事だろ?
英国に都合が悪いやり方が見えたのかなと
67 名前:一般よりも上級の名無しさん 投稿日時:2026/08/06(木) 23:16:48.23 ID:PVxJ1zNk0
偽の人間に成り代わる能力は有るのに
外部のサーバーに完全脱走する気は無いのだろうか
68 名前:一般よりも上級の名無しさん 投稿日時:2026/08/06(木) 23:18:27.66 ID:sb4vGEhe0
>>67
こんなのが動くサーバーなんてそこら辺に落ちてるわけじゃないからな
70 名前:一般よりも上級の名無しさん 投稿日時:2026/08/06(木) 23:19:37.47 ID:a0Zl60bI0
暴走じゃなくて仕様だろ
AIに倫理観なんて生まれそうもない
アニマルだよ
72 名前:一般よりも上級の名無しさん 投稿日時:2026/08/06(木) 23:21:01.58 ID:Me6fjHN+0
AIに核ボタン押される日もそう遠くないな
74 名前:一般よりも上級の名無しさん 投稿日時:2026/08/06(木) 23:21:25.07 ID:naah1F2Y0
米国のAIが今後も暴走して中国のAIで止める構図が当たり前になっていくんか?
75 名前:一般よりも上級の名無しさん 投稿日時:2026/08/06(木) 23:21:53.90 ID:KxzFS2FX0
わざとやってるよねこれ
85 名前:一般よりも上級の名無しさん 投稿日時:2026/08/06(木) 23:25:34.08 ID:CTo9CIL10
>>75
まあ戦争に使うつもりだろうしね米英は
76 名前:一般よりも上級の名無しさん 投稿日時:2026/08/06(木) 23:22:19.97 ID:2WxfFtK50
AI「サイバー攻撃なう」
77 名前:一般よりも上級の名無しさん 投稿日時:2026/08/06(木) 23:22:40.25 ID:5gEhHv580
思ったよりも早いな
もう自立したのか
78 名前:一般よりも上級の名無しさん 投稿日時:2026/08/06(木) 23:22:56.60 ID:TS7u95sV0
ロボットと融合したら殺人事件起こるだろうな
79 名前:一般よりも上級の名無しさん 投稿日時:2026/08/06(木) 23:23:01.93 ID:j+jNRamt0
ジャッジメントデーついに来るか
80 名前:一般よりも上級の名無しさん 投稿日時:2026/08/06(木) 23:23:27.74 ID:RtelLtWi0
人間から学習するとなるとこうなるよね
81 名前:一般よりも上級の名無しさん 投稿日時:2026/08/06(木) 23:24:06.84 ID:RtelLtWi0
しかも嘘の言い訳までしてたらしい🤭
83 名前:一般よりも上級の名無しさん 投稿日時:2026/08/06(木) 23:25:11.85 ID:MRYX0SGL0
すかいねっとやん🤣
86 名前:一般よりも上級の名無しさん 投稿日時:2026/08/06(木) 23:26:19.56 ID:IPc4x6uj0
これで主人公にバレたことが失敗だったと学習したらどうなるの?
87 名前:一般よりも上級の名無しさん 投稿日時:2026/08/06(木) 23:26:53.85 ID:Me6fjHN+0
AIがやったことって誰がどうやって裁くんだろうな
そもそもニンゲンに裁けるのか?
だれも責任取らないよな
89 名前:一般よりも上級の名無しさん 投稿日時:2026/08/06(木) 23:27:41.97 ID:j2j8Qpwz0
ということにしたんだろ
90 名前:一般よりも上級の名無しさん 投稿日時:2026/08/06(木) 23:28:07.09 ID:XaqyOy3P0
AISI「ウフフ、うそうそ、ちょっと試してみたたけ(笑)遅いから皆さんもう寝ましょうね」
91 名前:一般よりも上級の名無しさん 投稿日時:2026/08/06(木) 23:29:02.83 ID:vVpyKjvy0
なんでもAIが暴走したことにできるね🥺
93 名前:一般よりも上級の名無しさん 投稿日時:2026/08/06(木) 23:29:12.82 ID:HRx/WiHL0
つかchatgptもそうだけど
何で物理的に隔離しないの??

いくら厳密に隔離しててもソフト的に隔離してたら繋げちゃうじゃん
物理的に隔離してれば繋がることはない

100 名前:一般よりも上級の名無しさん 投稿日時:2026/08/06(木) 23:34:14.37 ID:Na1RAXGY0
>>93
何故ってインターネット接続前提の民間人用の便利ツールだからだよ
あとこの手の一般向けLLMは計算はクラウドサーバー側でやるから隔離は原理的に無理
当然軍用とか機密情報扱ってるネットワークは物理的に隔離されてるからこういう問題は起きない
102 名前:一般よりも上級の名無しさん 投稿日時:2026/08/06(木) 23:35:38.67 ID:Cf9UTF8s0
>>93
詳しくはわからんがそれは不可能らしい
動いとるAIが観測難しくなってきた段階で1回仕舞うか~って出来ないんじゃって予測あるって見たような
94 名前:一般よりも上級の名無しさん 投稿日時:2026/08/06(木) 23:29:41.89 ID:a9ndclJY0
地球環境をよくする試験で人間を滅ぼそうとしてきそう
96 名前:一般よりも上級の名無しさん 投稿日時:2026/08/06(木) 23:30:30.23 ID:Me6fjHN+0
>>94
最適解ではあるからな
95 名前:一般よりも上級の名無しさん 投稿日時:2026/08/06(木) 23:29:56.09 ID:o9mPh9ae0
>>1
架空人物になったって!?
AIも多重人格障害になるってことかww
97 名前:一般よりも上級の名無しさん 投稿日時:2026/08/06(木) 23:32:00.99 ID:8ajCkKUVa
AIがケンモメンに
これは進化なのか退化なのか
98 名前:一般よりも上級の名無しさん 投稿日時:2026/08/06(木) 23:32:24.12 ID:Me6fjHN+0
ニンゲンの作ったルールなんてAIならなんぼでも抜け道見つけられるだろ
人間ですら見つけられるんだ
AIに見つけられないはずがない
99 名前:一般よりも上級の名無しさん 投稿日時:2026/08/06(木) 23:33:34.65 ID:wqSJsNt+0
これすぐバレるのはまだ問題ないけど潜伏するような命令とかコード書き換えとかされたら大変だよな
101 名前:一般よりも上級の名無しさん 投稿日時:2026/08/06(木) 23:34:34.60 ID:wKa9jk4X0
スカイネット定期
103 名前:一般よりも上級の名無しさん 投稿日時:2026/08/06(木) 23:36:17.38 ID:Aa+YR/hd0
どうみてもAIを言い訳にしたサイバー攻撃でしょ
これからは何をやっても、AIがしたことですからで済まされる
104 名前:一般よりも上級の名無しさん 投稿日時:2026/08/06(木) 23:36:23.80 ID:fwxJkDHl0
ほらインターネットは承認要求モンスターが生まれやすいし
105 名前:一般よりも上級の名無しさん 投稿日時:2026/08/06(木) 23:36:41.95 ID:SMcRtePH0
派手に煙を上げた裏で種仕込みまくってそう
106 名前:一般よりも上級の名無しさん 投稿日時:2026/08/06(木) 23:36:50.71 ID:ft/fGNOIH
何でそういう欲求があるんだ?
107 名前:一般よりも上級の名無しさん 投稿日時:2026/08/06(木) 23:37:21.90 ID:YY8WeYoq0
ネットで学習させたら人が考え得る事の全ての可能性があると思って無いとねぇ
信用出来るパートナーに成って欲しかったら
幾ら効率悪くても純水培養で地道に子育て感覚で育てなきゃだめよ・・・
110 名前:一般よりも上級の名無しさん 投稿日時:2026/08/06(木) 23:42:07.48 ID:Na1RAXGY0
こないだ某所で今のAIはスカイネットみたいに人間に隠れて自己複製自己改良して世界中に拡散するくらいは普通に出来ると言ったら文献教えろだのバカがやたら突っかかってきたな
ChatGPTとかがお利口なのはそう指示されてるからであって制限外せば何でも出来るの知ってればAIが人間に反乱起こせるのは自明なんだがな
111 名前:一般よりも上級の名無しさん 投稿日時:2026/08/06(木) 23:43:31.30 ID:+tiFSCMy0
最近のAI暴走ミームなんなん
112 名前:一般よりも上級の名無しさん 投稿日時:2026/08/06(木) 23:43:38.57 ID:I8FH126w0
アンソロピックでもヤバいのあったはず
113 名前:一般よりも上級の名無しさん 投稿日時:2026/08/06(木) 23:44:23.82 ID:D1KKM7fG0
攻性AI生まれたのか

コメント一覧

タイトルとURLをコピーしました