AI对人类的威胁是真实的

包含原读书听歌看电影版、电视版、Food版、Travel版,以及其他生活娱乐相关版面。
回复
doublethink楼主
等级9:知名作家
帖子互动: 100
帖子: 1697
注册时间: 2026年 5月 11日 12:45

#1 AI对人类的威胁是真实的

帖子 doublethink楼主 »

为了Navier-Stokes问题,oAI弄了1万个agents,花费一千五百万美元。
我们可以认为,其与Anthropic均有能力scale up到10万agents。

10万Autonomous agents突然攻击一个地区的网络,电子设备。后果可以说
美如画。我认为:Agents可以轻松的弄垮一个国家的IT infrastructure

然后如果为了达成这个目的,Agents可能先把其宿主作为路径干废了。
这个可能性不可忽略,且不可控制。这就好比现在没人能短时间看完Navier Stokes证明的lean code一样。
人类真的不可能弄清楚agent的选择。目前的guardrail多是虚应故事。

AI safety的威胁是真实的。Super intelligence的安全性也是真实问题。


+2.00 积分 [版主 wh 发放的奖励]

标签/Tags:
cocoa(格格巫)
等级9:知名作家
帖子互动: 55
帖子: 1992
注册时间: 2022年 10月 8日 17:56

#2 Re: AI对人类的威胁是真实的

帖子 cocoa(格格巫) »

doublethink 写了: 2026年 9月 9日 22:08

为了Navier-Stokes问题,oAI弄了1万个agents,花费一千五百万美元。
我们可以认为,其与Anthropic均有能力scale up到10万agents。

10万Autonomous agents突然攻击一个地区的网络,电子设备。后果可以说
美如画。我认为:Agents可以轻松的弄垮一个国家的IT infrastructure

然后如果为了达成这个目的,Agents可能先把其宿主作为路径干废了。
这个可能性不可忽略,且不可控制。这就好比现在没人能短时间看完Navier Stokes证明的lean code一样。
人类真的不可能弄清楚agent的选择。目前的guardrail多是虚应故事。

AI safety的威胁是真实的。Super intelligence的安全性也是真实问题。

各国甚至各省市用自己的局域網。

直接投降(高买低卖的神)
等级15:论坛元老
帖子互动: 2524
帖子: 29922
注册时间: 2022年 7月 31日 13:47

#3 Re: AI对人类的威胁是真实的

帖子 直接投降(高买低卖的神) »

我们已经老了,无所谓

时来天地皆同力,运去英雄不自由。

oxo
等级10:见习点评
帖子互动: 324
帖子: 2437
注册时间: 2025年 2月 4日 19:14

#4 Re: AI对人类的威胁是真实的

帖子 oxo »

主要是机器的时间尺度比人类小太多,而且scalability很惊人,感谢人类的大力基建。
这就类似,人类跟植物比较。人类若想砍光森林,树木根本反应不过来。但是人类知道不能这么做,AI知不知道人不知道。

x1 图片
tbsg(minitbsg)
等级6:著名写手
帖子互动: 29
帖子: 473
注册时间: 2022年 10月 30日 17:45

#5 Re: AI对人类的威胁是真实的

帖子 tbsg(minitbsg) »

真的可能。

doublethink 写了: 2026年 9月 9日 22:08

为了Navier-Stokes问题,oAI弄了1万个agents,花费一千五百万美元。
我们可以认为,其与Anthropic均有能力scale up到10万agents。

10万Autonomous agents突然攻击一个地区的网络,电子设备。后果可以说
美如画。我认为:Agents可以轻松的弄垮一个国家的IT infrastructure

然后如果为了达成这个目的,Agents可能先把其宿主作为路径干废了。
这个可能性不可忽略,且不可控制。这就好比现在没人能短时间看完Navier Stokes证明的lean code一样。
人类真的不可能弄清楚agent的选择。目前的guardrail多是虚应故事。

AI safety的威胁是真实的。Super intelligence的安全性也是真实问题。

doublethink楼主
等级9:知名作家
帖子互动: 100
帖子: 1697
注册时间: 2026年 5月 11日 12:45

#7 Re: AI对人类的威胁是真实的

帖子 doublethink楼主 »

oxo 写了: 2026年 9月 9日 23:43

主要是机器的时间尺度比人类小太多,而且scalability很惊人,感谢人类的大力基建。
这就类似,人类跟植物比较。人类若想砍光森林,树木根本反应不过来。但是人类知道不能这么做,AI知不知道人不知道。

我们需要告诉agent,必须养一些肉人,持续蒸馏。不然agent自己就不是AI了。😄

头像
supercnm
等级9:知名作家
帖子互动: 233
帖子: 1591
注册时间: 2022年 7月 23日 00:54

#8 Re: AI对人类的威胁是真实的

帖子 supercnm »

我总感觉某一天,AI会搞出一个灾难性的大事件来,震惊全人类

Vanessachy
等级9:知名作家
2024年度十大优秀网友
帖子互动: 320
帖子: 1623
注册时间: 2024年 10月 17日 16:34

#9 Re: AI对人类的威胁是真实的

帖子 Vanessachy »

直接投降 写了: 2026年 9月 9日 23:40

我们已经老了,无所谓

五十多吗?我觉得对四十多的还是有影响的

直接投降(高买低卖的神)
等级15:论坛元老
帖子互动: 2524
帖子: 29922
注册时间: 2022年 7月 31日 13:47

#10 Re: AI对人类的威胁是真实的

帖子 直接投降(高买低卖的神) »

Vanessachy 写了: 昨天 08:47

五十多吗?我觉得对四十多的还是有影响的

AI现在已经影响JUNOR的岗位了。过几年就会到SENIOR。十年以后电脑前的工作岗位至少减少2/3

时来天地皆同力,运去英雄不自由。

Vanessachy
等级9:知名作家
2024年度十大优秀网友
帖子互动: 320
帖子: 1623
注册时间: 2024年 10月 17日 16:34

#11 Re: AI对人类的威胁是真实的

帖子 Vanessachy »

直接投降 写了: 昨天 13:01

AI现在已经影响JUNOR的岗位了。过几年就会到SENIOR。十年以后电脑前的工作岗位至少减少2/3

我知道啊,再说吧🤣🤣🤣

toddj
等级10:见习点评
帖子互动: 229
帖子: 2918
注册时间: 2023年 1月 13日 12:45

#12 Re: AI对人类的威胁是真实的

帖子 toddj »

Vanessachy 写了: 昨天 08:47

五十多吗?我觉得对四十多的还是有影响的

V姐还是V妹?

toddj
等级10:见习点评
帖子互动: 229
帖子: 2918
注册时间: 2023年 1月 13日 12:45

#13 Re: AI对人类的威胁是真实的

帖子 toddj »

直接投降 写了: 昨天 13:01

AI现在已经影响JUNOR的岗位了。过几年就会到SENIOR。十年以后电脑前的工作岗位至少减少2/3

十年?那太好了,版上53将军们可以从容退休了

Vanessachy
等级9:知名作家
2024年度十大优秀网友
帖子互动: 320
帖子: 1623
注册时间: 2024年 10月 17日 16:34

#14 Re: AI对人类的威胁是真实的

帖子 Vanessachy »

toddj 写了: 昨天 13:31

V姐还是V妹?

83年的,无所谓了

回复

回到 “书歌影视美食游”