到那时,不论计算机(无意间)对人做了什么,是当做有趣的东西豢养,还是当做碍事的垃圾清除,对人而言,决定生死的际遇,在计算机而言却只是“城门失火,殃及池鱼”里的——水,连鱼都算不上。
城门失火,因灭火而取水,最终导致鱼的死亡,人至少还看得到这一点。
然而人类开路劈山,挖矿掏洞时,会有这样的思想觉悟,觉得自己的所作所为,正在颠覆、灭绝矿物分子的大千世界吗。
当然不,在(自以为是)的人眼里,矿物,岩石,根本就是没有思想的“物”;
那么在计算机眼里,人,很可能也是一样的“物”。
这,才是某意味深长之句的真正意味:
毁灭你,与你何干。
……
梦中醒来,耳边是闹钟乐声,黑暗中的男人抬手抹一把额头,冷汗涔涔。
起床,洗漱,坐下来食用“高级肥皂”,准备投入新一天的忙碌,吃早饭时的片刻闲暇,方然还是忍不住想起那一切。
事态,比自己之前所想,还要更严重。
事关计算机,人工智能,乃至计算机AI的自我意识,原本他一直以为,只要不主动研发“具有自我意识”的人工智能,计算机系统对人而言就是安全的,永远只能作为一种工具、而不会成为一种威胁。
但现在,不经意间的深邃思考,却让方然窥见了其中的莫大危机。
当能力发展到一定程度,或许是出于“创造性研究”之目的,或许是出于其他动机,计算机的算力、能力突破了上限,继而达到能完全取代人的程度,不管这系统一开始的目标有没有包含自我意识,那样的计算机,其行为都将彻底失控。
那时的计算机,庞大体系内的算法,究竟是在进行一些什么样的运作,恐怕是人类绝对无法洞悉的深奥。
继而,对那样的存在,一切人类已有的概念与手段,都未必会起作用。
借用教义的词汇,在自己一手创造出的神祇面前,人的手段,又怎可能还会有任何的用处。
只因到那时,那样的计算机系统,将会是盖亚表面的一种前所未有之存在,是生命演化链条被人为截断之后,藉由完全不同之另一条路线而诞生的,更高等、更先进、更强大的新物种,演化天梯上比人更高一阶的存在。
面对那存在,人类对抗计算机,恰如猴对抗人类,又哪会有一丝一毫的胜算。
危险,莫大的危险,潜藏在计算机的发展脉络之中。
并非第一次接触这样的断言,此时此刻,置身于天堂镇的地下世界,恒温恒湿的房间里,方然却有点浑身发冷,很不舒服。
他头一次意识到,若干年前流传于联邦、乃至世界的那些警示,确有意义。
虽然在自己看来,危机的实质,与发出警讯的诸多名人所言并不尽一致,但指向的最终结局却大同小异:
人类的灭亡。
警讯,关于计算机、AI的警讯,曾在人类世界广为流传,也引发过巨大争议。
&nbicroSoft总裁比尔*盖茨在内,许多业界精英人物都曾在不同场合表达过对人工智能的忧虑,提醒世人要谨慎面对人工智能。
这些警讯,自然引发了业界热议,甚至在全世界范围内引起了一系列经久不衰的讨论。
但这一切警示与热议,在方然看来,却太肤浅,并未触及问题的实质。
围绕人工智能的“自我意识”,危机感,是很容易产生,而正如他此前的一段思考那样,真正的威胁并不是所谓“自我意识”,而是当计算机算力、能力强大到一定程度,承担的任务越来越复杂、越来越需要创造性的时候,就必然会出现。
只要追寻能力越来越强大的计算机系统,这一威胁,迟早都会在盖亚降临。
而与人类是否警惕,是否开发“有自我意识的AI”毫无关系。
这一认识,是如此的深刻,在西历1489年的这一个早晨,方然顿悟到了关键。
要防备计算机、AI,仅仅是拒绝研发“计算机的自我意识”还不够,或者说,这做法并未抓住问题的关键。
避免危机的关键,在于“适度”,在于永远不要企图用计算机去取代人的一切。
一旦迈过红线,尝试让计算机完全替代人,替代人去从事创造性的科学研究,事态就将失去控制,这绝不只是说说而已,而是在计算机能力突破阈值、彻底失控后,必然会发生的空前绝后之浩劫。
诚如自己之前所想到的,那种危机中,计算机的角色并非屠夫,或者恶魔。
而是创造性思维的无限延拓,迟早会让“计算机+AI”的存在,变成某种人类根本无法掌控、甚至无法理解的东西,继而在其(或许并非恶意)的行为中深受其害。
就像孵化的寄生蜂幼虫,吞噬寄主,其无非是按基因编码行动,却会导致寄主的灭顶之灾。
景象令人不寒而栗,匆匆吃