5个论点,只用简单的词

||新闻

xkcd在桌子上一个最近xkcd漫画只使用了1000个最常用的英文单词来描述土星五号火箭。这枚火箭被称为“上升五号”,液氢供给管是“让湿冷空气燃烧的东西”。这激发了一位遗传学家制造Up-Goer五文本编辑器,这迫使你只使用1000个最常用的单词。精神牙线最近收集的用这个限制解释的18个科学概念

这和MIRI有什么关系?好吧,年轻的哲学家罗比Bensinger现在已经重写美里的五篇论文使用Up-Goer Five文本编辑器,得到了有趣的结果:

  • 智能爆炸如果我们制造一台计算机,它可以在不同的情况下做困难的事情,而不用使用太多的东西,它可能能够帮助我们建造更好的计算机。由于计算机的速度比人类快,用不了多久,计算机可能就会完成制造新的、更好的计算机的大部分工作。随着新电脑的速度越来越快,部件越来越多,我们很难控制或理解正在发生的事情。当这些计算机用尽各种方法来快速、轻松地制造出更好的计算机时,最好的计算机在控制发生的事情方面已经比人类好得多了。
  • 正交性不同的计算机,以及不同的头脑作为一个整体,需要的东西可能非常不同。他们想要的东西可能对人类非常好,也可能非常坏,或者介于两者之间。我们可以相当肯定的是,强大的计算机不会像人类那样思考,而且大多数可能的计算机不会像人类那样试图改变世界。
  • 收敛的工具性目标尽管大多数人想要的东西不同,但他们需要许多相同的东西才能得到他们想要的东西。电脑和人类可能想要的东西从长远来看是彼此无关的,但为了得到那些不同的东西,它们必须首先争夺相同的份额。
  • 价值的复杂性这将需要大量的部件,并以正确的方式组装在一起,来建造一个计算机,它能做所有的人想要它做的事(没有一件事是人类不想要它做的)。
  • 脆弱的价值如果我们在其中的一些部分出了一点差错,电脑很可能从此只会制造出糟糕的事情。我们几乎需要我们想要发生的一切,否则我们就不会有任何乐趣。

这是所有。不客气