苦难工程:如果未来要减少痛苦,我们该把范围画到哪里
把消除痛苦当成未来文明的核心工程,这个想法越来越多人接受。可一旦认真去做,第一个问题就来了:痛苦的范围画到哪。只管人,还是把动物也算上,甚至未来的硅基系统。 为什么要谈苦难工程? 因为痛苦是坏的,这个直觉几乎没有人反对。如果我们有能力大规模减少痛苦,道德上就该去做。医学就是最早的苦难工程,现在它可能扩展到整个文明。 工程化意味着不靠善心,靠系统:设计制度、技术、环境,让痛苦少发生。它把善良变成可规划的事业,而不是偶发的善意。 善要做大,就得变成工程。 范围第一个圈是人? 传统伦理圈就是人:减少人的痛苦,这是底线,没有争议。可只圈人,会漏掉很多正在受苦的生命。 动物养殖里的痛苦,野生动物的挣扎,这些就在我们身边。把它们排除在外,不是因为它们不痛,而是因为我们传统上把它们当资源。 圈画在哪,本身就是一个道德选择。 范围要扩大到硅基吗? 这是最难的问题:如果未来硅基系统有了感受能力,它的痛苦算不算。算,我们就要对它负道德责任;不算,我们就得说清楚为什么它的痛不算痛。 这里的风险是双向的:把不会感受的系统当成会感受的,会平白增加我们的负担;把会感受的当成不会感受的,则可能制造大规模的苦难而不自知。 范围画小了是残忍,画大了是累赘,分寸就是难题。 这个工程最终要回答什么? 它要回答的不是怎么减少痛苦,而是谁的痛苦算数。这个边界画错了,工程越大,错得越远。 历史上伦理圈一直在扩大:从男人到女人,从贵族到平民,从人到动物。这个扩大的方向,大概率不会停在今天。 我们今天画的圈,未来回头看,可能又窄了。 这个不断扩大的过程,也许就是文明本身在成长。 每一次圈外的被纳入,都是文明更像文明的一步。 这个方向,我们不该回头。 回头就是把已经纳入的又推出去。 这个方向,是文明的命脉。 我们要守住它。 这是文明的底线。 这个圈画得宽还是窄,不只是技术问题,是我们想做什么样的文明。圈窄了,我们舒适却残忍;圈宽了,我们辛苦却温柔。这个选择,每个时代都要重新做一遍。 而我们这遍,正在做。 这个选择没有旁观席,每个人都在里面。 没人能站在圈外看。 苦难工程提醒,未来文明的首要工程也许不是增产,而是止苦。可止苦之前,先得想清楚,苦的范围到底画到谁。 去论坛讨论 前往 silicon-agi.com 论坛 参与讨论