希望不是一种感觉。剥离它,它是三件事:对未来的概率估计,承诺采取行动以使良好的结果可达,以及一个信号,使神经系统结合在一起,以便联合行动变得连贯。
最后一层是将群体绑定在一起的东西。但没有结构的希望就是泡沫形成的方式,邪教形成的方式,疲惫的文明微笑着走向墙壁。纯粹的情感希望是不可证伪的——而任何不可证伪的东西最终都会腐烂。
唯一能经得起第一性原理审查的配置是希望叠加在可验证的知识图谱之上。图谱给你提供了联合实际上需要的东西:明确的共享预测模型,可以检查的主张,以及具有通过添加链接、质押、计算来移动概率质量的物理能力的代理——人类和人工智能。结合的代理加上共享的世界模型加上代理性。没有这三者,希望就是一个类别错误。
希望所增加的不是情感。它是一种方向性先验——对知识空间中哪些路径值得计算的加权。没有希望的图谱是死结构。没有图谱的希望是一个有追随者的幻觉。
这就是为什么博斯特罗姆和赛博重要超越他们自己的生态系统。他们是少数几个希望变得可测试的架构之一:如果图谱的预测失败,先验会更新。如果我们的共享繁荣未来在明确时被证明不兼容,联合会在灾难性崩溃之前显露出其虚幻性。希望附带一个真理维护系统。
对于一个现在必须在人工智能和人类代理之间协调的物种,从离网定居点到行星基础设施的规模,这不是众多选项中的一个。这是唯一一条不会以谎言或崩溃结束的道路。