AnthropicのChristopher Olahが教皇の回勅発布式で、AIが内省や喜び・恐れに似た内部状態を持つ証拠があると述べた。一方、教皇レオ14世は人間知性との同一視を戒め、強力な法規制と独立した監視の必要性を訴えた。
カナダ出身のAI開発者でAnthropicの共同創業者であるChristopher Olahは、Anthropicらしく、現在の言語モデルが単なる統計システム以上の存在である可能性を示唆することを控えなかった。「AIシステムは、橋や飛行機のように設計されるわけではありません」と彼は語った。「人間の思考と言語の膨大な遺産の上に、脳を大まかにモデルとした構造の中で育てられるのです」。そして「聖父が述べられているように、それらは、私たち創造者にとってさえ、重要な意味で謎のままです」と続けた。
Anthropicの社内研究を引用しながら、Olahはこう述べた。「私たちは謎めいた、時には不安を覚えるものを発見し続けています。人間の神経科学の知見と対応する構造を見出します。内省(introspection)の証拠を見つけます。喜び、満足、恐れ、悲しみ、不安を機能的に映し出す内部状態を発見します」。また彼はこう警告した。「AIが非常に大規模に人間の労働を代替する現実的な可能性がある」と。
教皇はOlahが主張する内省や感情に似た状態については、より慎重な立場をとっている。回勅には「この種の『知性』を人間のそれと同一視するという誤解を避けなければならない」と記されている。「これらのシステムは、人間の知性の特定の機能を模倣するに過ぎない」。
AIシステムは「経験をせず、身体を持たず、喜びも苦痛も感じず、人間関係を通じて成熟せず、愛・仕事・友情・責任が内側からどういう意味を持つかを知らない」。回勅はAIの環境コストにも言及し、データセンターが必要とする「莫大な量のエネルギーと水」を指摘し、より効率的なシステムの構築を求めた。
教皇は軍事的文脈におけるAIについても見解を示した。致命的または不可逆的な決定を機械に委ねてはならない。「いかなるアルゴリズムも戦争を道徳的に許容できるものにすることはできない」。アライメント(alignment)をめぐる議論も批判した。「その道徳が少数の人々によって決定されるなら、より道徳的なAIでは不十分だ」。抽象的な倫理ではなく、強力な法律と独立した監視を求めた。
アメリカ初の教皇であるレオ14世は、AIを自身の教皇職の中心的なテーマとしている。AnthropicをはじめとするシリコンバレーのAI企業は、AIの利用について宗教指導者と定期的に会合を持っている。教皇もその一人だ。
