何が起きたか

OpenAI（ChatGPTを作るAI会社）は10月6日、数学の進展に関する発表を公開した。内部の最先端モデルが生み出したとする、幅広い数学研究の成果を公開するという。公開先はGitHubのリポジトリで、原稿、証明の材料、論文を直す手順、引用の方法をまとめている。狙いは、AIが答えらしきものを出したと知らせるだけでなく、ほかの研究者が読んで、直し、確かめられる形にすることだ。

背景

数学では、答えだけでなく、なぜ正しいかを順番に示す証明が必要になる。OpenAIは、いくつもの証明をLeanを使ってコンピューターで確認できる形にし、確認できたものからリポジトリに追加すると説明した。ただし、すべての成果にLean版があるわけではない。まだコンピューターで確認されていない結果には、問題が残る可能性もある。

GitHubの説明では、現在の集まりは722本の原稿、372の関連グループからなる。モデルには約4000問を試させ、出力を原稿とグループに整理し、十分な重要性があると判断した結果を残したという。1つの結果には、ChatGPT Proで考えさせる計算を平均して約3時間使ったとも説明している。

なぜ重要か

これはAIを、短い答えを返す道具から、研究の候補を大量に探す道具へ広げる動きだ。人間だけなら時間のかかる試行をAIに任せ、研究者は有望な案を選び、意味を読み、証明を直すという分担が考えられる。数学以外でも、仮説をたくさん試す科学研究に影響するかもしれない。

一方で、AIが速く候補を作るほど、人が検査する負担も増える。もっともらしい文章と、正しい証明は同じではない。正しさだけでなく、他人が読めること、先行研究とつながることも重要になる。

確認できたこと

確認できるのは、OpenAIが自社の内部モデルによる数学成果を公開し、モデルの推論を短くまとめた10件、計算量の見積もり、試した問題数の統計まで示したことだ。独立した数学・AIの諮問グループに相談し、今後の公開方法を改善するとしている。Hacker Newsでは428ポイント、360コメントを集めた。これはコミュニティの注目度であり、成果の正しさを証明する数字ではない。

まだ分からないこと

発表だけでは、722本のどこまでが第三者の検証を通ったのか、外部の数学者が同じ結果を再現できるのかは分からない。モデルが新しい発想を出した割合と、人間が問題を選び、修正し、文章を整えた割合も、成果ごとに確認が必要だ。計算費用や、Leanで確認されていない証明の読みやすさも残る。

次に見る点

今後は、論文の改訂履歴、Lean版の追加、第三者の再現と引用が手がかりになる。OpenAIは、AIが生み出した重要な成果を考えるためのワークショップや会議も支援するとしている。AIが数学者を置き換えるかを急いで決めるより、AIの探索が本当に新しい知識につながり、人間の検査で信頼性を高められるかを追う段階だ。