アレン人工知能研究所(Ai2)は11月19日、研究プラットフォーム「Asta」上でTheorizerを公開した。複数の論文にまたがる知見をつなぎ合わせ、観察された現象に対する説明を提案するエージェントで、コードはGitHubでも同時にオープンソース化された。
使い方は質問を投げるところから始まる。Theorizerは文献を検索したうえで、まず各論文から何を抜き出すかを定めた抽出テンプレートを生成する。Ai2が挙げる例では、「腫瘍はどのように大きくなるのか」と尋ねた場合、テンプレートには、研究がどの遺伝子を扱ったか、活性をどう測定したか、遺伝子を改変すると何が起きたか、といった項目が入りうるという。続いて各論文の知見を比較し、複数の理論を生成する。個々の主張は出典論文にリンクされ、適用範囲も明記される。研究者は主張ごとに原文へ戻り、証拠が十分か、実験条件を並べて比較できるかを判断できる。新たに提案されたと判断した主張には、別途マークが付く。
事例は3件、ベンチマークスコアはなし
Ai2によると、このツールは科学者と共に1年近くかけて磨いてきたという。今回公開されたのは数件の事例で、ベンチマークの評価スコアは一切示されていない。
1件目は肺腺がん。症例の約20~30%では、包括的なシーケンシングを行っても、広く認められたドライバー変異が見つからない。Theorizerは3つの方向性を示した。未発見の遺伝的変化がRASシグナルを活性化している可能性、RASを迂回して細胞が分裂できる別の仕組みがある可能性、一部の腫瘍が他の細胞型の特徴を帯びている可能性である。研究者のDevarakonda氏は結果を読んでこう反応した。
"Wait a second, this is exactly what I think. And it took me 15 years to think like this."
(ちょっと待って、これはまさに私の考えだ。こう考えられるようになるまで15年かかった。)
チームはその後、Ai2の別ツール「AutoDiscovery」を使い、DREAM複合体の破綻が関与している可能性を提示し、CDK2への依存を支持する初期的な兆候も確認した。Ai2はこれらの結果がいずれも実験による検証を要すると明記している。
神経科学者のLecoq氏が尋ねたのはVIP介在ニューロンについてだった。候補となる理論が1~2件得られれば十分と考えていたところ、Theorizerは一度に50件を返した。
3件目の事例はペルーだ。PalaciosとJuarezの2人はPISCO気象データセットを使っており、Theorizerが示した説明の1つは、のちに2人によって誤りと判定された。ところが、その説明を検証するために11月の気温ピークを確認しはじめたところ、問題はデータの出どころにまでさかのぼった。露点の記録は2016年で途切れる一方、最低気温の記録は2020年まで続いており、その間に4年の開きがある。再構成された値の一部は35°Cを超え、しかも11月に集中していた。元記録に見られる11月のピークがどこから来たのかについては、2人はいまも独立した観測地点のデータと突き合わせている最中で、現時点で結論は出ていない。
Astaの系譜
Ai2が今年Asta上で打ち出してきた施策を並べると、ツールの役割分担が年々細かくなっていることが分かる。10月初めには、検索した文献を引用付きの研究レポートにまとめる8BパラメータのAstaBriefをオープンソース化した。当時示された平均の出力時間は51.1秒だった。AstaBriefは小型モデル・オープンウェイトという路線をとる。Ai2の説明では、多くの科学者にとって最良の証拠は社内レポートの中にあり、商用のAI研究所には送れないからだという。Theorizerはそこからさらに一歩進み、既存の結論の要約から、検証にかけられる説明の提案へと踏み出した。
利用のハードルは高くない。Astaのウェブ版ではそのまま使え、トークン費用はAi2が負担するが上限は設けられている。自分のマシンで動かしたい場合は、公開されたライブラリを使い、実際の使用量に応じてトークン費用を自己負担する。コードのライセンスは公開ページに記載がなく、GitHubリポジトリの記載が正となる。Ai2はこのほか、科学者向けのオンラインワークショップを太平洋時間12月10日午前10時に開く予定だ。
Ai2自身が挙げる制約は2つある。Theorizerは関連研究を見落とす可能性があり、独創性を誤判定する可能性もある。分析対象とした論文群の中では新しく見える理論でも、別の場所ですでに誰かが論じているかもしれない。「新規」マークが付いた主張のうち、こうしたケースがどれだけあるのか、Ai2は統計を示していない。研究者は、より広範な文献と照らし合わせる作業を引き続き行う必要がある。
参考資料:CocoLoop、Ai2公式ブログ、Astaプラットフォーム、Ai2のGitHubリポジトリ。Theorizerのワークフロー、各事例の割合と年次データ、AstaBriefの平均出力時間、ウェブ版のトークン費用ルールを確認した。