リアル実験を支援する LabOS：XR グラスで AI が手順ミスをリアルタイム検知

生物や化学の実験現場で最も神経をすり減らすのは、論文を読むことではなく、ずらりと並んだ見分けのつかない試験管から誤った試薬を手に取ってしまう瞬間です。

これまでの科学向け AI は、画面の中で論文を要約したりコードを書いたりするドライな作業にとどまっていました。今回発表された LabOS は、その頭脳に目を与え、実際の実験台へと連れ出す試みです。

XR グラス越しに手元を見守る AI

LabOS は、リアルの実験室で人間と並んで働く AI 共同科学者として開発されました。

ドライ実験の領域では、従来どおり AI エージェントが実験計画の策定やデータ分析、解析ツールの選定を担当します。最大の特徴は、これをそのまま物理実験の場へと接続した点にあります。

研究者が XR スマートグラスを装着すると、AI は一人称視点で実験台の様子を直接認識します。

システムはあらかじめ設定された実験プロトコルを把握した上で、目の前の器具や作業者の手の動きをトラッキングし、いまどの段階にあるかを正確に判断します。そして次の指示をグラス内の視野に直接提示してくれます。

特に役立つのがミスの未然防止です。万が一間違った試薬に手を伸ばしたり、必要な手順を飛ばしそうになったりした際、取り返しのつかない事態になる直前に AI がリアルタイムで警告を発します。

暗黙の「職人技」をデータに変える

この仕組みは、手順確認だけでなく研究現場の暗黙知をデータ化する上でも大きな価値を持っています。

ピペットを構える角度や液を押し出すテンポ、わずかな沈殿の変化に気づく感覚など、実験の成否を分けるコツの多くはプロトコルに書き切れません。

スマートグラスの視点を通じて作業者の細やかな挙動を記録することで、AI は熟練者の動作感覚を学習可能なデータとして蓄積できます。将来はこれを別の AI やロボットに継承することも可能になります。

Kyle Tretina 博士は X 上で、LabOS は計算上の推論と物理的な実験をマルチモーダルで結びつけた初の AI 共同科学者だと評しています。現在は Google フォーム経由でアクセス申請を受け付けており、ソフトウェアだけでなく XR グラスを含むハードウェアもオープンソース化される予定です。

なぜ重要か

高価な完全自動化ロボットをいきなり導入するのではなく、人間の作業員にスマートな補助具を着せるというアプローチは極めて現実的で賢明だと私たちは考えます。

数千万円規模の自動化設備を導入できる研究室は一握りですし、繊細な手作業は依然として機械より人間の方が得意です。LabOS のように安価なグラスと視覚モデルを組み合わせるだけで、新人研究員の手戻りや試薬の無駄遣いを大幅に減らせます。

さらに重要なのは、物理世界での振る舞いデータの収集です。科学 AI に足りないのは論文のテキストではなく、実際の実験台で手先がどう動いているかという物理データです。グラスを着けて作業する研究者が増えるほど、AI の理解力も飛躍的に高まります。

長時間のグラス装着による疲労や、薬品を扱う現場での保護具としての安全性基準などクリアすべき課題は少なくありません。それでもハードとソフトの両面をオープンソースにする方針が守られれば、世界中の大学や研究機関に一気に広がる可能性があります。