本文へスキップ
IFAI

オープンソース

オープンソース対話AI「OpenAssistant」公開、60万件超の学習データも無償提供

公開 拡散指数 60

オープンソースの対話AIプロジェクト「OpenAssistant」が正式リリースされた。モデル本体だけでなく、人間が作成した60万件以上の高品質な対話・フィードバックデータセットもHugging Face上で完全無償公開され、独自の指示モデル開発に利用できる。

画像:youtube.com

OpenAssistantは、誰もが高性能な対話型モデルを構築できるように設計されたオープンソースの対話AIプロジェクトです。モデル本体だけでなく、学習に不可欠なデータセットも完全無償で一般公開されています。

開発チームが数カ月間にわたり収集したテキスト入力とフィードバックが網羅されており、商用APIに頼らず自前で対話AIを微調整したい開発者にとって待望のリソースとなります。

何ができるのか

OpenAssistantは、プロプライエタリな大手AIモデルに依存することなく、オープンな環境で高品質なチャットアシスタントを開発・検証できるようにします。

チームが実際に学習させた強力な対話モデルは、オンライン上で直接試すことができ、指示に対する応答性能をすぐに確認できます。

開発者は公開されたデータを活用して、既存のベースモデルをユーザーの指示通りに動作するアシスタントへとファインチューニングすることが可能です。

中核となる60万件の人間データ

現代の言語モデル開発における最大の障壁は、高品質な対話データの確保にあります。OpenAssistantの最大の目玉は、まさにそのデータセットそのものを無償開放した点です。

数カ月の取り組みを通じて集められたデータは、人間が作成した60万件以上のデータポイントに達します。幅広いテーマや多様な文体を網羅しており、指示学習に特化した設計となっています。

データセット全体はHugging Face上のOpenAssistant組織ページで誰でも自由にダウンロードして利用できます。

なぜ重要か

私たちは、このプロジェクトが単に学習済みモデルを配るだけでなく、人間によるフィードバックデータを丸ごと開放した点に大きな価値があると考えています。オープンソース陣営と商用巨大モデルとの差は、まさにこうした高品質なアライメントデータの有無にありました。

自社や個人で自由に動かせる対話AIを育てたいエンジニアにとって、今すぐ試す価値があるリソースです。最終的なモデル精度には計算資源の制約が残るものの、60万件を超える人間データが手に入るようになったことで、コミュニティ全体の開発スピードは確実に加速します。

情報源 (2)

  1. [1]
    youtube.com(新しいタブで開きます)原文youtube.com
  2. [2]

毎日のAIピックアップ