Guide Labsが「Steerling-8B」公開、全トークンの学習元を追跡できる新構造
Guide Labsは全トークンを学習データまで遡って追跡できる80億パラメータのLLM「Steerling-8B」をオープンソース公開した。内部に「概念層」を設ける新アーキテクチャにより、ブラックボックス問題を解消しつつ既存モデルの約90%の性能を発揮する。
Guide Labsは全トークンを学習データまで遡って追跡できる80億パラメータのLLM「Steerling-8B」をオープンソース公開した。内部に「概念層」を設ける新アーキテクチャにより、ブラックボックス問題を解消しつつ既存モデルの約90%の性能を発揮する。