EleutherAI 釋出 8TB 開源資料集:全靠授權與公有領域文本訓練
EleutherAI 聯合多家機構釋出 8TB 訓練資料集 The Common Pile v0.1。該資料集耗時兩年,完全由授權和公有領域文本構成。同步推出的 7B 模型 Comma 表現媲美 Meta 的初代 Llama,證明不用侵權資料也能練出好模型。
EleutherAI 聯合多家機構釋出 8TB 訓練資料集 The Common Pile v0.1。該資料集耗時兩年,完全由授權和公有領域文本構成。同步推出的 7B 模型 Comma 表現媲美 Meta 的初代 Llama,證明不用侵權資料也能練出好模型。
開源促進會(OSI)發文批評 Meta 濫用「開源」概念,指出 LLaMA 2 限制商業規模和特定領域,並不符合開源定義。OSI 認為開源必須賦予開發者完整自主權,不能限制用途,他們計劃在 10 月 17 日拿出「開源 AI」的正式定義草案。