Meta、韓国のAIチップ新興FuriosaAIを買収交渉中か
Metaが韓国のAI半導体新興FuriosaAIの買収に向け交渉中であると報じられた。同社はLlamaなどの推論実行を加速するチップを手掛ける。今年AIに最大650億ドルを投じる計画のMetaによる、Nvidia依存の低減を狙った動きとみられる。
Llama 3
ザッカーバーグ氏、AI著作権訴訟でYouTubeを引き合いにデータ利用を弁護
Metaのマーク・ザッカーバーグCEOがAI著作権訴訟の証言録取で、YouTubeにも海賊版があることを例に挙げ、データセットの一律禁止は不適切だと弁護しました。訴状によると、同社は社内の懸念を押し切って海賊版サイトのデータでLlamaを学習させていたとされています。
Sakana AIが「CycleQD」を発表：微調整なしで複数スキルを統合する進化型フレームワーク
Sakana AIの研究チームは、高コストな微調整を行わずに特化型モデルのスキルを統合できる新フレームワーク「CycleQD」を開発した。遺伝的アルゴリズムに基づく交叉と変異を活用し、Llama 3-8Bを用いた検証では従来の微調整やモデルマージ手法を上回る性能を示した。
ザッカーバーグ氏がLlamaへ全面シフト：Meta復活の舞台裏
報道によると、MetaのザッカーバーグCEOはメタバースの低迷を経てLlamaのオープンソース化を決断し、全社戦略を再構築した。ダウンロード数は6億回を超え製品群を支える一方、年間最大400億ドルの巨額投資に対する収益化が課題だ。
Meta、地域課題を解決する第1回Llama革新賞の受賞者を発表
Metaは、アフリカや中東、アジア太平洋などでLlamaを活用し地域課題の解決に取り組む組織を表彰する「Llama Impact Innovation Awards」の受賞者を発表した。選出されたプロジェクトには最大3万5000ドルの資金と広告クレジットが提供され、多言語医療支援や教育ツールなどに役立てられる。
MultiOn、自己修復機能を備えた新AIエージェント「Agent Q」を発表
MultiOnは新世代のAIエージェント「Agent Q」を発表した。計画策定と自律的な自己修復機能を備え、LLaMA 3のゼロショット基準と比較して340％の性能向上を達成したとしている。
規制の不透明さを理由に：Meta、今後のマルチモーダルAIのEU提供を見送り
Metaは今後数カ月以内に投入予定のマルチモーダルLlamaモデルおよび今後の同型モデルについて、規制環境の不透明さを理由にEUでの提供を見送ると発表した。オープンライセンスであってもEU企業は利用できなくなる一方、テキスト限定版のLlama 3は提供される予定。
Meta AIがインドで提供開始 WhatsAppやInstagram等で無料利用可能に
MetaはLlama 3を搭載したMeta AIの英語版をインドで順次提供開始したと発表した。WhatsApp、Facebook、Messenger、Instagramに統合され、グループチャットでの提案や「imagine」コマンドによる画像生成を無料で利用できる。
マスク氏とルカン氏がXで舌戦：AIの研究姿勢と過大宣伝を巡り対立
MetaのチーフAIサイエンティストであるヤン・ルカン氏とイーロン・マスク氏がX上で激しい口論を展開した。ルカン氏がマスク氏の過剰な宣伝姿勢を批判したのに対し、マスク氏はルカン氏の近年の研究成果に疑問を投げかけた。学術界のオープン研究と企業主導の商業化という二つの立場の衝突が浮き彫りになっている。
EPFLとイェール大、MetaのLlama 3ベースの医療特化オープンモデル「Meditron」を公開
EPFLとイェール大学医学部の研究チームは、MetaのLlama 3を微調した医療向けオープンソースモデル「Llama-3[8B]-MeditronV1.0」を発表した。医療資源の乏しい地域や人道支援向けに設計され、MedQAなどのベンチマークで同規模の最高スコアを記録している。
Meta、オープンLLM「Llama 3」を公開 8Bと70Bの2サイズ、15兆トークンで学習
Metaは次世代オープンLLM「Llama 3」を公開した。8Bと70Bの2サイズでベースおよび指示調整モデルを提供し、15兆以上のトークンで学習されている。8B版は民生用GPUでも動作や微調整が可能。オープンソースAIの新たな基準となる一方、現時点のコンテキスト長は8kトークンにとどまる。
NVIDIA、MetaのLlama 3を全プラットフォームで高速化
NVIDIAはMetaの最新LLM「Llama 3」に向けた推論最適化を発表した。H200 GPU単体で70Bモデルを実行した場合、毎秒約3000トークンを生成し、約300人の同時利用に対応可能。8BモデルはRTX PCやJetson Orinなどのエッジ端末にも対応する。
Meta、「Llama 3」搭載のMeta AIを発表：Web版公開とリアルタイム画像生成も
Metaは最新モデル「Llama 3」を搭載したMeta AIを発表し、単体サイト meta.ai を立ち上げた。FacebookやInstagram、WhatsAppの検索バーやフィードに統合され、文字入力中にリアルタイムで画像が変化する生成機能も導入。英語圏の十数カ国へ提供を拡大する。
Meta、次世代オープンソースLLM「Llama 3」を来月中にリリースと認める
Metaは次世代の大規模言語モデル「Llama 3」を来月中に初期リリースすると明かした。年内に異なる機能を持つ複数バージョンを展開し、自社製品群に順次組み込む方針だ。前世代より回答の幅を広げる見込みで、最大モデルは約1400億パラメータになると予想されている。
Meta、次世代LLM「Llama 3」を学習中と発表 年内にH100を34万基超確保へ
Metaのマーク・ザッカーバーグCEOは次世代大規模言語モデル「Llama 3」の事前学習を開始したと明らかにしました。AGIの実現に向けて推論やコーディング能力を大幅に強化する方針で、2024年末までにNVIDIA H100を34万基以上確保し、強力な計算基盤を構築する計画です。
Metaが「Llama 3」準備の噂：GPT-4級の性能を目指し無償提供も継続か
The Decoder報道によると、MetaはLlama 3および4を訓練するための十分な計算資源を確保し、Llama 3でGPT-4に匹敵する性能を目指しつつ無償提供を維持する計画だとOpenAIの研究者が明かしました。オープンソース陣営がトップ性能に迫る期待が高まりますが、公式発表はまだありません。