Stable LM Zephyr 3B公開:30億パラメータでエッジ端末でも軽快に動作
軽量対話モデル「Stable LM Zephyr 3B」が公開された。7Bモデルより60%小型化されており、DPOにより指示追従やQ&A性能を強化。高価なハードウェアを必要とせず、エッジ端末上でも軽快に動作する。現在は非商用ライセンスで提供されている。
GPT、Claude、Gemini、DeepSeek、Qwenなど大規模言語モデルの新バージョン、ベンチマーク、料金、APIの変更を毎日まとめています。
軽量対話モデル「Stable LM Zephyr 3B」が公開された。7Bモデルより60%小型化されており、DPOにより指示追従やQ&A性能を強化。高価なハードウェアを必要とせず、エッジ端末上でも軽快に動作する。現在は非商用ライセンスで提供されている。
Googleは対話型AI「Bard」に最新モデル「Gemini」を統合すると発表した。まずは170以上の国と地域で英語版のGemini Proがテキスト向けに提供され、GPT-3.5を上回る推論性能をアピールする。最上位のGemini Ultraを積んだBard Advancedは来年初頭に登場予定だ。
Anthropicは最新モデル「Claude 2.1」を公開しました。業界最大級となる20万トークンのコンテキストに対応し、誤情報の出力率を従来の半分に削減。APIではシステムプロンプトや外部ツール連携(Tool use)のベータ版も利用可能です。
Microsoft は小規模言語モデル「Orca 2」の重みを公開した。大規模モデルの単なる模倣をやめ、課題に応じて思考ステップを使い分ける戦略を学習。複雑なゼロショット推論テストで、自らより 5 〜 10 倍大きなモデルに匹敵する性能を示した。
米報道によると、Googleは次世代AIモデル「Gemini」の提供を、当初予定していた11月から2024年初頭へ延期した。DeepMindがGPT-4に対抗すべく開発を進める主力モデルだが、生成AIレースでOpenAIの背中を追うGoogleの苦戦が続いている。
Google は自立管理可能な年齢に達した世界中のティーン向けに「Bard」を開放した。数式の画像や入力から段階的な解き方を提示する機能やデータ可視化に対応。ハルシネーションや不適切コンテンツへの対策として、安全フィルターに加え回答の裏付けを確認する二重チェック機能が初回自動実行される。
OpenAIは、ChatGPT Plusの新規ユーザー登録を一時停止したと発表した。DevDay以降の利用急増でサーバー容量を超過したため、既存ユーザーの体験を維持するための措置だという。再開時の通知はアプリ内から登録できる。
OpenAIのサム・アルトマンCEOは英紙の取材に対し、次世代モデル「GPT-5」の開発に着手したことを認めた。超知能やAGIの実現には膨大な計算資源とデータが不可欠であり、実用化には米Microsoftなどからのさらなる巨額投資が必要になると語っている。公開時期は未定。
Samsung は独自開発の生成 AI モデル「Gauss」を発表した。言語処理と要約を担う Language、コーディング支援の Code、画像生成や編集を行う Image で構成される。クラウド依存のサービスと異なり端末上での動作を重視しており、来年発売が見込まれる Galaxy S24 シリーズなどへの搭載が有力視されている。
米メディアの報道によると、AmazonがChatGPTやBardに対抗する大規模言語モデル「Olympus」を開発していることが明らかになった。パラメータ数は2兆規模とされ、CEOのアンディ・ジャシー氏が直率。早ければ12月にも公開され、AlexaやECサイトに導入される見込みだ。
OpenAIは開発者会議「DevDay」でGPT-4 Turboを発表した。128Kトークンの長文に対応しつつ、入力コストを3分の1、出力を2分の1に低減。あわせて検索やコード実行を標準統合したAssistants APIも公開し、独自エージェントの開発を大幅に簡素化した。
イーロン・マスク氏はxAIの初となるAIチャットボット「Grok」を発表した。基盤モデルGrok-1を搭載し、Xのリアルタイム情報へのアクセスやユーモアを交えた回答が特徴。現在は米国の一部のユーザー限定で提供されており、初期ベータ終了後はXのPremium+登録者向けに展開される。
PhindはHumanEvalで74.7%を記録し、GPT-4を上回るプログラミング特化モデルを発表した。NVIDIAのTensorRT-LLMとH100を活用して毎秒100トークンの高速出力を実現し、16kコンテキストに対応する。重みはHugging Faceでオープンソース公開され、VS Code拡張機能などでも利用できる。
米OpenAIがChatGPT Plus会員向けに最新ベータ機能の提供を開始した。チャット欄から直接ファイルをアップロードして要約やデータ可視化ができるほか、Bing検索やデータ分析などを手動で切り替えず文脈に応じて自動選択する。現在一部の有料ユーザーから順次提供されている。
Twelve Labsは動画言語基盤モデル「Pegasus-1」を発表し、動画からテキストを生成するAPI群を公開した。静止画の連続として処理するのではなく、映像と音声を統合して解析することで、長尺動画の要約や目次作成、レポート生成に対応する。
報道によると、OpenAIは開発中だったAIモデル「Arrakis」のプロジェクトを今年初めに中止した。ChatGPTの運用コストを抑える目的でGPT-4と並行して進められていたが、効率面で期待に届かず、出資元の米マイクロソフト幹部を失望させたとされる。
Baiduは北京のイベントで最新AIモデル「Ernie 4.0」を発表した。CEOの李彦宏氏は理解、生成、推論、記憶の能力が大幅に向上し、GPT-4に匹敵するとアピール。同社の検索やマップに順次統合される予定だが、市場の反応は慎重で株価は小幅安となった。
Anthropic は Web サービス「claude.ai」の提供地域を世界 95 カ国へ拡大したと発表した。対象地域のユーザーは、日常業務や専門タスクで Claude と直接対話できるようになった。初期の米国や英国中心の展開から提供範囲が一気に広がった形だ。
Portkeyの直近3カ月の観測データによると、GPT-4の応答遅延が着実に低下し、GPT-3.5との速度差が縮まっています。特に上位99パーセンタイルのレイテンシは半分以下に短縮され、通常リクエストでは1トークンあたり1ミリ秒未満を記録。処理速度のボトルネックは解消に向かっています。
開発者が Google MakerSuite の未公開 UI をリークした。マルチモーダルモデル Gemini が統合されるほか、1 つのプロンプトからアプリのプロトタイプを自動生成・公開できる未発表ツール「Stubbs」の存在が明らかになった。