Appleが新Apple Intelligence機能を提供開始：通話翻訳や画面検索に対応

外国人と対面で話しているとき、相手が口を開いた瞬間にイヤホンのノイズキャンセリングが相手の肉声を抑え、耳元でリアルタイムに通訳してくれる。そんな体験が日常のものになりつつあります。

Appleは9月15日、Apple Intelligenceの新機能を正式リリースしました。今回のアップデートはiOS 26、iPadOS 26、macOS Tahoe 26、watchOS 26、visionOS 26向けに提供され、対応デバイスを持つユーザーは無料で利用できます。

リアルタイム翻訳と画面の視覚インテリジェンス

今回の目玉は、OS全体に組み込まれた「ライブ翻訳」です。

メッセージアプリでは入力したテキストが相手の言語へ自動で翻訳されて送信されます。FaceTimeでは相手の声を聞きながらリアルタイム字幕が表示され、通常の電話では翻訳音声がその場で読み上げられます。

対面での会話では、AirPods Pro 3の両方の軸を同時に長押しするか、Siriへの呼びかけ、またはアクションボタンから起動できます。アクティブノイズキャンセリングが相手の肉声を抑えてくれるため、翻訳された音声を聞き取りやすいのが特徴です。年内には日本語、イタリア語、韓国語、中国語（簡体字・繁体字）にも対応が広がる予定です。

また、画面上の内容を認識する視覚インテリジェンスも強化されました。通常のスクリーンショットと同じボタンを押して画面上のスニーカーなどを囲むだけで、GoogleやeBay、Poshmark、Etsyで類似品を検索できます。チラシの画像からワンタップでカレンダーに予定を登録したり、ChatGPTに質問を投げかけることも可能です。

フィットネス向けには「Workout Buddy」が登場しました。心拍数やペース、リングの進捗データを端末内で分析し、Fitness+トレーナーの声をもとにした動的合成音声でワークアウト中にパーソナライズされた励ましを届けてくれます。

開発者へ端末内モデルを無償開放

さらに興味深いのは、開発者に向けた基盤の開放です。

Appleは、Apple Intelligenceの中核となるオンデバイス基盤モデルへのアクセスをすべての開発者に開放しました。このモデルは完全オフラインで動作し、Swiftに深く統合されており、開発者は推論コストを一切支払うことなく利用できます。

すでにStreaksがタスクの自動分類に採用しているほか、CARROT Weatherが無制限の天気チャットを提供し、動画編集のDetailが構成案からテレプロンプター用原稿を生成するなど、実際の導入例も登場しています。

ショートカットアプリもこのモデルに直接アクセスできるようになり、音声文字起こしと手書きメモの突合や、PDFからのデータ抽出とスプレッドシートへの転記といった自動化がプライベートに組めるようになりました。

なぜ重要か

私たちは、Appleの最も巧みな戦略は、派手なAIチャットボットをアピールするのではなく、端末内のAI算力を「無料のOS基盤インフラ」として定着させようとしている点にあると考えています。

一般ユーザーにとって、画面上のアイテムをそのまま囲んで検索できる体験や、通話中の自動翻訳は、日常の面倒をダイレクトに省く機能です。対応端末を持っているなら、この画面検索の利便性を確かめるだけでも今すぐ試す価値があります。

業界全体から見ても、端末内推論を開発者に無料で開放した影響は小さくありません。これまでテキスト分類や要約のためにOpenAIなどの外部APIに課金していた小規模開発者が、コストゼロで同等機能を組み込めるようになるため、Androidや他社サービスへの大きな圧力になります。

一方で、凝った画像生成や複雑な画面上の質問は依然としてChatGPTに頼っているのが現状です。Apple自前のモデルの実力にはまだ制約が見え隠れしており、日本語を含む追加言語の展開スピードがどこまで追いつくかが今後の鍵になりそうです。