DeepMindがマウスポインタをGeminiで再定義、「ここ直して」で画面操作
Google DeepMindはGeminiを活用し、画面上の対象を指して「これを直して」と話しかけるだけで操作できる新ポインタ技術を発表した。カーソル周辺の視覚・文脈を認識してピクセルを操作可能な要素へ変換する。Chromeに順次統合されるほか、Googlebookにも搭載予定だ。
Google DeepMindはGeminiを活用し、画面上の対象を指して「これを直して」と話しかけるだけで操作できる新ポインタ技術を発表した。カーソル周辺の視覚・文脈を認識してピクセルを操作可能な要素へ変換する。Chromeに順次統合されるほか、Googlebookにも搭載予定だ。
GoogleはGeminiを中心に設計した新カテゴリーのノートパソコン「Googlebook」を発表した。カーソルを振るだけで文脈に応じた提案を行う「Magic Pointer」やプロンプトからウィジェットを作成する機能を搭載し、スマホ連携も強化。AcerやLenovoなどと提携し、今秋に発売予定。