NVIDIAの「GauGAN2」とは:落書きと文字でリアルな風景を生成
NVIDIAが開発したGauGAN2は、大まかなスケッチとテキスト入力を組み合わせて写実的な自然風景を生成するツールだ。1000万枚の風景画像で学習されており、ブラシや消しゴムで山や空の形を微調整できる。UIはレトロだが、コンセプトアートの素早い作成に役立つ。
NVIDIAが開発したGauGAN2は、大まかなスケッチとテキスト入力を組み合わせて写実的な自然風景を生成するツールだ。1000万枚の風景画像で学習されており、ブラシや消しゴムで山や空の形を微調整できる。UIはレトロだが、コンセプトアートの素早い作成に役立つ。
「Sarah's Scribbles」の作者サラ・アンダーセン氏が自身の体験を明かした。名前をプロンプトに入れるだけで、AIがわずか数秒で自身の画風を模倣した画像を生成することに危機感を表明。長年培った独自の表現から人間性が削ぎ落とされたと訴えている。
スタートアップのPolyはテキストプロンプトから3Dテクスチャを生成できるAIスイートを発表した。光の反射を模した物理ベースのレンダリングマップに対応し、これまでに200万件以上のテクスチャを生成。Y Combinatorなどから390万ドルを調達している。
AI生成アートの可能性と倫理的課題を考察する記事が公開された。AIは人間の芸術家の独自性を奪うものではなく、創作の発想を広げる実験ツールと捉えるべきだと主張。雇用への影響や感情表現の深さといった懸念に向き合いながら、責任ある活用の道を探る。
Picsartが新たな生成AI機能「AI Avatar」を発表した。数枚の自撮り写真をアップロードするだけで、アニメ風やスーパーヒーローなど多彩なスタイルのアバターを生成可能。背景透過や画質向上などの編集ツールと連携した仕上げにも対応している。
ブリガム・アンド・ウィメンズ病院などの研究チームは、手術中の迅速凍结切片画像を石炭酸固定パラフィン包埋(FFPE)並みの高品質画像に変換するAIモデルを発表した。数分で膠芽腫や肺がんを高精度に診断できるよう支援する。ただし実際の医療現場への導入には追加の臨床試験が必要となる。
深層学習はメタバースの進化において不可欠な基盤技術となりつつある。視線追跡や3D再構築に加え、Metaのリアルタイム音声翻訳や、定型文に頼らない生成AIチャットボットによるブランド代表の対話が実現しつつある。仮想世界での自然な体験を深層学習が支える。
画像生成AIの中核技術である拡散モデルの歩みと仕組みが解説された。熱力学に着想を得たこの技術は、ノイズから元のデータを復元する逆過程を学習し、OpenAIのCLIPと組み合わせることで精度の高い生成を可能にした。現在では画像にとどまらず、音楽生成やタンパク質設計など医療分野へも応用が広がっている。
Kickstarter は成人向け AI 画像生成を目指す Unstable Diffusion のクラウドファンディングを規約見直しに伴い中止した。867 人の支援者から集まった 5.6 万ドル以上は全額返金される。アーティストからの激しい抗議を受け、AI プロジェクトの著作権や安全性の基準が問われている。
OpenAIは単一GPU上で数分でシンプルな3Dオブジェクトを生成する新AI「Point-E」を発表した。生成した単一視点画像から別の拡散モデルで3D点群を作る仕組みで、類似AIより1〜2桁高速に動作するという。
12月、匿名のクリエイターがStable DiffusionとDreamBoothを活用し、「時空旅行者の自撮り写真」シリーズを公開した。架空の同一キャラクターをピラミッド建設現場やダ・ヴィンチの画室に違和感なく配置し、微調整技術でキャラクターの一貫性を保つユニークな画像生成の可能性を示した。
プレゼンテーション制作ツール「Tome」が GPT-3 と DALL-E 2 を統合した AI 生成機能を発表した。テキスト枠に発表テーマを入力するだけで、構成案や本文、AI 生成画像を含んだスライド下書きを即座に作成できる。現在はベータ版として無料で試すことができ、構想段階の負担を大幅に減らせる。
RefaceのCEOがForbesへの寄稿で生成AIが創作活動やビジネスに与える影響を解説した。DreamStudioが1カ月足らずで100万ユーザーに達するなど普及が加速するなか、著作権議論と並行して、企業は顧客を創作者に変えるAI機能を取り入れるべきだと提言している。
スタンフォード大学の研究チームは、Stable Diffusionを微調整して病変を含む胸部X線画像を生成する手法を発表した。専用の膨大な計算資源を使わずに医療画像を合成でき、希少疾患の研究データ不足解消に道を開く。ただし多様性やライセンス上の制限が残る。
画像生成AI「Stable Diffusion 2.0」が公開され、新機能「depth2img」が追加された。単眼深度推定モデル「MiDaS」を用いて元の幾何学的構造を維持できるため、3Dクリエイターは簡易なグレイボックスから構図を崩さずにAIで質感やライティングを試行できる。
Text-CADは自然言語からハードウェア製造までの全工程をつなぐツールです。11のスキルを備え、プロンプトからのSTEP生成、1.6万点超のstep.parts部品ライブラリ検索、Bambu製プリンタでのスライスまで対応。モデルに直接3Dデータを吐かせずPythonコードを書かせることで、形状の正確性を担保しています。