Clipdrop、Stable Doodleをリリース

Stability AIは、簡単なラフスケッチをダイナミックなイメージに変換するスケッチ・トゥ・イメージツール、Stable Doodleをリリースし、様々なプロフェッショナルや 趣味愛好者の方々に無限のイメージングの可能性を提供します。

ラフスケッチに命を吹き込むことが、かつてないほどシンプルになりました。Stability AIによるClipdropのこの新しいツールは、教育、クリエイティブデザイン、ファッション、芸術など、さまざまな業界を飛躍的に向上させる能力を備えています。 Stable Doodleは、最新のStable diffusion model SDXL 0.9とともに、Stability AIのウェブサイトClipdropで無料でお試しいただけます。

Stable Doodleは、AIツールに慣れているかどうかにかかわらず、専門家と初心者の両方を対象としています。Stable Doodleでは、基本的な描画スキルとオンラインアクセスがあれば、誰でも数秒で高品質のオリジナル画像を作成できます。

デザイナーやイラストレーターなどのプロフェッショナルな方々が、貴重な時間をよりクリエイティブな方面に有効活用し、作業効率を最大化するためのユーザーフレンドリーなアプリケーションです。ラフスケッチとして描いたアイデアをすぐさま作品に反映させ、クライアントのためのデザイン、プレゼン用資料や Web サイトの素材、さらにはロゴを作成することも可能です。可能性は無限大で、とても楽しい体験になると思います。

例

プロンプト: A comfy chair, ‘Isometric’ style

プロンプト: Cat with a jeans jacket, ‘Digital Art’ Style

プロンプト: Castle on a hill, winter, ‘Anime’ Style

プロンプト: Living room, ‘Comic Book’ Style

プロンプト: Cute owl, ‘Origami’ Style

詳細情報

Stable Doodleは、Stability AIのStable Diffusion XLの高度な画像生成技術と、強力なT2I-Adapterを組み合わせたものです。T2I-Adapterは、Tencent ARC (license)によって開発されたコンディションコントロールソリューションです。AI画像生成の精密な制御を可能にします。

T2I-Adapterは、既存の大規模な事前学習拡散モデルに学習可能なパラメータを追加することで、スケッチ、セグメンテーションマップ、キーポーズなどの入力条件を追加することができます。このフレームワークは、入力ガイダンスのための複数のモデルを同時にサポートし、生成プロセスの制御を強化します。Stable Doodleのユースケースにおいて、T2I-Adapterは、事前に学習されたText-to-imageモデル（SDXL）にラフスケッチのような追加ガイダンスを条件付け、ラフスケッチのアウトラインを理解し、モデルによって定義されたアウトラインと組み合わされたプロンプトに基づいて画像を生成できるようにします。

T2I-Adapterネットワークは約77Mのパラメータで構成されています。T2I-Adapterネットワークは、事前に学習されたText-to-imageモデルは一切変えず、ラフスケッチなどの追加ガイダンスを考慮した生成が可能になります。

Source: Github T2I-Adapter documentation

動作環境

Stable Doodleは、Clipdrop by Stability AIのウェブサイトおよびアプリ（iOSおよびGoogle Play）でご利用いただけます。ログインする必要はなく、1日の制限時間内にツールを使って気軽に始められます。ユーザーフレンドリーなインターフェースは、直感的に操作できるように設計されており、マウスで基本的なスケッチを作成し、アートスタイルを選択して「生成」をクリックするだけのとてもシンプルな使い方です。

Stable Doodleでは、アーティスティックなカスタマイズも可能で、Stable Diffusion XLを介して14種類のスタイルから選択することができます。スタイルには、リアルなもの（写真風）から映画のようなもの、クリエイティブなもの（ファンタジーアートや折り紙）まであります。

使用方法と制限

Stable Doodleは素晴らしいパフォーマンスを発揮しますが、その本質的な限界をご理解ください。Stable Doodleは、アルゴリズムを使用して画像の輪郭を分析し、視覚的に美しく整合性のある結果を生成します。ですが、最終的な出力は、ユーザーによって提供された最初のラフスケッチと入力プロンプトに依存し、ツールの精度はシーンの複雑さによって異なる場合があります。

重要なアプリケーションにおいてStable Doodleのみに頼ろうとする場合には十分にご注意ください。他のClipdropツールと同様に、Stable Doodleのユーザーは、Clipdrop利用規約を遵守する必要があります。

Stability AIについて

Stability AIは、オープンソース生成AI企業であり、公共部門および民間部門のパートナーと協力して、次世代のインフラストラクチャを世界中の人々に提供しています。ロンドンに本社を置き、世界中に開発者を擁するStability AIのオープンソース理念は、イメージング、言語、コード、オーディオ、ビデオ、3Dコンテンツ、デザイン、バイオテクノロジー、その他の科学研究における最先端の研究に決定的な道を提供します。詳細については、https://stability.aiをご参照ください。

ClipdropはAIをベースとしたトップクラスの画像編集プラットフォームで、数百万人のユーザーに利用されています。2020年に3人の元Google社員によって設立され、2023年にStability AIに買収されました。Clipdropは、Stability AIの最先端の生成AI技術を活用し、ユーザーフレンドリーでAI画像ソリューションの最先端を行く画像編集ツールを提供しています。

Stability AI Japan公式Twitterでは最新情報を発信しています。ぜひフォローしてみてください。