テキストから画像を生成するためのEdiffiという新しいモデルを開発しました。これは、フィールドの以前のモデルよりも優れています。以前のモデルとは異なり、Ediffiは複数のモデルのアンサンブルであり、それぞれが画像生成プロセスの異なる段階に特化しています。このアプローチは、高い視覚品質を維持しながら、テキストの調整が改善されます。さらに、テキストや画像の埋め込みなど、さまざまな埋め込みを使用するようにエディフィを訓練し、柔軟性と汎用性を高めることができます。最後に、「ワード付きのペイント」機能も開発しました。この機能では、ユーザーはキャンバスで特定の単語を選択して「ペイント」することで出力を制御できます。
We have developed a new model called eDiffi for generating images from text, which outperforms previous models in the field. Unlike previous models, eDiffi is an ensemble of multiple models, each specializing in different stages of the image generation process. This approach results in improved text alignment while preserving high visual quality. In addition, we have trained eDiffi to work with various embeddings, including text and image embeddings, allowing for greater flexibility and versatility. Finally, we have also developed a "paint-with-words" feature, where users can control the output by selecting and "painting" specific words in a canvas.