提示工程指南
😃 基礎
💼 基礎應用
🧙‍♂️ 進階
🤖 代理商
⚖️ 可靠性
🖼️ 圖像提示詞
🔓 提示駭客攻擊
🔨 工具
💪 提示微調
🎲 雜項
📙 Vocabulary Reference
📚 Bibliography
📦 Prompted Products
🛸 Additional Resources
🔥 Hot Topics
✨ Credits
🖼️ 圖像提示詞🟢 介紹

介紹

🟢 This article is rated easy
Reading Time: 1 minute
Last updated on August 7, 2024

桑德舒爾霍夫

如何找到最佳的提示詞來生成完美的圖片是一項特殊的挑戰。與文字提示相比,研究如何做到這一點的方法並沒有那麼成熟。這可能是因為建立物件自身的挑戰,這些物件基本上是主觀的並且往往缺乏良好的準確性度量方法。但不要擔心,社群已經對如何提示各種影象模型有了很大的進展。

本指南涵蓋了基本的影象提示技術,並且我們強烈建議您檢視本章末尾的優秀資源。此外,我們還提供了一個端到端影象提示過程的示例。

例子

這裡,我將透過一個例子說明我是如何為這門課程的封面建立圖片的。之前我一直在進行一個深度強化學習神經輻射場專案,使用了低多邊形模型,我很喜歡這種低多邊形的風格,並且想在這個課程的封面圖片中使用它。

我想要在封面圖片上展示一個宇航員、一枚火箭和一臺電腦。

我對如何建立低多邊形圖片進行了大量研究,包括在 r/StableDiffusion 和其他網站上查詢,但沒有找到非常有用的資訊。

於是我決定從 DALLE 和提示語 Low poly white and blue rocket shooting to the moon in front of a sparse green meadow 開始嘗試,看看會發生什麼。

我認為這些結果對於第一次嘗試來說是非常不錯的,我特別喜歡左下角的火箭。

接下來,我想要生成同樣風格的一臺電腦: Low poly white and blue computer sitting in a sparse green meadow

最後,我想要一個宇航員!Low poly white and blue astronaut sitting in a sparse green meadow with low poly mountains in the background 看起來很奏效。

我認為第二張圖還不錯。

現在我有了一個宇航員、一個火箭和一個電腦。我對它們很滿意,所以我把它們放在了主頁上。幾天後,經過我的朋友們的反饋,我意識到這些圖片的風格不夠一致 😔。

我在 r/StableDiffusion 上做了更多的研究,發現人們在使用 “isometric” 這個詞。我決定嘗試一下這種風格,使用 Stable Diffusion 而不是 DALLE。我還意識到需要在我的提示語中增加更多的修飾語來約束風格。於是我嘗試了這個提示語: A low poly world, with an astronaut in white suit and blue visor sitting in a sparse green meadow with low poly mountains in the background. Highly detailed, isometric, 4K

這些結果不是很好,所以我決定先從「火箭」入手

A low poly world, with a white and blue rocket blasting off from a sparse green meadow with low poly mountains in the background. Highly detailed, isometric, 4K

這些結果並不是特別好,但在進行了一些嘗試之後,我最終得到了下面的影象

現在我想要一個更好的膝上型電腦

A low poly world, with a white and blue laptop sitting in sparse green meadow with low poly mountains in the background. The screen is completely blue. Highly detailed, isometric, 4K

我得到的結果不太一致;雖然我喜歡右下角的那個影象,但我決定走另外一條路線。

A low poly world, with a glowing white and blue gemstone sitting in a sparse green meadow with low poly mountains in the background. Highly detailed, isometric, 4K

這不是很對,讓我們嘗試一下魔幻的發光效果。

A low poly world, with a glowing white and blue gemstone magically floating in the middle of the screen above a sparse green meadow with low poly mountains in the background. Highly detailed, isometric, 4K

我喜歡這些影象,但是希望石頭在螢幕的中間。

A low poly world, with a glowing blue gemstone magically floating in the middle of the screen above a sparse green meadow with low poly mountains in the background. Highly detailed, isometric, 4K

在這個階段,我使用了 Stable Diffusion,讓之前的圖片對後續的圖片產生一些影響。於是我得到了以下結果:

最終,我得到了這個。

A low poly world, with an astronaut in white suite and blue visor is sitting in a sparse green meadow with low poly mountains in the background. Highly detailed, isometric, 4K

在這一點上,我對我的三張圖片之間的風格一致性感到滿意,可以在網站上使用它們了。對我來說,主要的收穫是這是一個非常反覆、不斷研究的過程,我必須根據不同的提示和模型進行實驗,調整我的期望和想法。

🟢 修復變形生成

🟢 Midjourney

🟢 質量增強器

🟢 重複

🟢 資源

🟢 Shot type

🟢 樣式修飾符

🟢 加權

Footnotes

  1. Parsons, G. (2022). The DALLE 2 Prompt Book. https://dallery.gallery/the-dalle-2-prompt-book/

  2. Rombach, R., Blattmann, A., Lorenz, D., Esser, P., & Ommer, B. (2021). High-Resolution Image Synthesis with Latent Diffusion Models.

  3. Ramesh, A., Dhariwal, P., Nichol, A., Chu, C., & Chen, M. (2022). Hierarchical Text-Conditional Image Generation with CLIP Latents.