מה המשמעות של דיפוזיה יציבה ולמה היא מיועדת?

היקום של בינה מלאכותית עשתה קפיצת מדרגה ענקית בשנים האחרונות, ומאפשרת לכל אחד, ללא קשר לידע הטכני או לניסיון האמנותי שלו, צור תמונות מרשימות מביטויים פשוטים. דיפוזיה יציבה, אחת הפיתוחים המהפכניים והמוערכים ביותר בתחום הבינה המלאכותית הגנרטיבית, מעמידה לרשותכם כלים רבי עוצמה, הן עבור אלו המעוניינים להתנסות והן עבור אנשי מקצוע בתחום העיצוב והאיור.

במדריך זה נספר לכם הכל על דיפוזיה יציבה. מצעדים ראשונים למתחילים ועד לטכניקות עריכה ועריכה מתקדמות, כולל המלצות לכלים, תבניות ותוספים שיקחו את היצירות שלכם לשלב הבא.

מהי דיפוזיה יציבה ומדוע היא חוללה מהפכה בהדמיה?

דיפוזיה יציבה זהו מודל בינה מלאכותית בקוד פתוח שהפך את יצירת התמונות לדמוקרטיזציה באמצעות טכניקות למידה עמוקה. בזכות העיצוב החדשני שלו, מאפשר לך להמיר תיאור טקסט פשוט (הנחיה) לתמונות מדהימות, מפורט ואיכותי. בכל מקום שתהיו, תוכלו לנצל את המנוע שלו מבלי לשלם דבר, להתקין אותו בכל מקום שתעדיפו, ואפילו לשדרג אותו בהתאם לצרכים שלכם, מה שמייחד אותו מפתרונות מסחריים וסגורים אחרים.

פעולת הדיפוזיה היציבה מבוססת על א מודל דיפוזיהזה מתחיל עם רעש אקראי כמו טלוויזיה מתה, ובאמצעות שלבים ושיפורים מרובים המונחים על ידי הטקסט שלך, מסלק את הרעש הזה עד שיוצר תמונה קוהרנטית ומושכת ויזואלית.

תכונה זו הופכת אותו ל בחירה אידיאלית עבור אמנים, יוצרי תוכן, מפתחים ומשתמשים ביתיים שרוצים ללכת מעבר לתמונות המסורתיות. העובדה שמדובר בקוד פתוח פותחת דלת להתאמות אישיות אינסופיות, שילוב עם כלים קנייניים וייצור מקומי, מבלי להסתמך על שרתי צד שלישי או על עמלות חודשיות אם תרצו בכך.

מה אפשר לעשות עם דיפוזיה יציבה?

יישומי דיפוזיה יציבים הולכים מעבר ליצירת תמונה מטקסט. בינה מלאכותית לא רק מייצרת תמונות מאפס, אך גם מסוגל ל:

• עריכת תמונות קיימות: ניתן להעלות תמונה ולבקש ממנה להוסיף אובייקטים, להסיר פרטים או לשנות את הסגנון.
• צביעה חיצונית: מרחיב את קצוות הקומפוזיציה שלך מהרמזים שאתה נותן בהנחיה.
• מילוי אזורים ספציפיים (צביעה פנימית): שנה רק חלק מהתמונה שבחרת, כגון תיקון יד, שינוי רקע או שיפור ההבעה על פנים.
• שינוי צורה של תמונות (img2img): ניתן להשתמש בתמונה אמיתית כנקודת התייחסות כך ש-Stable Diffusion יוכל לפרש אותה מחדש בסגנון אחר, לשנות את התאורה או הצבעים...
• שילוב סגנונות אמנותיים: הוא משלב טכניקות ורפרנסים שונים (לדוגמה, אמנות קלאסית, אנימה, פוטוריאליזם וכו') בהנחיה אחת.

זה צדדיות מה שהופך אותו לבן לוויה אידיאלי ליצירתיות דיגיטלית, איור, עיצוב גרפי ואפילו יצירת משאבים למשחקי וידאו, קמפיינים שיווקיים או פשוט הנאה מחקר גבולות הבינה המלאכותית.

כיצד פועלת דיפוזיה יציבה מבפנים?

דיפוזיה יציבה נובעת מה- אימון של מיליוני תמונות עם כיתוב הודות למערכי נתונים גדולים (כגון LAION-5B), שבהם בינה מלאכותית לומדת לקשר מושגים טקסטואליים עם דפוסים חזותיים. המודל משתמש במה שמכונה מודל דיפוזיה: תחילה הורס תמונה על ידי הפיכתה לרעש, ולאחר מכן לומד לשחזר אותה מאפס בהתבסס על הטקסט שהמשתמש מזין.

בכל שלב, המודל משפר את התמונה, הפחתת רעש והגדלת רמת הפירוט, עד שהתוצאה מתקרבת לסצנה שתיארנו. בנוסף, Stable Diffusion מאפשר לך לווסת את "המשקל" של מילים מסוימות כדי לתעדף (או להחליש) אלמנטים ספציפיים בסצנה, לתפעל סגנונות ולהימנע מתוצאות לא רצויות.

La התפתחות מתמדת של הפרויקט ופתיחותו לקוד אפשרו את הופעתם של אינספור וריאציות ושיפורים על ידי הקהילה, כגון מודלים, סגנונות וטכניקות חדשים כדי להשיג תוצאות ריאליסטיות או ספציפיות הרבה יותר.

אילו יתרונות מציעה Stable Diffusion על פני כלים אחרים?

ההבדל העיקרי של דיפוזיה יציבה הוא אופיו החינמי והפתוח בקוד. שלא כמו מודלים אחרים כמו MidJourney או DALL-E, ניתן להריץ אותו במחשב שלכם, להתקין אותו על שרתים, לנסות דברים חדשים ולשנות אותו לטעמכם. יתרונות בולטים נוספים כוללים:

• חינם (למעט בפלטפורמות פרימיום)ניתן להשתמש ברוב שירותי האינטרנט ובהתקנה מקומית ללא תשלום, אלא אם כן תבחרו בשרתי פרימיום או תרצו גישה לתכונות מתקדמות ספציפיות מאוד.
• פרטיות: ניתן ליצור תמונות מבלי לצאת מהמערכת, ובכך להימנע מבעיות עם נתוני ענן או חיבורים איטיים.
• מודולריות והתאמה אישית: תומך במודלים מותאמים אישית אינסופיים, סגנונות, הרחבות ומשאבים שפותחו על ידי הקהילה.
• איכות ופרטים: הדור האחרון של דגמים (SDXL, Juggernaut, Realistic Vision וכו') מתחרה ולעתים קרובות עולה עליהם בהפקת תמונות בתשלום.

לאור זאת, יש להצביע גם על כמה חולשות או בעיות תלויות ועומדות. מעל הכל, יש לציין כי דיפוזיה יציבה מציגה עקומת למידה תלולה יותר בהשוואה לפתרונות אחרים מִסְחָרִי. 

תחילת העבודה: כיצד להתקין ולקבוע תצורה של דיפוזיה יציבה באופן מקומי

התקנת Stable Diffusion במחשב שלך קלה יותר ממה שזה נראה, במיוחד עם הממשק הפופולרי אוטומטי 1111, אשר פישטה את התהליך ככל האפשר עבור Windows.

1. עבור למאגר הרשמי של 1111 אוטומטי ב-GitHub, חפש את הקטע "נכסים" והורד את קובץ ההתקנה (.exe).
2. הפעל את הקובץ שהורדת. תהליך ההתקנה עשוי להימשך זמן מה בהתאם למהירות המחשב שלך.
3. לאחר שתסיים, יהיה לך קיצור דרך בשם "A1111 WebUI" בשולחן העבודה שלך או בתיקיית יעד. לחיצה כפולה תפתח את הממשק הגרפי בדפדפן שלך, מוכן להתחיל ליצור.
4. אנו ממליצים להפעיל עדכונים אוטומטיים עבור הממשק וההרחבות, וכן את האפשרות "VRAM נמוך" אם המחשב שלכם אינו חזק במיוחד.

אם אתם משתמשים ב-Mac או Linux, ישנם מדריכים ספציפיים להתקנת Stable Diffusion ממאגרי הקוד הפתוח שלהם.

כיצד לכתוב הנחיות יעילות ב-Stable Diffusion: מבנה, תחביר וטיפים

הצלחת התמונות שלך תלויה כמעט לחלוטין בהנחיה. מבנה טוב יאפשר לכם להשיג תוצאות מקצועיות ושונים מאוד מאלה שנוצרו עם תיאורים מעורפלים.

הנחיה מומלצת צריכה לציין:

• סוג תמונה: צילום, רישום, איור, הדמיה תלת-ממדית ועוד.
• נושא: מי מופיע בתמונה (אדם, בעל חיים, חפץ...), עם כל הפרטים שתרצו (גיל, מוצא אתני, הבעת פנים וכו')
• פעולה: מה הבחור הזה עושה.
• הקשר/תרחיש: היכן מתרחשת הסצנה, תאורה, זמן בשנה, צבעים שולטים וכו'.
• משנים: סגנון ציור, עדשה ומצלמה, שעה ביום, פלטת צבעים, אמנים מתחומים, רזולוציה, איכות, אפקטים מיוחדים כמו בוקה, טשטוש, טקסטורות...

כדי הנחיות שליליות, פשוט הוסיפו את כל המאפיינים שאתם לא רוצים בתמונה: "ידיים מטושטשות, מכוערות, מעוותות, יותר מדי אצבעות, טקסט, סימני מים, רזולוציה נמוכה, פרופורציות שגויות, חולני, כפילויות..." וכל דבר אחר שמפריע לכם בתוצאה.

כיצד לשפר את ההנחיות ב-Stable Diffusion?

כדי להשיג את התוצאות הטובות ביותר, פעל לפי הטיפים הבאים. מומלץ להתאים נכון את המשקלים והתכנות. דיפוזיה יציבה מאפשרת לך לתת יותר או פחות חשיבות למילים מסוימות שימוש בתחביר "מילה:גורם". ככל שערך word:factor גבוה יותר, כך המונח יהיה רלוונטי יותר; ניתן להשתמש בסוגריים נוספים כדי להגדיל עוד יותר את משקלה של מילה או מושג.

בנוסף, תכנות הנחיות מבוסס תחביר מאפשר לך לשלב רעיונות או סגנונות בתמונה אחת, ולבצע את המעבר מרעיון אחד למשנהו לפי השלבים שאתה מגדיר.

אם אתם תקועים או מחפשים השראה מהירה, פלטפורמות כמו Lexica, Civitai, או לשונית ה-PNG Info של Stable Diffusion מאפשרות לכם לגרור תמונות שנוצרו על ידי בינה מלאכותית ולראות את ההנחיה המדויקת ששימשה ליצירתן.

מודלי הדיפוזיה היציבים הטובים ביותר לתמונות היפר-ריאליסטיות ואמנותיות

יקום הדיפוזיה היציבה רחב הרבה יותר מהמודלים הבסיסיים שלו. כיום ישנם שפע של מודלים מותאמים אישית (נקודתי ביקורת) המותאמים לסגנונות ספציפיים, כגון פוטוריאליזם, אנימה, איור טכני וכו'. כמה מהמומלצים והפופולריים ביותר הם:

דגמים עבור SD 1.5:

• ג'אגרנאוט רבורן: מומחה בעור ריאליסטי, רקעים מובחנים וצבע טבעי. תוצאות חמות בסגנון RAW.
• חזון מציאותי גרסה 5.1: שליטה מעולה בדיוקנאות, רגשות ופרטי פנים. מאוזן מאוד ברקע ובנושאים.
• אני לא מאמין שזה לא צילום: רב-תכליתי, מעולה בתאורה ובזוויות. אידיאלי לצילומי פורטרטים ונושאים שונים.
• פוטון V1: איזון בין איכות לגיוון, במיוחד עבור נושאים אנושיים.
• תמונה ריאליסטית של סטוק: תמונות מלוטשות מאוד, בסגנון קטלוגי, ללא פגמי עור.
• aZovya Photoreal: לא ידוע כל כך, אך מניב תוצאות יוצאות דופן וניתן להשתמש בו כדי למזג טכניקות עם מודלים אחרים.

דגמים עבור SDXL (הדור האחרון):

• ג'אגרנאוט XL (x): קומפוזיציה קולנועית, מעולה בדיוקנאות ובהבנת הנחיות ארוכות.
• RealVisXL: ללא תחרות ביצירת פגמים, מרקמים ושינויי גוון ריאליסטיים בעור.
• שלום עולם XL גרסה 6.0: הוא מביא גישה אנלוגית, פרופורציות גוף טובות ואסתטיקה וינטג'ית. השתמשו בתיוג GPT4v לקבלת הנחיות מורכבות יותר.
• אזכורים מכובדים: PhotoPedia XL, ‏Realism Engine SDXL, ‏Fully Real XL (פחות עדכני אך עדיין תקף).

את כל המודלים הללו ניתן להוריד בחינם ממאגרים כגון Civitai, ופשוט למקם אותם בתיקייה המתאימה כדי שיופיעו בממשק Stable Diffusion.

כיצד להתקין ולנהל מודלים מותאמים אישית ב-Stable Diffusion

הורדת תבנית חדשה היא פשוטה כמו:

1. גישה למאגרים כמו Civitai וסננון לפי "נקודות ביקורת".
2. בחרו את הדגם הרצוי (ודאו שיש לו סיומת .safetensor להגברת האבטחה).
3. הורד את הקובץ והעתק אותו לנתיב /stable-diffusion-webui/models/Stable-diffusion.
4. הפעל מחדש את הממשק ובחר את המודל מלוח "נקודת בדיקה".

טיפים מקצועיים להשגת תמונות מדהימות באמת עם דיפוזיה יציבה

שליטה בדיפוזיה יציבה כרוכה בניסויים, למידה מהתוצאות וחידוד הטכניקה והדמיון שלך:

• שחק עם הטמעות: כדי לכוונן את האסתטיקה של התמונות שלכם, נסו הטמעות המומלצות על ידי יוצרי המודל (למשל, BadDream, UnrealisticDream, FastNegativeV2, JuggernautNegative-neg). הטמעות מאפשרות לך להתאים תכונות כמו ידיים, עיניים וכו'.
• השתמשו בתוספות פרטים לפנים: ההרחבה Adetailer עבור A1111 או צומת Face Detailer Pipe ב-ComfyUI יעזרו לכם להשיג תוצאות ללא רבב על פנים וידיים, שימושיות במיוחד לצילומי פורטרטים ריאליסטיים.
• רשתות בקרה לפרפקציוניסטים: אם אתם תובעניים עם ידיים, תנוחות או גופים, חקרו את הסוגים השונים של ControlNet כדי לכוונן את הקומפוזיציות שלכם.
• נִסוּי וּטְעִיָה: אל תצפו שהתמונה הראשונה תהיה מושלמת; המפתח הוא לחזור על התהליך, לשנות הנחיות ולהתאים שליליות עד להשגת האיכות הרצויה.
• שימו לב למבנה ההנחיה: הימנעו מסתירות (לדוגמה, "שיער ארוך" ו"שיער קצר" באותו משפט) ותעדפו מושגים בהתחלה, אשר יהיו בעלי משקל רב יותר בתמונה הסופית.

לאחר סיור זה באפשרויות של דיפוזיה יציבה, ברור שבינה מלאכותית מחוללת מהפכה באופן שבו אנו יוצרים, התנסו ועצבו תמונות עם תוצאות מפתיעות, מקצועיות וטבעיות יותר ויותר. אם אתם מתעניינים ביצירתיות דיגיטלית, אין זמן טוב יותר לחקור את עולם היצירה הוויזואלית באמצעות בינה מלאכותית: בעזרת הנחיה טובה, הכלי הנכון וקצת תרגול, כל אחד יכול להחיות את התמונות שהוא מדמיין, החל מסקיצות פשוטות ועד קומפוזיציות היפר-ריאליסטיות שאין להבחין ביניהן מצילום מקצועי.