עקביות הדמות נשמרת על ידי הגדרת תכונות בלתי משתנות בטקסט ועיגונן באמצעות הפניות ויזואליות, ולאחר מכן שליטה קפדנית במשתנים כמו תאורה וזווית. ניתן להשיג זאת על ידי הפרדת זהות הדמות מההקשר של הסצנה בתהליך העבודה.
בעיית הסחיפה של הדמות במודלים גנרטיביים
מודלים גנרטיביים מפרשים פרומפטים באופן הסתברותי. כאשר מבקשים דמות ספציפית, המודל דוגם מתוך התפלגות של פרשנויות אפשריות. ללא אילוצים, כל יצירה היא הגרלה חדשה. שונות קטנה במבנה הפנים, במרקם השיער או בפרטי הלבוש מצטברת בין התמונות. הסחיפה מתרחשת מכיוון שהמודל מעדיף את ההרכב הכללי והתאורה על פני סמני זהות ספציפיים. אם לא מגבילים באופן פעיל את הפלט, הדמות הופכת לארכיטיפ גנרי במקום ליחיד ספציפי.
הגדרת תכונות דמות בלתי משתנות בפרומפטים
יש לזהות את התכונות המגדירות את הדמות ולהתייחס אליהן כבלתי מתפשרות. אלו הן התכונות הבלתי משתנות. הן כוללות גיאומטריה פנים ספציפית, צבע עיניים, צורת שיער ופריטי לבוש ייחודיים. אין לתאר את הדמות במונחים עמומים כמו "קול" או "מסתורי". יש לתאר את המציאות הפיזית. במקום "מראה מחוספס", יש לציין "שיער קצר גזור, צלקת מעל הגבה השמאלית, ז'קט עור בלוי".
- לרשום את התכונות הבלתי משתנות בבלוק טקסט קבוע.
- לשמור על הבלוק זהה לכל פרומפט.
- למקם את הבלוק בתחילת הפרומפט כדי להעניק לו משקל גבוה.
- להימנע מתארים שמרמזים על פרשנויות מרובות. להשתמש בשמות עצם קונקרטיים ובתיאורים פיזיים.
אם משנים את תיאור השיער, המודל עשוי לפרש את התיאור החדש כדמות אחרת. פרומפט הטקסט הוא העוגן הראשי. אם הטקסט עמום, התמונה תהיה לא עקבית.
שימוש בתמונות ייחוס ועוגני סגנון
טקסט בלבד אינו מספיק לעיתים קרובות עבור דמויות מורכבות. הפניות ויזואליות מספקות עוגן מרחבי וסגנוני. מעלים תמונה של הדמות כדי להנחות את פרשנות הזהות על ידי המודל. כאן נכנסים כלים ספציפיים לתהליך.
- Midjourney נבחרת כאשר יש צורך להשתמש בתמונת מראה של דמות כדי להבטיח אחידות בתווי הפנים ובסגנון בין דורות תמונות חדשים.
- Adobe Firefly משמשת כאשר יש להעלות תמונת מראה של דמות כדי להנחות את הסגנון והזהות של התמונות המיוצרות בתוך מערכת ה-Creative Cloud.
- Leonardo.Ai נבחרת כאשר יש לנעול תכונות דמות ואסתטיקה ספציפיות לאורך מספר יצירות תמונה.
- Stable Diffusion משמשת להשגת אחידות מתקדמת באמצעות אימון LoRA על מאגרי נתונים של דמויות או שימוש ב-ControlNet לנעילת תנוחה ומבנה.
- Krea מיושמת כאשר יש להעלות תמונה כדי לשמור על זהות וסגנון הדמות ביצירה בזמן אמת.
- Runway משמשת כאשר יש לשמור על אחידות הדמות בעת יצירת רצפי וידאו או אנימציה של עיצובי דמות סטטיים.
- DALL-E 3 נשענת על הנחיות טקסט מפורטות וספציפיות ושיפור חוזר לשמירה על אחידות הדמות, שכן אין לה תכונת התייחסות לתמונה מובנית.
בעת שימוש בכלים אלו, שפטו את הפלט לפי האם מבנה הפנים תואם את תמונת המראה. אל תשפטו לפי האם הסצנה נראית טוב. אם הפנים שגויות, הסצנה אינה רלוונטית.
ניהול שינויים בתאורה ובזווית
תאורה וזווית הן הגורמים הנפוצים ביותר לאי-אחידות נתפסת. דמות באור יום בהיר נראית שונה מאותה דמות בצל. זהו אינו סטייה; זוהי פיזיקה. עם זאת, מודלים לעיתים קרובות מפרשים שינויים בתאורה כשינויים בזהות.
- שמרו על תיאור התאורה עקבי אם ברצונכם שהדמות תיראה זהה.
- אם משנים את הזווית, צפו לשינוי בתווי הפנים.
- השתמשו בתאורה ניטרלית בדפי דמות כדי לבסס את הזהות הבסיסית.
- החילו תאורה דרמטית רק לאחר נעילת הזהות.
אם מייצרים דמות בסמטה חשוכה ולאחר מכן בסטודיו בהיר, המודל עשוי לפרש את הצללים כמבני פנים שונים. הפרידו בין הזהות לסביבה. צרו את הדמות בהקשר ניטרלי תחילה. לאחר מכן, שלבו או הנחיה לסביבה הספציפית.
שיפור חוזר והנחיות שליליות
לא תצליח להגיע לתוצאה הנכונה מהניסיון הראשון. שיפור איטרטיבי הוא לב ליבו של זרימת העבודה. צור מספר וריאציות. בחר את הקרובה ביותר לזהות היעד. השתמש בבחירה זו כהפניה החדשה. כך נוצרת לולאת משוב שמדקת את העקביות.
הנחיה שלילית (Negative Prompting) היא חיונית. עליך להנחות את המודל כיצד לא לפעול.
- רשום סטיות שכיחות בהנחיה השלילית שלך.
- כלול מונחים כמו "פנים שונות", "שיער לא נכון" או "מאפיינים גנריים".
- עדכן את ההנחיה השלילית ככל שאתה מזהה סוגי שגיאות חדשים.
אם המודל ממשיך להעניק לדמות צורת אף שונה, הוסף "wrong nose shape" להנחיה השלילית. פעולה זו מדכאת באופן אקטיבי את הסטייה.
טעויות נפוצות שפוגמות בעקביות
רוב כשלי העקביות נובעים משגיאות בזרימת העבודה, ולא ממגבלות הכלי.
- שינוי תיאור הדמות בין ההנחיות.
- שימוש בתארים מעורפלים במקום במאפיינים פיזיים.
- התעלמות מהקשר התאורה בעת שיפוט הזהות.
- אי-שימוש בהנחיה שלילית כדי לדכא סטיות.
- ציפייה לעקביות מושלמת ללא שיפור איטרטיבי.
- שימוש בתמונת הפניה יחידה שהיא באיכות נמוכה או מעורפלת.
אם תבצע טעויות אלו, אף כלי לא יציל אותך. זרימת העבודה חייבת להיות ממושמעת. הטקסט חייב להיות מדויק. ההפניות חייבות להיות ברורות. האיטרציה חייבת להיות מתמשכת.