פיתוח AI-אוטפיינטינג להרחבת גבולות תמונות

אאוטפיינטינג: היכן נקרע החיבור של פריים מורחב

אאוטפיינטינג משלים את מה שלא היה בפריים: הרחבת גבולות התמונה נשענת על פס הקשר צר בשוליים, ולפיו המודל צריך להבין מה נמצא הלאה — המשך שמיים, קיר, עלווה, בד. ככל שיש פחות עוגן בקלט, כך ההשלמה דומה יותר לניחוש סביר. התוצאה נראית מיד: תפר נראה לעין בפריים, שבו החלק המקורי עובר לזה שנוצר, מבחין אפילו צופה לא מנוסה.

החיבור נקרע מכמה סיבות. הראשונה — אי-סנכרון של בהירות וגרעיניות: האזור המקורי צולם עם רעש ועומק שדה אחד, והמושלם — עם אחר, והגבול נקרא כמו קו. השנייה — אובדן טקסטורה בשוליים: מעברים חוזרים מצטברים לטשטוש, ודוגמה עדינה — סיבים, עלווה, טיח — מתפרקת לכתם אחיד. השלישית — פער סגנון בעיבוד סדרתי: כל פריים עוקב בסדרה מקבל פלטה וניגודיות משלו.

מקרה נפרד — פריים חתוך בשוליים. אם בגבול פוגע אובייקט או קו אופק, המודל לא יודע במה להמשיך, ומשלים גיאומטריה אקראית; בסדרה של עשרות צילומים זה נראה כמו סצנות שונות מצילומים שונים.

אנחנו מפרקים כל תקלה בנפרד ולפי הסיבה: חוסר הקשר, הצטברות שגיאה בין מעברים או חוסר עקביות בהגדרות בין פריימים. בהמשך — איך זה נסגר.

שלמות הפריים, החיבור וחזרתיות התוצאה

הרחבת פריים כמעט תמיד נשברת בגבול: המודל משלים בביטחון שמיים ודשא, אך על קו החיבור מופיע תפר — קפיצת בהירות, חזרה של טקסטורה, שינוי טמפרטורת צבע או קו מתאר "רפאים" של אובייקט שנחתך בשוליים. עבור תמונה אחת זה מתוקן בריטוש, עבור סדרה של מאות פריימים — הופך לקו ייצור ידני.

אנחנו בונים את היצירה כך שהתפר לא ייווצר בשלב הסינתזה. הפריים מורחב לא בצמוד, אלא עם חפיפת מסכה של 10–15% מהשטח, ולכן המודל רואה הקשר אמיתי וממשיך אותו, ולא מנחש לפי השוליים. אחר כך הגבול מיושר: השוואת היסטוגרמות, התאמת גרעיניות ומיקרו-ניגודיות, וכיווץ מסכה חוזר.

מודל הבסיס — Stable Diffusion עם אימון נוסף על החומר שלכם: הוא שומר על סימון הפרספקטיבה ולא ממציא מחדש אובייקטים שכבר נמצאים בפריים.

חזרתיות התוצאה — משימה נפרדת. אנחנו מקבעים את זרע היצירה ההתחלתי, פרופיל הסגנון וסט פריימים לדוגמה לכל הסדרה: הפריים הבא ממשיך את אותו חומר, ולא נראה כאילו צולם ביום אחר.

סגנון אחיד לסדרת פריימים נבדק על עותקים מוקטנים לפני ריצה מלאה — פער בצבע ובפירוט נראה מיד, ותיקונים נכנסים לפרופיל, ולא לכל פריים בנפרד.

האפקט מדיד: שיעור הפריימים שעוברים אישור בריצה הראשונה עולה מ-40 ל-85–90%, סדרה של 200 תמונות מעובדת בריצת לילה אחת במקום שבוע עבודה ידנית, וסוג הפגמים בגבול — תפר נראה ושבר בגרדיאנט — יוצא מרשימת התיקונים.

מצבי אאוטפיינטינג: השוואת גישות

מתיחת שוליים — המצב המהיר ביותר: פיקסלים קיצוניים משוכפלים או עוברים אינטרפולציה לאורך הגבול. הוא עובד על רקעים אחידים — מילוי סטודיו, גרדיאנט, שמיים — ונשבר במקומות שבהם בפריים יש מיקרו-טקסטורה, פרטים קטנים או פרספקטיבה: במקום דשא מתקבלת מריחה אנכית.

המשך מראה משקף את השבר הקיים אל מעבר לגבול הפריים. התוצאה כנה על משטחים סימטריים — בד, מים, קישוט חוזר — וטועה באופן ניכר על פנים, כיתובים ואובייקטים עם כיוון תנועה.

יצירת שוליים לפי מסכה מסירה את שתי המגבלות, אך נשענת על רפרנס סגנון: בלעדיו האזור החדש חי לפי חוקי תאורה וגרעיניות משלו.

איך בוחרים מצב

מסתכלים לא על המצב, אלא על הפריים: האם באזור ההרחבה יש מבנה חוזר ולאן הולך האור. רפרנס סגנון נלקח לפי האזורים הקרובים לגבול, ומסכת החיבור נבנית עם חפיפה ומעבר רך — אז התפר לא נקרא בהגדלה. בפלט אנחנו מוסרים תמונה ברזולוציה המקורית ומסכה עובדת, שלפיה אפשר לחזור על ההרחבה.

שלבי הטמעה: מביקורת פריימים עד מסירה

אאוטפיינטינג מתחיל לא מהמודל, אלא ממקורות: הרחבת גבולות נשברת במקום שבו הפריים חתוך לפי האובייקט עצמו, דחוס מדי בשמירה או צולם בפרופיל צבע אחר — בחיבור רואים תפר, והפלטה זזה. לכן שלבי ההטמעה נבנים מביקורת פריימים ועד מסירת הפתרון, עם תוצאה ניתנת לבדיקה בכל שלב.

1. ביקורת פריימים. מפרקים מדגם מקורות: יחס גובה-רוחב, נקודת חיתוך, מטא-נתונים, ארטיפקטי דחיסה, פרופילי צבע. בפלט — רשימת מגבלות ודרישות להכנת קבצים, שבלעדיהן ההשלמה יוצרת פגמים.
2. סכמת עיבוד. מקבעים איך בדיוק מרחיבים: מסכה בשוליים, השלמה באזורים עם חפיפה, סדר השלבים, מקום לתיקון ידני. את הסכמה מתאמים לפני הפעלה בזרימה, כדי לא לעשות מחדש את הלוגיקה.
3. התאמה לסגנון שלכם. אוספים תמונות רפרנס שלכם — תאורה, מרקם, פלטה — ומתאימים פרמטרים כך שהמשך הפריים לא ייבדל מהמקור.
4. מדגם בקרה. מריצים פריימים מסוגי תוכן שונים במלואם ובודקים תפרים, צבע, טקסטורה עדינה. פערים מחזירים אותנו לשלב ההתאמה, ולא צפים אצלכם בזרימה.
5. הרכבת זרימה. עיבוד באצווה, תור משימות, יומן ריצות, חזרה על פריימים שנכשלו. התוצאה נשמרת לצד המקור, בלי העברת קבצים ידנית.
6. מסירת הפתרון. תיעוד, גישות, הדרכת הצוות שלכם, נוהל למקרים טיפוסיים וליווי, עד שהפתרון יתחיל לעבוד באופן עצמאי.

ערכת מסירה: סכמות, קונפיגורציות, נהלים

ערכת מסירה היא לא דוח על העבודה שנעשתה, אלא סט עבודה שאיתו הצוות שלכם מפעיל אאוטפיינטינג בעצמו.

קונפיגורציות, מפת עיבוד, כללי בחירת פריימים ונהלים נשארים במאגר שלכם עם היסטוריית גרסאות: הפעלה חוזרת על אצווה חדשה נותנת את אותה תוצאה צפויה ואינה תלויה בשאלה אם אנחנו זוכרים אילו פרמטרים היו בפעם הקודמת.

• קונפיגורציות יצירה: קנה מידה של התמונה בפלט, צעד הרחבת גבולות, מספר מעברים, משקל שימור הפירוט המקורי — עם הסבר איזה פרמטר משפיע על מה ומה נשבר כשמשנים אותו.
• מפת עיבוד: רצף השלבים — הכנת מסכה, הרחבה, איחוי תפרים, יישור גוון בשוליים; מסומן באיזה שלב להסתכל בעת סטייה.
• כללי בחירת פריימים: קריטריונים להתאמת מקורות ותוצאה, סף פסילה, רשימה נפרדת של מקרים שנסגרים רק בעבודה ידנית.
• נוהל עיבוד: איך להריץ את החבילה כולה, מה נרשם ביומן, איך להפעיל מחדש אצווה שנפלה מהשלב המוצלח האחרון במקום ריצה מלאה.
• נוהל אישור: סט בדיקות ותמונות רפרנס להשוואה — האישור נשען על קריטריונים, ולא על רושם סובייקטיבי.
• תיעוד והוראות: סביבה, תלויות, נקודות חיבור לאחסון שלכם, סדר עדכון קונפיגורציות בלי לעצור את העיבוד.

מקרה בוחן: הרחבת צילום ארכיוני לקטלוג

מה היה בקלט

הקטלוג נאסף במשך שנים: חלק מהצילום נעשה בפריים צר, חלק — להדפסה, וקבצים כאלה לא נכנסים לבאנרים רחבים בויטרינה. ציור מחדש ידני של שוליים בעורך גרפי נתן את התוצאה הרצויה, אך לא סחב את הנפח: סדרה של 40 פריימים ארכה שלושה ימי עבודה, ובריצה הראשונה אישרו פחות ממחצית התמונות.

מה שינו בקו הייצור

אאוטפיינטינג נבנה על ComfyUI: בשולי הפריים נאספת מסכה, המודל משלים את המשך הסצנה, אחר כך מגיעה העלאת פירוט ובדיקה לארטיפקטים — טקסטורה חוזרת, חיבורים מטושטשים, גאומטריה שהתעוותה. פריימים שבאזור ההרחבה שלהם נכנס טקסט או מרקם עדין עוברים לליטוש ידני, והשאר עוברים אוטומטית.

מדדי לפני ואחרי חושבו על אותו מדגם פריימים: שיעור האישור בריצה הראשונה עלה מ-40% ל-92%, סדרה של 40 תמונות התקצרה משלושה ימים לשעתיים, ושיעור הפריימים עם תיקון ידני — מ-70% ל-8%. נפח העבודה הידנית בעורך הגרפי ירד כמעט פי תשעה, והקטלוג קיבל פורמטים רחבים בלי צילום חוזר.

גם הלוגיקה עצמה עוברת הלאה: כללי בחירת פריימים, סט מסכות לסוגי סצנות שונים וסכמת בדיקת חיבורים אנחנו משתמשים בהם בפרויקטים אחרים של הרחבת צילום ארכיוני.

במה יצירת שוליים שונה מקרופ?

קרופ עובד רק עם הפיקסלים שכבר קיימים: גבולות הפריים, הפרופורציות ומיקום האובייקט משתנים, אבל מידע חדש לא נוצר. אם התוכן פוגע בשוליים — ראש, ידיים, פינת בניין, מוצר בקצה — אפשר להרחיב את המסגרת רק בחיתוך אזורים סמוכים או במתיחה, וזה כבר עיוות גאומטריה.

יצירת שוליים, או אאוטפיינטינג, משלימה את התמונה מעבר למסגרת המקורית. המודל מעריך תאורה, פרספקטיבה, כיוון צללים, גרעיניות חיישן וטקסטורות חוזרות, ואחר כך מסנתז פיקסלים חדשים שממשיכים את הסצנה. ההבדל עקרוני — מקור הנתונים: בקרופ מחדשים חלוקה של מה שיש, וביצירת שוליים יוצרים את מה שחסר.

קריטריון הבחירה — מלאי התוכן בתוך הפריים. אם האובייקט כולו במסגרת ויש שדה פנוי, קרופ זול יותר, צפוי לחלוטין וחזרתי מריצה לריצה. כשהמרכז הסמנטי חתוך, השלמת שוליים נשארת הדרך היחידה לשמור גם על התוכן וגם על הפרופורציות שהפלטפורמה דורשת.

שימור הקומפוזיציה ביצירת שוליים נפתר במסכה: האזור המקורי מוחרג מאזור הסינתזה, הפיקסלים נשארים לא נגועים, והמודל עובד רק מעבר לגבול. זה קריטי למוצרים, לוגואים ואובייקטים מזוהים — כלל השלישים וסכמות קומפוזיציה אחרות נשמרים, ולא נבנים מחדש.

גם את המגבלה חשוב להבין: השלמה נותנת המשך סביר, לא עובדה משוחזרת. אם התמונה חייבת להתאים למציאות — מסמך, שרטוט, פרט מזוהה — משתמשים ביצירה רק עם בדיקה אנושית. לצילומי קטלוג עדיף להשאיר מראש מרווח בשולי הפריים.

ספקות טכניים לגבי חיבורים, צבע ונפח

ספקות בדרך כלל צפים אחרי דמו: על פריים אחד התוצאה משכנעת, ועל סדרה של מאות תמונות מתגלים היסט צבע, תפרים וסגנון שהתפרק. אנחנו עונים על ארבע שאלות שנשאלות לפני התחלה.

רעש וארטיפקטים של המקור לא יצופו החוצה?

יצופו, אם לא מכינים את הקלט: היצירה חוזרת על פגמים והופכת אותם לבולטים יותר על רקע אחיד. לפני ההשלמה מתבצעים הפחתת רעש, יישור רמת שחור ובדיקת היסטוגרמה בשוליים, והסטת צבע בחיבור מוסרת בכיול לפי פיקסלי עוגן.

בסדרה גדולה של פריימים הסגנון לא יתפרק?

עבור סדרה מגדירים פרופיל אחיד: פרמטרי יצירה קבועים ומבחר רפרנס שכל תוצאה נבדקת מולו אוטומטית. סטיות בצבע ובניגודיות נתפסות לפני המסירה, והפריים עובר לחזרה. גרסאות נשמרות, ולכן אפשר להחזיר כל פריים לאחור.

למי שייכות הזכויות בתוצאה?

אנחנו עובדים על מודלים ונתונים עם סטטוס רישוי שקוף ואינם משלימים תמונות מוגנות של אחרים. קבצי המקור נשארים שלכם, והזכויות בתוצאה — גם כן; החומרים שלכם לא נכנסים לאימון בלי הסכמה בכתב. מגבלות לגבי אנשים ואובייקטים בפריים מסוכמות לפני התחלה ומעוגנות בחוזה.

נדון במשימת הרחבת הפריים שלכם

כדי לדון במשימה באופן ענייני ולחזור עם הערכה ותוכנית, ולא עם מילים כלליות, אנחנו צריכים חומר אמיתי וגבולות עבודה. ככל שהנתונים הראשוניים מדויקים יותר, כך לוח הזמנים מדויק יותר ופחות תיקונים באישור.

• פריימים מקוריים — 5-10 צילומים ברזולוציה מקסימלית ובלי דחיסה: צילומי מסך ותמונות ממסרים חותכים פרטים, ולפיהם אי אפשר להעריך רעש והתנהגות קווי מתאר.
• פורמט יעד — לאן הפריים ילך: ויטרינה, באנר, כרטיס מוצר. יחס הגובה-רוחב והרוחב המינימלי קובעים כמה בדיוק צריך להשלים.
• דרישות לחיבור — היכן עובר גבול האזור המקורי, האם הוא חייב להישאר בלתי נראה או שמותר מעבר רך, אילו אובייקטים אסור לצייר מחדש.
• מגבלות על התוכן — מה אסור בחלק המושלם, האם יש תוכן ומילים אסורים ליצירה.
• רפרנסים לסגנון — 5-10 פריימים עם תאורה ואופטיקה קרובות, כדי לפגוע בהגשה שלכם ולא בממוצע גנרי.
• נפחים ומצב — כמה תמונות בסדרה, האם זו עבודה חד-פעמית או זרימה קבועה, צריך הפעלה ידנית או עיבוד אוטומטי.
• מסירה וגישות — איך נוח להעביר חומר והאם יש דרישות סודיות ואחסון.

בהמשך אנחנו מפרקים פריימים, בודקים עליהם את התנהגות המודל וחוזרים עם הערכה ותוכנית עבודה: שלבים, לוחות זמנים ומה שתראו בכל אחד. תארו את המשימה — נתחיל מניתוח קבצי המקור שלכם.