AI inpainting: מדוע השלמה ידנית של אזורים אינה ניתנת לסקייל
השלמה ידנית של אזורים בתמונה נראית כפעולה פשוטה: לסמן מסכה, לבחור טקסטורה, לאחד קצוות לפי האור והפרספקטיבה. על פריים בודד מדובר בעשרות דקות עבודה של עורך — ורק אם הרקע אחיד.
ברגע שבפריים מופיעה גיאומטריה מורכבת (השתקפות על משטח מבריק, אריזה שקופה למחצה, צללים מצטלבים), התיקונים נעשים באיטרציות, והמסכה מצוירת מחדש כמה פעמים.
צוואר הבקבוק אינו המהירות של פריים בודד, אלא האופן שבו היא מתסקלת. קטלוג של כמה אלפי פריטים משמעו אלפי מסכות ואלפי החלטות לגבי «איך נראה הקצה»: עורכים שונים נותנים קונטרסט, גריין וטמפרטורה שונים, וכרטיסים סמוכים מתחילים להתפצל בסגנון.
קובץ Photoshop עם היסטוריית השכבות אינו מופעל מחדש — כשמחליפים את המקור או את הדרישות לרקע, יש להסביר את העבודה מחדש ולעשותה שוב.
AI inpainting משנה את הסכימה עצמה: המסכה מוגדרת פעם אחת, ההשלמה הגנרטיבית של האזורים מתבצעת לפי ההקשר של הפריים והנחיה טקסטואלית, והמהנדס שולט בהצמדה למקור, בחפיפת הקצוות וברזולוציית התוצאה.
מנה של מאות תמונות עוברת בהרצה אחת במקום מאות שעות של השלמה ידנית, והרצה חוזרת על מקורות מעודכנים מניבה אותו סגנון בלי סבב אישורים חדש. בהמשך נפרט כיצד זה נסגר בפורמט inpainting מלא.
מה משתנה לאחר ההטמעה: קצב, אחידות, סוג הכשלים
עריכת כרטיס בודד לפני ההטמעה היא שרשרת של אפיון, איתור פרגמנט מתאים, ריטוש ידני, אישור וייצוא מחדש. לאחר הטמעת AI-אינפיינטינג נעלמות ממנה שלוש-ארבע חוליות: המסכה ודגימת הייחוס קובעות את התוצאה מיד, והאישור מצטמצם לקבלת קובץ מוגמר.
מהירות עיבוד התמונות עולה לא הודות להאצת הידיים, אלא הודות לקיצור המסלול. הסגנון האחיד של הקטלוג מפסיק להיות תלוי במי שנמצא היום במשמרת: האור, הגוון, כיוון הצל והמרקם נקבעים על ידי פרמטרי ההשלמה, ולכן הכרטיס העשירי נראה כמו הראשון.
הבקרה עוברת מ«מוצא חן בעיניי — לא מוצא חן בעיניי» לסימנים מדידים: התאמת הגוון, רציפות הגרדיאנט, היעדר מעבר נראה בגבול האזור. חלק מהפגמים נעלמים כקטגוריה — תפרים והילות לאורך קצה הטלאי, טקסטורות משוכפלות, פרספקטיבה «שטה», חזרות אקראיות של פרגמנטים.
אלו בדיוק השגיאות שריטוש ידני מניב בחופזה: השלמה לפי מסכה אינה משחזרת אותן, ומקומות שנויים במחלוקת מסומנים לליטוש ידני. הסקיילינג של התיקונים מפסיק להיות פרויקט נפרד — אותו סדר עבודה מחזיק גם עשרה כרטיסים וגם כמה אלפים.
יומן השינויים מאפשר לחזור לכל גרסה של התמונה ולא לאבד את קבצי המקור. איכות הגנרציה נמדדת לפי שיעור הקבצים שהתקבלו ללא תיקונים — ומדד זה הופך לעיקרי בקבלה.
מצבי AI inpainting: השוואה של גישות ומגבלות
מצבי ההשלמה נבדלים לא במודל, אלא בכמה מהקשר הסצנה אנו מוסרים לגנרטור וכמה משאירים כאילוץ קשיח. השלמה אוטומטית מלאה של האזור עובדת כאשר הרקע אחיד או חוזר על עצמו; מסכה חלקית שומרת על קצוות האובייקט ומשנה רק חלק ממנו; עיבוד היברידי משלב גנרציה עם ליטוש ידני.
קריטריוני הבחירה המרכזיים — האם קיים רפרנס מאותה סדרה, עד כמה הגיאומטריה קריטית (קווים, פרספקטיבה, השתקפויות) ואיזה חלק של תיקון ידני אנו מוכנים להקצות.
| מצב | מתי מתאים | מגבלות הגישה |
|---|---|---|
| השלמה אוטומטית של האזור כולו | רקע אחיד, טקסטורות חוזרות: שמיים, קיר, מים | בסצנות מבניות הגיאומטריה «שטה»: קווים ופרספקטיבה אינם מתלכדים |
| מסכה חלקית הנשענת על הקצוות | יש להחליף פרגמנט של אובייקט תוך שמירה על קווי המתאר | רגיש לדיוק המסכה: היסט של כמה נקודות יוצר הילה בגבול |
| גנרציה לפי רפרנס | קיימת דוגמה של אובייקט או סגנון מאותה סדרה | הרפרנס מגביל את המגוון בזווית ובתנוחה |
| עיבוד היברידי | סצנות מורכבות: פנים, ידיים, טקסט, השתקפויות | ארוך יותר במחזור, דורש עבודה ידנית על המסכה |
בסצנות מורכבות אף מצב בודד אינו מניב תוצאה יציבה: הגנרטור משלים את הטקסטורה אך שובר את המבנה. כאן אנו מרכיבים מחזור של מעבר גס אוטומטי, תיקון מסכה והשלמת גבולות — יקר יותר בזמן, אך התוצאה ניתנת לשחזור על פני כל סדרת הפריימים.
כיצד אנו מטמיעים: ממיפוי הנתונים ועד מסירה לעבודה
הטמעת עיבוד גנרטיבי מתחילה לא בבחירת מודל, אלא במיפוי החומרים: בודקים את הרזולוציה של קבצי המקור, קיומו של ערוץ אלפא, סוגי הפגמים, אחידות הרקע וכמה תיקונים ידניים מכניס האדם לאחר האוטומציה הנוכחית. מכך תלוי פתרון הסכימה — היכן מספיקה רשת אחת והיכן נדרש קסקדה של סימון, השלמה ועיבוד-בדיעבד.
- מיפוי חומרים. מרכזים בטבלה אחת מחלקות של תמונות, פגמים חוזרים ודרישות לתוצאה: מה נחשב לפסול, איזו סטייה בגבולות האובייקט מותרת.
- סכימת הפתרון. קובעים כיצד נוצרת המסכה, במה מושלם האזור ואילו שלבים באים לאחר הגנרציה — תיקון צבע, איחוד גבולות, ניקוי הילות.
- סימון מסכות והכנת נתונים. את המסכות אוספים אוטומטית לפי הכללים הנוכחיים, ואחר כך מאמתים ידנית באופן סלקטיבי ומתקנים כללים היכן שהאוטומציה טועה בעקביות.
- כיוונון ואימון. מתאימים מצבים לחומר הספציפי, שואפים לעקביות על סוגי פריימים שונים, ולא למטריקה גבוהה על מערך מוצלח אחד.
- מנת בדיקה. מריצים מדגם קבוע, משווים את התוצאה לריטוש ייחוס וסופרים את שיעור הפריימים שעברו ללא תיקונים.
- בקרת איכות התוצאה. מגדירים ספים ובדיקה סלקטיבית: המערכת מסמנת בעצמה מקרים מפוקפקים, והמפעיל בודק רק אותם.
- מסירת הפתרון לעבודה. פורסים את העיבוד במתאר שלכם, מתארים את התקנון והדרכת הצוות, ומגדירים ניטור איכות עם הופעת סוגי חומרים חדשים.
המסירה אינה «מסרנו סקריפט והלכנו»: נשארים תיאור הסכימה, כללי הסימון, יומן ההרצות וסדר הפעולות בעת ירידת איכות. תארו את המשימה — נחזור עם הערכה ותוכנית עבודה.
נכסי הפרויקט: מודלים מכווננים, סימון, תקנונים
אנו מוסרים לא «הדגמה עובדת», אלא מתאר שהצוות שלכם מנהל בעצמו: מתקן את התוצאה, ממשיך לאמן את המודל על נתונים חדשים ובודק איכות לפי קריטריונים פורמליים. להלן מה שנשאר בידי המזמין.
- מודל מכוונן. המשקלים ותצורת ההרצה נמצאים אצלכם, ולא בצד שלנו: אותו קלט מניב אותה תוצאה, והאימון אינו כבול לתשתית זרה.
- מערך מסכות וייחוסים. מסכות למשימות אופייניות — תפרים, בליקים, אובייקטים שהוסרו, ריטוש טקסטורות — וזוגות «לפני/אחרי» עם הערכה, שלפיהם נבדק כל פריים חדש. הוויכוח «מוצא חן / לא מוצא חן» מוחלף בהשוואה לייחוס.
- הוראות לתיקונים. מה ניתן לשנות בעצמכם: גבולות המסכה, עוצמת ההשלמה, סדר עיבוד האזורים, סף הפסילה. בנפרד מצוין היכן התיקון דורש בנייה מחדש של המודל ולא כיוונון.
- תקנון איכות. קריטריוני קבלת מנה: שיעור האזורים ללא תפרים נראים לעין, שימור הטקסטורה והפרטים הקטנים, היעדר הילות בגבול המסכה. בנוסף, כלל נסיגה לגרסה הקודמת אם החדשה נחלשה במדדים אלו.
- תיעוד הפתרון. סכימת העיבוד, דרישות לקבצי הקלט, תלויות, סדר הפריסה ותקלות אופייניות עם סיבותיהן. מהנדס שלא השתתף בפרויקט מרים את המתאר לפי המסמך.
- מערך בדיקה וסדר האימון הנוסף. סצנות קבועות לרגרסיה ותיאור כיצד להרכיב סימון למשימה חדשה, כדי שהמודל ישתפר על הנתונים שלכם בלי מעורבותנו.
הקבלה מתבצעת על התמונות שלכם: אינכם מקבלים דוח, אלא מתאר עובד עם כללים ברורים לשינויים עצמאיים.
קייס: כיצד צומצמה ההשלמה הידנית בקטלוג גדול
הפרויקט — קטלוג תמונות של חנות מקוונת: יותר מ-40,000 כרטיסים, והצילום נעשה במנות. בליק על משטח מבריק, אובייקט זר בפינה, קצה רקע חתוך — לפני ההטמעה פריימים כאלה עברו להשלמה ידנית: כ-40% מהצילומים, בין 8 ל-15 דקות לכל אחד.
התוצאה הייתה תלויה במי שהתיישב למשימה: אחד השאיר שוליים נראים לעין, אחר שינה את גוון הרקע, והקטלוג יצא לא אחיד.
מה נבנה מחדש בתהליך
את המסכה בונה כעת האוטומציה: גלאי מאתר את האזור הפגום, הגבולות מדייקים לפי קצה האובייקט, וההשלמה נעשית על ידי מודל גנרטיבי המבוסס על Stable Diffusion. כל פריים עובר בקרת איכות — במפגש האזור המושלם עם סביבתו מושווים הצבע, הבהירות ורציפות הגבולות.
הסף מכריע אם נדרש אדם: מעליו הפריים עובר לקטלוג ללא תיקון, ומתחתיו — לתור הרטושר, אך כבר עם מסכה מוכנה וסימון האזור הבעייתי. ההגדרות מנוהלות בגרסאות, ולכן מנה אחת עם גרסה אחת מניבה אותה תוצאה בדיוק — אותה שחזוריות שלא הייתה בהשלמה ידנית.
לאחר ההטמעה ירד שיעור הפריימים שנדרשו לתיקון ידני מ-40% ל-7%: השאר נסגר בשניות במקום בדקות. הרצה חוזרת של המנה מניבה סטיות בגבולות הרעש, ונסיגה לגרסת ההגדרות הקודמת מחזירה את המראה הקודם בהרצה אחת.
במה נבדלת ההשלמה הגנרטיבית מריטוש ידני?
אלו שני מסלולים שונים לאותה תוצאה, והם נבדלים לא באיכות התמונה, אלא בפיזור השליטה. ריטוש ידני הוא פתרון סדרתי: המומחה בונה בעצמו את הטקסטורה, האור והפרספקטיבה, וכל שינוי עובר דרך ידו.
ההשלמה הגנרטיבית — AI inpainting — פותרת את המשימה ההפוכה: המודל משלים את האזור לפי ההקשר של הסביבה, והאדם מגדיר את המסכה ובוחר את הווריאנט.
מכאן ההבדל במהירות. על רקעים אחידים, חול, שמיים, עלווה, המעבר הגנרטיבי סוגר את האזור בשניות, והיקף העבודה כמעט אינו תלוי בשטח. אצל היד התלות ליניארית: ככל שהאזור גדול יותר, כך יותר שעות.
במבנים רגולריים — בנייה, אריחים, דוגמה חוזרת, גופן — המודל טועה במפגשים, ותיקון התפר אוכל את כל החיסכון.
גם השליטה שונה. הריטוש ניתן לשחזור: אותו תיקון חוזר על עצמו באותה פעולה. בהשלמה הגנרטיבית, השחזוריות מושגת בקיבוע הפרמטרים, אך המודל מגיב לפיקסלים של ההקשר ולא לכוונה — בשינוי המקור או בהרחבת המסכה הווריאנט סוטה הצידה.
גבול הישימות עובר לפי קריטיות הפרטים. החלפת רקע, הסרת אובייקטים, הרחבת פריים, ניקוי פגמים קטנים — כאן האוטומציה מנצחת בכל הפרמטרים. פנים, לוגואים, כיתובים, המשך של גיאומטריה מדויקת וצילומים עם דרישות לאמינות נשארים בידי האדם.
המצב המעשי אינו בחירה באחד מהשניים, אלא חיבור: המודל נותן שכבה גסה, המומחה מחבר אותה למקור ומחזיק בבקרה הסופית. האדם נדרש בקצוות המשמעות, לא בקצוות האזור.
ספקות טכניים: היכן הפתרון טועה וכיצד זה נתפס
דיוק ההשלמה נקבע לא על ידי המודל עצמו, אלא באופן שבו הוכנה המסכה ואוחדו גבולות האזור. אם קו המתאר נחתך לפי פיקסל, במפגש מופיעה הילה מהתוכן הישן — על טקסטורות וגרדיאנטים היא נראית בהגדלה, גם כשבתצוגה המקדימה הכול נקי.
לכן אנו בונים את המסכה עם חפיפה פנימה והחוצה, ומאחדים את התוצאה בקצה תוך שימור הגריין והרעש של הצילום המקורי.
חלק נפרד של העבודה הוא בקרת התוצאה והגנת קבצי המקור. להלן ארבע שאלות שעולות לרוב בקבלה.
עד כמה ההשלמה מתאימה לסגנון שאר הפריים?
לפני ההרצה אנו מרכיבים מערך רפרנס של 20–30 פרגמנטים מאותו צילום ובודקים את המודל על החלק המושהה: משווים גוון, גריין וכיוון האור. אם הסטייה גבוהה מהסף שהוגדר, אנו מוסיפים זוגות לאימון הנוסף, ולא מסובבים פרמטרים באקראי. בפלט נראה שיעור הפריימים שעברו את הבדיקה כבר בהרצה הראשונה.
האם ייראו ארטיפקטים במפגשי האזורים?
המסכה נעשית בחפיפה פנימה לתוך האזור, והקצוות מאוחדים בהדרגה, ולכן לא נשארת קו חד. אנו בודקים את התוצאה בהגדלה, על רקעים חד-גוניים ובגוני אפור — דווקא שם ההבדל בקונטרסט ובגריין מתגלה ראשון. בנפרד אנו בוחנים טקסטורות חוזרות, שבהן המודל נוטה «להשלים» קצב מיותר.
מה קורה לתמונות המקור?
הקבצים המקוריים עוברים לקריאה בלבד לאחסון נפרד ואינם נכתבים מחדש באף הרצה. כל תוצאה נשמרת כגרסה נפרדת עם הצמדה למסכה ולהגדרות, כך שניתן לסגת בכל פריים למצב שלפני העיבוד. ההרשאות מחולקות לפי תפקידים: העורך רואה את התמונות שלו, והמנהל — את היסטוריית הגרסאות.
האם תיקוני העורכים נלקחים בחשבון באימון הנוסף?
כן, כל תיקון ידני נשמר כזוג «לפני ואחרי» ונכנס למערך האימון הנוסף. אחת למחזור המודל מאומן מחדש ומוריץ על מדגם מושהה: אם המטריקות עליו יורדות, הבנייה אינה עולה לאוויר. כך הסגנון נמשך בהדרגה אחרי דרישות המערכת, ולא אחרי פריימים אקראיים.
נדון במשימה: ננתח את התמונות שלכם ונחזור עם תוכנית
כדי שהערכת היקף החומרים תישען על נתונים ולא על הנחות, להתחלה מספיקים מדגם בדיקה של תמונות ותיאור קצר של המשימה. שלחו לא פריימים «מושלמים», אלא דווקא את אלה ששוברים את האוטומציה לרוב: דחוסים מאוד, עם רקע מורכב, עם כמה אובייקטים בפריים וטקסט מעל.
מה נדרש לניתוח:
- 15–30 תמונות מקור בפורמטים שבהם הן נמצאות אצלכם — JPEG, PNG, TIFF, PSD עם שכבות; סמנו בנפרד את הבעייתיות ביותר.
- מסכות או תיאורן: היכן בדיוק יש להשלים את האזור — מסכת פיקסלים, מסגרת של האובייקט או תיאור טקסטואלי של התוצאה.
- 2–3 דוגמאות ייחוס «לפני/אחרי»: מהצוות שלכם, מפרויקט קודם או רפרנס של קבלן — לפיהם נראה איזו רמת איכות נחשבת לקבלה.
- כללי תחום הידע: מה אסור לשנות בעת הציור מחדש — לוגואים, פנים, מספרים, מיקום האלמנטים.
- דרישות לפלט: רזולוציה, פורמט, האם נדרשים שקיפות ושימור המטא-נתונים של המקור.
- היקף הזרימה: כמה תמונות ביום ואיזה שיא יש לעמוד בו, מהיכן מגיע הקובץ — העלאה ידנית, קריאה מהשירות שלכם או עיבוד באצווה מהאחסון.
על מדגם הבדיקה אנו מריצים כמה מצבי השלמה, מודדים את שיעור הפריימים שעוברים ללא ליטוש ידני ואת זמן העיבוד של תמונה אחת. לאחר מכן נדון במשימה לגופו של עניין ונחזור עם תוכנית הטמעה: שלבים, מה יידרש מצדכם, איך נראית הקבלה ועל איזה מדגם היא מתבצעת.