הסרת רקע מתמונות באמצעות AI: תהליך ומיסוך מדויק

הסרת רקע באמצעות רשת נוירונים: היכן אובדת האיכות

הסרת רקע באמצעות רשת נוירונים נראית כפעולה אחת, אך האיכות נקבעת בבניית מפת שקיפות — זו שלפיה מתבצעת ההפרדה האוטומטית של האובייקט מהרקע. המודל פועל בביטחון היכן שהאובייקט מנוגד לרקע אחיד, ומתפרק בגבולות: שיער, פרווה, צעיף דק, מחברים דקים, ברק מתכת. דווקא באזורים אלה מופיעות התקלות האופייניות.

הראשון — קו מתאר לא אחיד של המסכה. מפת השקיפות מחושבת ברזולוציה מופחתת ונמתחת לפריים המקורי, ולכן הקצה יוצא קרוע ומדורג. יחד איתו אובדים פרטים קטנים: שרשרת, חוט, תלתלים בודדים נעלמים אם בעת הקטנת הפריים לא נפלו לאף פיקסל.

השני — הילה לאורך קצה האובייקט. אפילו מסכה מדויקת בצורתה מותירה לאורך קו המתאר פיקסלים המעורבים בצבע הרקע הקודם, ועל רקע חדש זה נקרא כשוליים בהירים או צבעוניים. אין טעם להסירם בטשטוש: יש צורך בשחזור צבע הקצה לפי הפיקסלים הסמוכים של האובייקט עצמו.

השלישי — אובדן פרטים שקופים למחצה. צעיף דק, זכוכית, עשן, שובל שיער דורשים שקיפות רציפה, ואילו החלטה נוקשה של «אובייקט או רקע» או מוחקת את האזורים האלה, או מותירה גווני ביניים מלוכלכים עם עקבות של הרקע הישן.

את זה פותרים לא באמצעות כיוונון סף, אלא בדרך אחרת של חישוב המסכה ועיבוד נפרד של הקצה — נסקור כיצד בדיוק.

האפקט של מטינג מדויק: מהירות וסוגי כשלים

בעבר אצווה נתקלה באותו תרחיש שוב ושוב: מסכה בינארית חותכת היטב את הרקע באובייקטים אחידים ומתפרקת על שיער, פרווה ובדים שקופים למחצה. שיעור התמונות ללא תיקון ידני עמד על אחד מכל חמישה פריימים, והשאר עבר לרטוש — באצווה גדולה צוואר הבקבוק הזה קבע את מועדי המסירה.

לאחר המעבר למטינג של הקצה עם הערכת שקיפות לפי פיקסל, התמונה משתנה באופן מדיד: שיעור הפריימים העוברים בדיקת קבלה ללא תיקונים עולה ל-80–90%, וקצוות שקופים למחצה — צעיף דק, זכוכית, אובך — מפסיקים לדרוש עיבוד מתאר. אצווה של כמה אלפי תמונות עוברת בדקות במקום שעות, וצוואר הבקבוק עובר מהעיבוד לקליטת קבצי המקור.

בנפרד אנו מודדים את סוג הפגמים של המסכה שנעלם: הילה לאורך קו המתאר של השיער, קצה קרוע, מדרגות בקווים אלכסוניים, אובדן גווני ביניים בשקיפות. אלה בדיוק המקרים שבעבר טופלו ידנית ושאותם הלקוח מבחין בהם ראשונים בעת הצפייה. את איכות האובייקט החתוך אנו מעריכים לא בעין, אלא לפי הסטייה מהתקן לאורך הגבול.

את הבקרה אנו מחזיקים על סט רגרסיה: פריימים מורכבים מסומנים פעם אחת ומורצים בכל גרסה חדשה של המודל. תקן ההשוואה — מסכה שנוצרה ידנית ב-Adobe Photoshop, והמדדים — שיעור הפריימים ללא תיקון והסטייה בקצה האובייקט.

גישות לסגמנטציה: רשת נוירונים, אלגוריתמים ותיקון ידני

את בחירת שיטת ההפרדה של האובייקט מכתיב לא האופנה, אלא סוג הקצה בפריים. היכן שהצילום נעשה על רקע אחיד וצבעוני אחד, הפרדה לפי סף צבע פועלת בשברירי שנייה ומניבה מסכה בינארית צפויה.

שיער, פרווה, בד שקוף למחצה, זכוכית ועשן דורשים מטינג באמצעות רשת נוירונים: רק הוא משחזר ערוץ אלפא עם מעבר חלק לאורך הקצה, ולא גבול קרוע ברוחב פיקסל אחד.

בפועל, רשת נוירונים טהורה לעתים רחוקות מכסה את כל הזרימה: הרשת מחזיקה היטב צורות גדולות, אך מאבדת דיוק היכן שהאובייקט נפגש עם רקע בגוון קרוב.

לכן בייצור מורכבת סכמת עיבוד היברידית — מסכה מהרשת הנוירונית, חידוד הקצה בשיטות סף לפי צבע, ותיקון ידני מופעל רק בפריימים שבהם הבדיקה האוטומטית מראה סטייה בקו המתאר.

שיעור הפריימים האלה בדרך כלל יורד לכמה אחוזים בודדים לאחר כיוונון הספים לרקע הספציפי, והוא בדיוק שקובע כמה מפעילים יש להחזיק במשמרת.

שלבי ההטמעה: מביקורת המדגם ועד למסירה

אנו מתחילים בביקורת דגימות: אוספים פריימים אמיתיים של הלקוח — רקעים שונים, קצוות מורכבים, אובייקטים שקופים למחצה — ומסמנים מסכות תקן. בלעדי זה אי אפשר לא לבחור מודל ולא להוכיח איכות: מדד על תמונות זרות לא אומר דבר על החומר שלכם. לכן סדר העבודה תמיד זהה — מניתוח המדגם לזרימה, ורק אחר כך לכיוונון הסרת הרקע באמצעות רשת נוירונים.

1. ביקורת דגימות תמונות: 200–500 פריימים מהמקורות שלכם, מסכות תקן ומבחר נפרד של מקרים מורכבים — שיער, פרווה, זכוכית, אובייקט על גבול הפריים.
2. סכמת זרימת העיבוד: היכן ההעלאה, היכן העיבוד המקדים, היכן הרצת המודל והשלמת הקצה, וכיצד המסכה המוכנה מגיעה לאחסון או לעורך.
3. כיוונון: התאמת מודל לסוג החומר ואימון נוסף על הפריימים שלכם, אם התוצאה הבסיסית מניבה קו מתאר קרוע.
4. בדיקה על מדגם מושהה: פריימים שלא השתתפו בכיוונון. מחשבים את שיעור המסכות הנקיות, מנתחים שגיאות ידנית ומודדים מהירות על הנפח שלכם.
5. תיאום ספים: קובעים איזה שיעור פריימים עובר לתיקון ידני — זהו קריטריון קבלה, ולא הבטחה ל«מושלם תמיד».
6. הרכבה תעשייתית: תורים, ניסיונות חוזרים, רישום לוגים, בקרת עומס; פורסים בסביבה שלכם או בענן.
7. מסירת הפתרון לצוות: תיעוד, הרשאות, הכשרת מומחים ותקנון עדכון מודלים עם הופעת סוגי צילום חדשים.

הטמעת עיבוד התמונות מסתיימת לא בהדגמה, אלא בתהליך עובד: המהנדסים שלכם מפעילים בעצמם את העיבוד, קוראים את הלוגים ומבינים לאן להסתכל כאשר האיכות סוטה.

ארטיפקטים: קונפיגורציות, מסכות ותקנוני איכות

לאחר הפרויקט נשאר אצל הלקוח לא סט סקריפטים, אלא סביבת עבודה פעילה להסרת רקע, שאותה הצוות מתחזק בלעדינו. אנו מעבירים קונפיגורציות, כללים ומסמכים כך שהחלפת מודל או סוג פריימים לא תהפוך לכתיבה מחדש של התהליך.

• קונפיגורציית סביבת העיבוד — פרופילים לפי סוגי פריימים (פורטרט, מוצר על רקע לבן, שיער ופרווה, קצוות שקופים למחצה): סף הביטחון של המסכה, רדיוס החלקת הקצה, מצב השלמת הרקע. הפרופילים נשמרים במאגר ונפרסים בפקודה אחת.
• מדיניות גישה לנתונים — תפקידים, תקופות אחסון של קבצי מקור ומסכות, כללי אנונימיזציה, רישום לוגים של פניות: מי ואילו תמונות יכול להעלות, להוריד ולמחוק.
• תקנון איכות המסכה — מדדי קבלה: שיעור שגיאות הפיקסלים בגבול, שמירת השיער והשקיפות למחצה, התנהגות על רקע מורכב. אצווה מתחת לסף עוברת לניתוח, ולא לזרימה הכללית.
• מדגם בקרה — פריימים לתקן עם מסכות צפויות לבדיקת רגרסיה: עדכון המודל מורץ עליו לפני העלייה לאוויר.
• תיעוד הפתרון — סכמת הסביבה, נקודות כשל, נוהל חזרה לגרסה קודמת, מגבלות ידועות ומצבי ירידת ביצועים.
• אינטגרציה עם מערכת התוכן — פורמטי החלפה (תמונה עם ערוץ אלפא ושכבת מסכה נפרדת), התראות לפי אירועים, התנהגות כאשר השירות אינו זמין ושליחה חוזרת של הבקשה.
• הוראות לצוות — כיצד להוסיף פרופיל, לאמן את המודל מחדש על נתונים חדשים, לנתח תקרית ולעדכן את התקנון.

מקרה בוחן: קטלוג מוצרים, זמן עיבוד ושיעור הפגמים

הקטלוג של הלקוח — כמה עשרות אלפי כרטיסים, תצוגות מקדימות של מוצרים צולמו על רקע לבן אחיד. המורכבות לא הייתה בנפח, אלא באופי החפצים: סיבים, קצוות שקופים למחצה, ברקים על מבריק וצל רך מתחת לבסיס. חיתוך ידני עיכב את התור: אצווה נשלחה לפרסום בימים, וחלק ניכר מהפריימים חזר לתיקון.

מה שינינו בקונ�вейер

הרכבנו קונבײר על בסיס מודל הסגמנטציה Segment Anything: מסכה לפי החפץ, מטינג נפרד של הקצה ושכבת צל נפרדת, שאינה נחתכת עוד יחד עם הרקע. כל פריים עובר בדיקה אוטומטית לאיתור הילה ואובדן אזורים שקופים למחצה — במקרה של כישלון הוא עובר לעיבוד חוזר עם פרמטרים אחרים, ולא לקטלוג.

מה זה הביא

תוצאות הטמעת המטינג הופיעו בזרימה: הקטלוג מתווסף באותו יום, ולא ביום שלמחרת, ושיעור הפגמים הפסיק לתלות במי בדיוק צילם את האצווה. רקע לבן אחיד בתצוגות המקדימות של המוצרים הסיר את הרעש החזותי בקטלוג — הכרטיסים נראים כקו אחד.

במה נבדל מטינג מדויק ממסכה בינארית?

מסכה בינארית עונה על שאלה אחת בלבד: האם הפיקסל שייך לאובייקט או לרקע. בתוך קו המתאר התשובה מובנת מאליה, אך בגבול אין תשובה כזו — קצה שיער, זכוכית, עשן, קו מתאר מטושטש או בד שקוף למחצה תופסים כמה פיקסלים, שכל אחד מהם הוא בו-זמנית גם אובייקט וגם רקע. עיגול פיקסל כזה לאפס או לאחד מתבטא בשוליים קרועים ובהילה מהרקע הישן.

מטינג מדויק, במקום החלטה על שייכות, מעריך את מידת השקיפות — מקדם מאפס עד אחד. השחזור נעשה לפי מודל הערבוב I = α·F + (1−α)·B, שבו בכל פיקסל מופרד התרומה של האובייקט מהתרומה של הרקע. השקיפות למחצה לאורך הקצה נשמרת ככזו, ואינה נחתכת על ידי סף.

ההבדל בין שיטות ההפרדה ניכר גם בדרישות לנתונים: למסכה בינארית די בקו מתאר גס, ולמטינג דרושים שוליים המסומנים ברמת הפיקסל. את הגישות המעשיות הראשונות לסימון כזה תיארו מחברי Deep Image Matting, ומאז הרשת הנוירונית מקבלת בקלט לא רק את התמונה, אלא גם רמז על האזור השנוי במחלוקת.

בחפצים קשיחים עם קו מתאר אחיד — קופסה, ריהוט, מכשירים על רקע אחיד — המסכה הבינארית זולה ומהירה יותר: קו המתאר מחושב במעבר אחד. ערבוב הפיקסלים בגבול תופס שם שברי אחוז מהשטח, והחידוד כמעט אינו משנה את התמונה. היכן שהשוליים ניכרים לעין, החיסכון מתגלגל לתיקון ידני.

בפועל אנו הולכים בהיברידי: סגמנטציה גסה מתווה את האובייקט, ורשת מחדת מחשבת שקיפות רק בשוליים. זה מפחית את העומס החישובי ובו-זמנית מסיר את ההילה, ולכן מספר איטרציות התיקון הידני לאחר מעבר כזה יורד פי כמה ביחס להפרדה בינארית.

ספקות טכניים: איכות, עומס, סביבה סגורה

ההתנגדויות של הצוות ההנדסי בהתחלה הן בדרך כלל אותן התנגדויות: האם המודל יתמודד עם שיער ופרווה, האם השירות יעמוד בייצוא המוני של הקטלוג, האם אפשר לא לשלוח תמונות החוצה. להלן תשובות ענייניות: מה נפתר ברמת המודל ומה ברמת הארכיטקטורה של השירות.

מה יהיה עם העומס בעיבוד המוני?

הרצת המודל צורכת משאבים, ולכן שירות עיבוד תמונות עצמאי נבנה סביב תור: הבקשות מאוחדות לחבילות, הוורקרים מתרחבים אוטומטית, ולתצוגות מקדימות פועל מסלול מקל. ייצוא לילי של כל הקטלוג עובר בתור נפרד ואינו דוחק את הבקשות האינטראקטיביות ביום. תפוקת המערכת גדלה בהוספת וורקרים, בלי לכתוב מחדש את הלוגיקה.

האם אפשר לעבד נתונים בסביבה סגורה?

כן. השירות נפרס בהיקף שלכם: מכולות, רג'יסטרי פרטי של אימג'ים, ללא קריאות חיצוניות לשירותים זרים. המשקלים מאוחסנים מקומית, ולכן הסביבה יכולה לפעול גם ללא חיבור לאינטרנט. הלוגים, המדדים והתמונות עצמן נשארים בתוך התשתית שלכם — הגישה אליהם היא של הצוות שלכם.

כיצד נפתרות שאלות הזכויות על נתונים ומודלים?

אימון נוסף על התמונות שלכם — רק באישור בכתב; כברירת מחדל הן אינן יוצאות מהסביבה ואינן משתתפות באימון מודלים של צד שלישי. רישיונות על המשקלים וסדר השימוש המסחרי אנו מקבעים בחוזה, כדי שהזכויות יהיו חד-משמעיות. יחד עם השירות אנו מוסרים תיעוד על המודל ועל הפריסה.

נדון במשימה: נפח הקטלוג והדרישות לקצה

כדי שהשיחה תהיה עניינית וההערכה ריאלית, אנו זקוקים לפרוסה קטנה של התוכן שלכם ולהבנה לאן התוצאה ממשיכה מכאן. להלן מה לשלוח ומדוע כל סעיף משפיע על הפתרון הסופי.

• דגימות תמונות — 20–30 פריימים אופייניים ובנפרד 5–10 «לא נוחים»: שיער, פרווה, בדים שקופים למחצה, זכוכית, תנועה, רקע מגוון. עליהם אנו רואים היכן המסכה נקרעת, ומתאימים את מצב העיבוד לחומר שלכם, ולא לתמונות הדגמה.
• דרישות לאיכות המסכה — האם נדרש קצה בינארי נוקשה לכרטיס מוצר או שקיפות למחצה רכה להנחה על רקע חדש, איזו רמת פירוט בשיער קריטית ואילו ארטיפקטים בקצה אתם מחשיבים כבלתי קבילים.
• לאן הולכת התוצאה — הפורמט בפלט (PNG עם ערוץ אלפא, TIFF, JPEG על לבן), האם נדרש צל, חיתוך לפי גבולות האובייקט או שמירת הפריים המקורי.
• תיאור מערכת התוכן — מהיכן מגיעים הקבצים (מחסן חומרים, ייצוא ממערכת רישום, צילום אולפני), כמה צילומים בחודש ובעוד כמה זמן נדרשת התוצאה.
• מצב העיבוד המקבץ המצופה — ניקוי חד-פעמי של הקטלוג או זרימה מתמשכת; האם נדרשת קבלה אוטומטית לפי סף הביטחון ותיקון ידני של פריימים שנויים במחלוקת.
• מגבלות על הנתונים — מה אסור לייצא אל מחוץ לסביבה שלכם, היכן צריכים להישמר התמונות והמסכות, מי בצד שלכם אחראי על ההרשאות.

עם הסט הזה אנו חוזרים עם הערכה ותוכנית עבודה: איזה שיעור פריימים עובר ללא התערבות אדם, היכן אנו מציבים בקרת איכות ובאיזה מצב אנו מפעילים את הזרימה.